Logo Agora

 AccueilAccueil   Votre bibliothèqueVotre bibliothèque   Ajouter un livreAjouter un livre   FAQFAQ   RechercherRechercher   ForumsForums 
 MembresMembres   GroupesGroupes   ProfilProfil   Messages privésMessages privés   ConnexionConnexion 
   Poster un nouveau sujet  Répondre au sujet L'agora des livres Index du Forum » Fonctionnement de l'Agora    
Détente Du nouveau pour les mots-clés !
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Jeu 29 Nov 2007 10:51
MessageSujet du message: Détente Du nouveau pour les mots-clés !
Répondre en citant

On avait parlé il y a quelque temps de "rationaliser" les mots-clés (il y avait eu le sujet http://www.agoradeslivres.com/ftopic5328.php lancé par tofdelille et un autre sujet que je ne retrouve pas pour l'instant où c'est chlorine, il me semble, qui nous avait interpellé au sujet des "extraterrestres").

Eh bien, vous avez été entendu et j'ai rationalisé les mots-clés de l'Agora, en tout cas ceux qui étaient dans la base avant ce mercredi-ci. Vous pouvez le constater en allant voir la liste des mots-clés pour l'Agora (lien "en voir davantage" en page d'accueil ou bien en passant par votre bibliothèque).

J'ai aussi amélioré la gestion de ces mots-clés. Ca devrait prendre moins de temps pour afficher les pages ci-dessus (pour ceux qui savent ce que ça veut dire, je les ai mises en cache pour une durée de 24h).

Derrière cette rationalisation, il y a la notion de "mot-clé canonique" (chui pas sûr que ça existait avant, peut-être que j'ai inventé ça Wink). Un mot-clé est rattaché à un mot-clé canonique qui le représente. Ainsi "extra terrestre", "extraterrestre", "extra terrestres", "extraterrestres" ont tous pour mot-clé canonique "extraterrestre" (en un seul mot).
Autre exemple : "19eme siecle", "19e siecle", "XIXe siecle" ont comme mot-clé canonique "19e siecle". Mais "19e" peut désigner le 19e siecle ou le 19e arrondissement. Donc on ne peut pas le rattacher aux autres.
Par ailleurs, entre un singulier et un pluriel, c'est presque toujours le singulier que j'ai choisi comme canonique. J'ai gardé le pluriel lorsque celui-ci avait une connotation différente du singulier (par exemple "amours" et "amour"). En général j'ai gardé le masculin et le féminin "séparé" (je veux dire que l'un n'est pas le canonique de l'autre).

Les mots-clés canoniques ne sont utilisés que lorsque l'on compare plusieurs livres ou qu'on les rapproche dans une oeuvre, ou encore pour un comptage global comme dans les pages "nuages de l'Agora". Ils ne sont pas utilisés pour l'affichage d'un livre seul. Vos mots-clés sont donc gardés tels quels : si vous avez mis "extra terrestre", j'afficherai toujours "extra terrestre" sur votre livre. Je me suis juste permis de corriger quelques fautes de frappe flagrantes.

Pour le moment la recherche ne prend pas en compte les canoniques mais c'est une amélioration qu'il faudra faire, à mon avis. Pour l'instant on cherche sur les mots-clés tels que le lecteur les a entrés.

Comment pouvez-vous contribuer au processus ?

J'ai pris l'intiative de traiter moi-même les quelques 7000 mots-clés qui avaient été entrés jusqu'à présent. Mais je compte sur vous pour me signaler les regroupements souhaitables pour les nouveaux mots-clés (et aussi les anomalies sur les anciens !).

Je propose que vous utilisiez ce sujet (ce fil de discussion) pour me signaler une anomalie ou pour suggérer un regroupement. A chaque fois, donnez à la fois le mot-clé brut et le mot-clé canonique que vous préconisez.

S'il y a des questions, n'hésitez pas.

Je compte sur vous ! Wink
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
Auteur    Message
Cyberugo



Sexe: Sexe: Masculin
Inscrit le: 20 Oct 2007
Messages: 164
Localisation: Besançon
Âge: 37 Capricorne


Posté: Jeu 29 Nov 2007 18:41
MessageSujet du message:
Répondre en citant

Super idée !! Là comme ça je n'ai pas d'idée de regroupement, mais ça viendras... Rolling Eyes
Merci pour cette nouvelle innovation !
Voir le profil de l'utilisateur Envoyer un message privé absent
 
recherche étendue
Auteur    Message
andras




Sexe: Sexe: Masculin
Inscrit le: 20 Sep 2005
Messages: 1800
Localisation: Ste Foy les Lyon (69) -- France
Âge: 67 Verseau


Posté: Ven 30 Nov 2007 15:20
MessageSujet du message: recherche étendue
Répondre en citant

J'ai mis en place la "rercherche étendue" dont je parlais ci-dessus : lorsque l'on cherche en utilisant le champ "mots-clés", l'Agora va chercher non seulement sur les mots-clés que vous avez entrés mais aussi sur tous ceux qui ont le même mot-clé canonique que ceux que vous avez entrés.

Exemple :
Vous chercher sur les mots-clés : "voyage, etats-unis"
L'agora cherchera alors sur :
"voyage, voyages, etats-unis, etats unis, usa" ... et même quelques graphies incorrectes comme "etat-unis" ou "etats-uni"
(a noter que les accents et les majuscules sont ignorés dans cette recherche)

Cette extension aux mots-clés similaires marche aussi pour la selection des 7 livres par similarité de mots-clés qui s'affichent en bas de la page d'un livre. Cette sélection sera donc (dans le cas général) plus pertinente.

La prochaine étape consistera à mettre en place un système d'aide à la saisie des mots-clés.

Et je vais aussi ouvrir un autre fil pour rappeler comment se servir des mots-clés.
_________________
La critique est Thésée mais l'art est Hippolyte.
Voir le profil de l'utilisateur Envoyer un message privé Visiter le site web de l'utilisateur absent
 
Auteur    Message
Cyberugo



Sexe: Sexe: Masculin
Inscrit le: 20 Oct 2007
Messages: 164
Localisation: Besançon
Âge: 37 Capricorne


Posté: Mer 05 Déc 2007 18:59
MessageSujet du message:
Répondre en citant

antropomorphisme serait à regrouper sous le terme anthropomorphisme Wink
Voir le profil de l'utilisateur Envoyer un message privé absent
 
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Jeu 06 Déc 2007 14:37
MessageSujet du message:
Répondre en citant

c'est pris en compte.
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
Auteur    Message
tofdesbois




Sexe: Sexe: Masculin
Inscrit le: 24 Avr 2006
Messages: 315
Localisation: Creuse (23)
Âge: 53 Cancer


Posté: Mar 22 Jan 2008 12:14
MessageSujet du message:
Répondre en citant

Salut,

Je viens de remarquer une anomalie. Je vais voir dans le nuage des mots-clés, et je vois "jeu (12)". Pourtant quand je clique dessus, ça me dit qu'il n'y a aucun livre pour ce mot-clé.

De plus j'ai 10 fois le mot-clé "compagnie des glaces" dans ma bibliothèque, mais il n'apparaît pas dans le nuage, alors que je vois d'autres mots-clés avec la valeur 6 seulement.

Y a-t-il un délai de rafraîchissement ?

A+
Tof
Voir le profil de l'utilisateur Envoyer un message privé Visiter le site web de l'utilisateur absent
 
Auteur    Message
tofdesbois




Sexe: Sexe: Masculin
Inscrit le: 24 Avr 2006
Messages: 315
Localisation: Creuse (23)
Âge: 53 Cancer


Posté: Mar 22 Jan 2008 12:20
MessageSujet du message:
Répondre en citant

Pareil pour :
zen (10)
vin (9) -> il n'en affiche que 4.
vie (53) -> que 2 d'affichés.
Visiblement c'est lié aux mots de 3 lettres ou moins Rolling Eyes

Concernant le mot "compagnie des glaces", je le vois bien quand je suis sur le menu "Auteurs et mots clés" (donc uniquement sur ma bibliothèque).
Voir le profil de l'utilisateur Envoyer un message privé Visiter le site web de l'utilisateur absent
 
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Mar 22 Jan 2008 20:42
MessageSujet du message:
Répondre en citant

« tofdelille » a écrit:
Je viens de remarquer une anomalie. Je vais voir dans le nuage des mots-clés, et je vois "jeu (12)". Pourtant quand je clique dessus, ça me dit qu'il n'y a aucun livre pour ce mot-clé.

De plus j'ai 10 fois le mot-clé "compagnie des glaces" dans ma bibliothèque, mais il n'apparaît pas dans le nuage, alors que je vois d'autres mots-clés avec la valeur 6 seulement.

Y a-t-il un délai de rafraîchissement ?

bien vu, Tof ! Je vais me pencher là-dessus.
Oui, il y a un délai de rafraichissement pour les nuages qui concernent tout le site. Il était de 24 heures, ce qui était beaucoup. Je viens de la ramener à 4 heures.
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
on progresse ...
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Lun 28 Jan 2008 13:00
MessageSujet du message: on progresse ...
Répondre en citant

« tofdelille » a écrit:
Je viens de remarquer une anomalie. ...

Les anomalies que tu as signalées, Tof, sont pratiquement toutes corrigées. Ca m'a amené à effectuer des changements non négligeables dans la gestion des mots-clés mais c'était nécessaire !

Il y a parfois une petite différence entre le chiffre indiqué sur le nuage de mots-clés global (celui de l'Agora dans son ensemble) et celui qui s'affiche quand on clique sur le mot-clé. En effet, il ne mesure pas exactement la même chose : le premier est un nombre d'occurrences du mot-clé (ou d'un mot-clé similaire) dans la base de l'Agora, le second est le nombre de livres dans la base ayant ce mot-clé ou un mot-clé similaire. Or un livre peut avoir à la fois le mot-clé et un mot-clé "similaire" et dans ce cas le compte de livre est inférieur au nombre d'occurrence. D'autres éléments, comme la mise en cache du nuage de mots-clés, peuvent expliquer qu'au contraire, le nombre de livres soit supérieur au nombre d'occurrence du mot.

Toutefois si cette différence dépasse 10% ca serait probablement une anomalie. J'en ai détecté une avec "jeu" (mot-clé smilaire : "jeux"). Je tâcherai d'analyser cela.

Les mots-clés de moins de 4 lettres (art, vie, vol, zen ...) sont désormais traités correctement (aux exceptions près, cf. ci-dessus).

Le mot-clé "compagnie des glaces" est bien dans la liste des mots ayant au moins 10 occurrences. C'était dû au fait que je mettais les nouveaux mot-clés en attente de traitement "canonique" (pour les rapprocher éventuellement d'un autre mot-clé). Désormais, les mots-clés en attente de "traitement" apparaissent comme les autres, compte-tenu du délai du cache qui est de 4 heures.

Il m'est TRES facile de procéder à un rapprochement de 2 mots-clés (ou plus) tel que "voiture" et "voitures", "auto", "autos". Donc si vous voyez des rapprochements à faire qui m'ont échappé, n'hésitez pas à le signaler, par exemple ici ! Un rapprochement doit être valable pour tout livre ayant potentiellement ce mot-clé.
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
Auteur    Message
tofdesbois




Sexe: Sexe: Masculin
Inscrit le: 24 Avr 2006
Messages: 315
Localisation: Creuse (23)
Âge: 53 Cancer


Posté: Lun 28 Jan 2008 13:12
MessageSujet du message:
Répondre en citant

Beau travail !
Et merci pour les explications.
Voir le profil de l'utilisateur Envoyer un message privé Visiter le site web de l'utilisateur absent
 
Auteur    Message
chlorine



Sexe: Sexe: Féminin
Inscrit le: 30 Sep 2006
Messages: 620
Localisation: Paris


Posté: Mer 30 Jan 2008 21:46
MessageSujet du message:
Répondre en citant

Je viens de découvrir ce message après une période où j'ai été très peu présente sur l'agora.
Bravo et merci andras pour ce gros travail sur les mots clés, ça améliore vraiment le plaisir de jouer avec ! Smile
Voir le profil de l'utilisateur Envoyer un message privé absent
 
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Mer 30 Jan 2008 22:37
MessageSujet du message:
Répondre en citant

Merci Chlorine et Tof ! Very Happy
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Jeu 31 Jan 2008 9:55
MessageSujet du message:
Répondre en citant

« chlorine » a écrit:
Bravo et merci andras pour ce gros travail sur les mots clés, ça améliore vraiment le plaisir de jouer avec ! Smile

De mon côté, j'ai également "joué" ces derniers jours sur les critères de séléction des 7 livres "qui ont les mêmes mots-clés" que celui qui est affiché.
Il y a eu des essais qui ont eu des résultats un peu curieux et peu pertinents. Aujourd'hui, je pense être parvenu à un résultat "correct". Si toutefois vous tombez sur un ou plusieurs cas pour lesquels les livres sélectionnés vous semblent non pertinents (alors que d'autres le seraient davantage), n'hésitez pas à me signaler ces cas.
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
 
Auteur    Message
Faelivrin



Sexe: Sexe: Féminin
Inscrit le: 08 Jan 2008
Messages: 94
Localisation: Allemagne
Âge: 37 Taureau


Posté: Jeu 31 Jan 2008 22:13
MessageSujet du message:
Répondre en citant

Bonjour,
Est-ce que ce sujet concerne aussi les auteurs? Parce que suivant les cas, un même auteur est désigné différemment (par exemple Joanne K. Rowling, J-K Rowling et J. K. Rowling, ou Steven Saylor et Saylor Steven, ou encore J-R-R Tolkien, J. R. R. Tolkien et J.R.R. Tolkien). Y a-t-il un moyen pour qu'ils soient tous regroupé?
Voir le profil de l'utilisateur Envoyer un message privé absent
 
Auteur    Message
admin
Site Admin



Inscrit le: 20 Sep 2005
Messages: 490


Posté: Ven 01 Fév 2008 0:02
MessageSujet du message:
Répondre en citant

« Nimrodel » a écrit:
Bonjour,
Est-ce que ce sujet concerne aussi les auteurs?
Au début non, mais maintenant oui ! Wink
« Nimrodel » a écrit:
Parce que suivant les cas, un même auteur est désigné différemment (par exemple Joanne K. Rowling, J-K Rowling et J. K. Rowling, ou Steven Saylor et Saylor Steven, ou encore J-R-R Tolkien, J. R. R. Tolkien et J.R.R. Tolkien). Y a-t-il un moyen pour qu'ils soient tous regroupé?

C'est un sujet sur lequel j'ai l'intention de me pencher dès que j'aurai un peu de temps. Tu as tout-à-fait raison, il faut essayer de les regrouper dans le nuage d'auteurs comme j'ai essayé (et quasiment réussi) à le faire dans le nuage de tags pour des expressions comme "20e siecle" "20eme siecle", "XXe siecle", etc. Merci de me stimuler ! Cool
Voir le profil de l'utilisateur Envoyer un message privé Envoyer l'e-mail absent
Montrer les messages depuis:   
 
   Poster un nouveau sujet Répondre au sujet  L'agora des livres Index du Forum » Fonctionnement de l'Agora
Informations
Page 1 sur 1
 
Sauter vers:  
Powered by phpBB v2 © 2001, 2005 phpBB Group ¦ Theme : Creamy White ¦ Traduction : phpBB-fr.com (modifiée) ¦ Logo : Estelle Favre