Journal Une recherche d'image avec un peu de sémantique

Posté par  (site web personnel) .
Étiquettes : aucune
0
10
août
2007
Je viens de tomber sur un site web de recherche d'image qui index des sites de partages d'image.

Google image semble traiter les caractères autour de la photo pour indexer une photo, ici, le moteur "comprends" des choses. Ok, cela marche surtout pour les couleurs.

http://www.feelimage.net

Amusant de tester avec les pseudo de linuxfr. pterjan tu es fiché ! :)

vu ici :http://www.infos-du-net.com/actualite/11417-Moteur-de-recher(...)

  • # Mmmmm...

    Posté par  . Évalué à 2.

    Moi qui était justement a la recherche d'images (photos et dessins) de Bruce Lee, afin (d'essayer) de réaliser une caricature 3D dans le but de ma familiariser avec Blender.

    Et bien pour une recheche avec "bruce lee" ce moteur me retourne 3 pages de résultats sans aucun lien avec la star en question.

    :(

  • # Comment ça marche?

    Posté par  . Évalué à 1.

    J'ai pas trop compris la technologie utilisée derrière.

    Tu semble dire que la techno est différente de celle utilisée par google image pourtant il me semble que ce soit pareil (recherche de texte autours de l'image).

    Car j'ai essayé avec un mot en français et ça marche. A moins qu'il fasse traducteur aussi!

    Si tu peux expliquer un peu plus son fonctionnement interne. Je ne pense pas qu'il analyse l'image....

    • [^] # Re: Comment ça marche?

      Posté par  . Évalué à 5.

      Manifestement, en plus, il devrait analyser la composition de couleur de l'image pour pouvoir utiliser les couleurs en critères de recherches ...

      Il disent utiliser aussi des critères temporels (printemps, été, à midi, ...), je suppose qu'ils font ça par couleur(s) dominantes + luminosité globale de l'image ... Enfin ça à pas forcément l'air tout à fait au point, ça ;)


      Parler de sémantique pour (ce qu'il me semble être) des mots-clés liés à des valeurs pré-définies et une correspondance directe entre mots de recherche / tags de l'image me paraît un peu excessif ;)

    • [^] # Re: Comment ça marche?

      Posté par  . Évalué à 1.

      Ca me semble assez simple (bon en meme temps j'ai fait ma these de doctorat sur le sujet donc ca aide...):
      * Ils utilisent les mots clefs comme Google image
      * En plus, ils calculent l'histogramme (probablement HSV) de l'image, et mappent ca sur une discretisation de l'espace de couleur (c'est-a-dire qu'ils determinent ce que "black", "blue", "red" signifient)

      Au final, leurs images sont annotees avec des mots-clefs mais aussi avec des couleurs. C'est tres basique.

      La ou ca pose probleme, c'est qu'ils laissent entendre qu'on peut chercher "red flower" pour trouver une fleur rouge, mais on cherche en fait une photo qui a du rouge ET une fleur. Que ce soit la fleur qui est rouge ou pas, on en sait rien.

      Exemple: j'ai cherche "white dog" et voila ce que je trouve:
      http://www.feelimage.net/photo/ImageDetail.asp?fi=1494255
      http://www.feelimage.net/photo/ImageDetail.asp?fi=2809231
      http://www.feelimage.net/photo/ImageDetail.asp?fi=436298

      Du blanc, un chien... Mais pas un chien blanc.

      Bon, il faut reconnaitre que savoir trouver "chien blanc" sans qu'un humain aie explicitement annote la photo avec ca releverait du miracle, parce qu'il faudrait reussir a identifier automatiquement quelle partie de la photo est un chien.

      Trouver automatiquement ce genre d'information dans une photo marche pour une base de donnees specialisee : si tu veux faire une base de donnees de photos de chiens, tu peux ecrire des algos qui reconnaissent un chien par la forme et la texture. Mais dans une base de donnees generaliste, ne serait-ce que segmenter l'image en objets du monde reel est tres complique, car necessite une connaissance globale du monde.

      Le plus deprimant la dedans, c'est que dans les annees 90 beaucoup de chercheurs affirmaient qu'annoter manuellement une base de donnees d'images demandait trop de travail et que personne ne le ferait, mais Flickr et consorts ont prouve l'inverse.

  • # Un article très intéressant sur le sujet

    Posté par  (Mastodon) . Évalué à 1.

    Pour ceux que cela intéresse, voici un article super bien foutu sur le sujet :
    http://interstices.info/display.jsp?id=c_19256&qs=id%3Dj(...)

    L'article passe en revue les différentes techniques possibles d'indexation de document multimédias, quels sont les principaux problèmes, ... et on comprend vite pourquoi cela ne peut pas marcher pour l'instant sur des bases généralistes.

    A lire absolument.

Suivre le flux des commentaires

Note : les commentaires appartiennent à celles et ceux qui les ont postés. Nous n’en sommes pas responsables.