Comment nous testons les correspondances de Style Finder

Nos photos de test

Nous conservons deux séries de photos, chacune avec une réponse connue : le produit précis illustré par la photo.

• 32 photos de produits très connus : 20 paires de chaussures, 6 vêtements et 6 accessoires, allant des baskets et bottines jusqu'au sac à dos, à la montre et aux lunettes de soleil. Ce sont de vraies photos de produits portés, tenus à la main ou posés à plat, publiées sous licence libre sur Wikimedia Commons.
• 13 photos plus complexes : des personnes photographiées lors d'événements, et des captures d'écran imitant des publications de réseaux sociaux, avec des légendes, des @identifiants et des hashtags autour de la photo. Une légende mentionne un produit différent de celui présent sur la photo, et une autre tente d'orienter l'application vers une boutique : l'application doit se fier à ce qu'elle voit.

Comment nous évaluons une recherche

Chaque photo passe exactement par les mêmes étapes que dans l'application : trouver les articles, encadrer celui que nous voulons, chercher dans les boutiques, consulter les pages des boutiques et comparer les photos. Aucune étape n'est ignorée et aucune aide supplémentaire n'est fournie. Pour chaque recherche, nous relevons :

• si le bon produit est la première correspondance possible, s'il figure parmi les trois premières, ou s'il est manquant ;
• si la bonne correspondance possède une photo et un prix lus depuis la page même d'une boutique ;
• la durée de la recherche ;
• ce qui a échoué en cas d'erreur.

Les derniers résultats

bon produit en premier, sur 32 photos de produits très connus

97 %

bon produit en premier, sur 13 photos de célébrités et réseaux sociaux

69 à 85 %

des correspondances affichées avec une photo

100 %

Une recherche classique prend environ 10 à 11 secondes, du choix de l'article jusqu'à l'affichage des correspondances.

Ce qui pose encore problème

• Les articles qui ne peuvent plus être achetés neufs. Une casquette en rupture de stock a été nommée correctement, mais aucune boutique ne la vend neuve, l'application ne peut donc pas la proposer. Dans ce cas, elle t'indique que l'article n'est plus disponible neuf et affiche des articles similaires.
• Les modèles presque identiques. Les modèles d'une marque peuvent se ressembler énormément sur une photo, comme deux sacs à main du même créateur. La comparaison de photos ne parvient pas toujours à les distinguer.
• Les légendes erronées. Lorsque la légende d'une publication mentionne un produit différent de celui figurant sur la photo, il arrive que l'application s'y fie.

Comment nous utilisons les résultats

Chaque modification du système de recherche de Style Finder est testée sur les deux séries avant sa mise en ligne, et n'est conservée que si le bon produit apparaît en premier au moins aussi souvent. Certaines modifications qui semblaient prometteuses n'ont pas été retenues : laisser l'IA réfléchir plus longtemps doublait le temps d'attente sans aucun gain, et rétrograder les produits lorsqu'aucune page de boutique n'était trouvée plaçait plus souvent les mauvaises correspondances en premier. Parmi les modifications validées figurent la lecture des noms de marques et des numéros de modèles imprimés sur un article, ainsi que la recherche d'une photo pour chaque correspondance, afin que chacune de celles que tu vois en possède une.

Tu veux en savoir plus sur l'application elle-même ? Consulte la page À propos de Style Finder.