Microsoft CaptionBot utilise A.I. identifier les photos sans commettre les erreurs de Tay

Microsoft est toujours fier de son A.I.Tay, s’est avéré un peu plus hitlérien qu’on ne l’espérait en homme ou en machine. Alors maintenant, la société a déployé un A.I. logiciel de sous-titrage qui tente d'identifier les images dans les images. Il suffit de télécharger une image, et CaptionBot essaiera de vous dire ce qu’elle contient. Nous ne pouvons pas garantir la politique du bot, mais sa capacité de capturer une image semble assez forte.

La technologie utilise diverses fonctionnalités de Microsoft pour décomposer les images. Computer Vision dissèque les éléments importants d'une photo. L'API Emotion divise les expressions faciales en catégories emoji et l'API Bing Image identifie les éléments d'image restants. Ensuite, un logiciel en langage naturel configure ses conclusions dans un anglais simple.

Le site identifie mieux les images de célébrités, tandis que des images plus abstraites tendent à le confondre. On pourrait s’attendre à ce que de simples objets et symboles de la maison prédominent, mais une fois que le bot aura repéré un visage dans une image, il n’est certes pas difficile de faire une recherche d’image Bing inversée. Il doit y avoir des millions d'images de Steph Curry en ligne, alors cette pièce d'identité confuse n'est qu'en partie aussi impressionnante qu'il n'y paraît.

Dans nos tests, le bot a également eu du mal à utiliser des images contenant plusieurs éléments. Comme sur une photo avec un bateau devant la Statue de la Liberté, l'algorithme a capturé le bateau, mais pas le statut. Donc, ce n’était pas mal, mais ce n’était pas bien non plus.

En général, cependant, le bot fait un très bon travail pour couvrir ses bases, supprimant rarement complètement.

Le site mentionne qu'il collecte vos photos et vos notes pour aider à améliorer l'algorithme, mais il ne conserve aucune information d'identification. C’est une bonne chose. Microsoft ne peut donc pas vous inviter à rechercher des photos de ses concurrents. En fait, Microsoft semble jouer un peu en sécurité avec le CaptionBot.

Ainsi, lorsque vous vous aventurez sur un territoire dangereux, CaptionBot se ferme. Reste à savoir si ce n’est qu’une coïncidence ou une réaction programmée à la mauvaise presse de Tay, mais CaptionBot préférerait prendre un peu de temps que de jouer à des jeux avec Internet. Faites un test ici, mais s'il vous plaît soyez doux. Si nous cassons un autre bots de Microsoft, la société ne nous laissera peut-être plus jamais de belles choses.