Désormais, les textes intégrés dans les images postées par les utilisateurs sur Facebook peuvent être déchiffrés. Le réseau social lance son système d’apprentissage automatique, Rosetta. Dans une note de blog, il est expliqué que Rosetta recueille des milliards d’images de Facebook et Instagram. Les textes extraits sont ensuite envoyés vers une base chargée d’en comprendre le contexte. L’objectif est de facilité la recherche d’images intéressantes selon les habitudes d’un utilisateur. Le réseau social veut également venir en aide aux malvoyants grâce à la description des images. Ce sera aussi un moyen efficace dans le filtrage des contenus qui ne conviennent pas aux règlements du réseau social.
Rosetta est utilisée par les équipes de Facebook et Instagram, mais il n’est pas encore très efficace. Le système a encore quelques points à améliorer en ce qui concerne la lecture des textes dans les vidéos. Pourtant, elles sont plus sollicitées et leur utilisation est de plus en plus populaire. L’extraction des textes image par image comme pour les photos n’est pas encore faisable pour les vidéos. On s’attend donc à découvrir d’autres méthodes. Pour le moment, Rosetta est entrainé avec des images publiques munies d’annotations créées par l’homme et aussi par des machines.
