Как поясняют разработчики в блоге Facebook, машинное обучение позволяет алгоритму находить текст на картинках и видео, а затем распознавать его. Этот навык, по мнению представителей соцсети, полезен для анализа мемов.
Само по себе распознавания текста алгоритмами с ИИ не является принципиально новым шагом – делать это могут многие существующие программы, однако ни одна из них не способна справиться с объемами контента для анализа, которые предлагает Facebook. Поэтому в компании были вынуждены разработать собственный алгоритм – по утверждению создателей, Rosetta может ежедневно извлекать текст с миллиарда картинок и видео, загружаемых пользователями в Facebook и Instagram.
В настоящее время Rosetta уже приступила к работе, хотя алгоритм еще далек от совершенства. В перспективе его улучшенная версия должна будет не только распознавать мемы с текстом на разных языках, но и отличать безобидные картинки от содержащих оскорбления или разжигающих ненависть. Появление подобной системы может оказаться весьма полезным для Facebook, если позволит сократить число проблем, связанных с модерацией контента.