ИИ от Facebook учится по фото в Instagram

Новый алгоритм может самостоятельно распознавать изображения.

Екатерина Соколова

Редактор новостей о бизнесе и EdTech. Скроллить новостную ленту — и работа, и хобби.

Facebook* разработал новую программу, которая называется SEER (сокращённо от «SElf-supERvised»). В её основе лежит алгоритм, который распознаёт, что именно изображено на фото. По словам специалистов, эта технология — будущее компьютерного зрения.

Традиционно распознающие алгоритмы учились на наборах данных, которые перед этим были искусственно распределены по категориям людьми. Например, на фотографиях ставили специальные маркировки. Особенность нового алгоритма в том, что он самостоятельно распознаёт не какую-то условную пометку, а именно изображённый предмет. Искусственный интеллект учился на миллиарде фотографий из Instagram*. Известно, что сейчас SEER может идентифицировать изображения с точностью до 84,5%.

«Будущее ИИ — в создании систем, которые смогут учиться на основе любой информации, которую им предоставляют, будь то текст, изображение или что-то ещё, а не полагаться на тщательно отобранные и помеченные наборы данных. ИИ сумеет распознавать объекты на фотографиях, интерпретировать части текстов и выполнять любые другие необходимые задачи», — пишет Facebook* в блоге.

Технологии, в основе которых лежит метод Self-Supervised Learning, уже несколько лет применяются для распознавания речи, но для работы с изображениями требовался другой подход. Дело в том, что автоматически транскрибировать отдельные слова гораздо проще, чем идентифицировать, к какому предмету на картинке относится каждый пиксель.

Программа SEER училась работать и с целыми фотографиями, и с их частями. Теперь алгоритм может распознавать данные на основе отдельных фрагментов изображений. В Facebook* SEER будет много функций — от составления автоматических описаний для изображений до обнаружения фотографий, которые нарушают правила соцсети.

Компания планирует продолжать работу над приложением и поэтому скоро бесплатно откроет доступ к открытому исходному коду SEER для того, чтобы представители ИИ-сообщества смогли протестировать новую технологию.

^* Решением суда запрещена «деятельность компании Meta Platforms Inc. по реализации продуктов — социальных сетей Facebook и Instagram на территории Российской Федерации по основаниям осуществления экстремистской деятельности.