Микрософт научил ИИ понимать, что происходит на видео

ИИ посмотрел «Друзей», «Как я встретил вашу маму» и немного YouTube.

Микрософт научил ИИ понимать, что происходит на видео

😒 Проблема: искусственный интеллект не очень умён. Например, не может сказать, какое утверждение о видео верно, а какое неверно.

😮 И тут научили ИИ понимать контекст видео, исходя из сложного массива информации — видео и текста.

🙂 Как научили: взяли реальных людей, заставили их смотреть 30-секундные нарезки видео с субтитрами и пояснять коротко, что там происходит в сто пятой серии «Санта-Барбары». Получили огромный массив информации. ИИ всё посмотрел, проанализировал и научился.

👥 Кто: Microsoft и ученые из Калифорнийского университета.

😎 И что: теперь можно создавать ИИ-софт, который сможет безошибочно транскрибировать встречи, понимая как визуальную информацию, так и текстовую.

👉 Почитать: https://arxiv.org/pdf/2003.11618.pdf

Получите ИТ-профессию
В «Яндекс Практикуме» можно стать разработчиком, тестировщиком, аналитиком и менеджером цифровых продуктов. Первая часть обучения всегда бесплатная, чтобы попробовать и найти то, что вам по душе. Дальше — программы трудоустройства.
Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию
Вам может быть интересно
Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии
Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии

Он делает выводы, измеряя температуру тела.

Зацените: роботы готовят хот-доги, но пока без кетчупа
Зацените: роботы готовят хот-доги, но пока без кетчупа

И горчицу мы не получим.

ИИ предсказывает эпилептический припадок за час до первых признаков
ИИ предсказывает эпилептический припадок за час до первых признаков

Точность предсказания припадка — 99%.

Нейронку научили диагностировать системный склероз
Нейронку научили диагностировать системный склероз

Поиск склероза на обычном ноутбуке.

Посмотрите: дрон, который снимает всё на свете в 3D
Посмотрите: дрон, который снимает всё на свете в 3D
Сделали нейронку, которая определяет высоту деревьев по спутниковым снимкам
Сделали нейронку, которая определяет высоту деревьев по спутниковым снимкам
Сделали краску, которая может заменить солнечные батареи
Сделали краску, которая может заменить солнечные батареи
Разработали биопластик, который создаётся бактериями и может перерабатываться бесконечно
Разработали биопластик, который создаётся бактериями и может перерабатываться бесконечно
Попробуйте: переводчик кошачьего языка
Попробуйте: переводчик кошачьего языка

Помогает понять, когда кошка просит есть, а когда — гулять