Микрософт научил ИИ понимать, что происходит на видео

ИИ посмотрел «Друзей», «Как я встретил вашу маму» и немного YouTube.

Микрософт научил ИИ понимать, что происходит на видео

😒 Проблема: искусственный интеллект не очень умён. Например, не может сказать, какое утверждение о видео верно, а какое неверно.

😮 И тут научили ИИ понимать контекст видео, исходя из сложного массива информации — видео и текста.

🙂 Как научили: взяли реальных людей, заставили их смотреть 30-секундные нарезки видео с субтитрами и пояснять коротко, что там происходит в сто пятой серии «Санта-Барбары». Получили огромный массив информации. ИИ всё посмотрел, проанализировал и научился.

👥 Кто: Microsoft и ученые из Калифорнийского университета.

😎 И что: теперь можно создавать ИИ-софт, который сможет безошибочно транскрибировать встречи, понимая как визуальную информацию, так и текстовую.

👉 Почитать: https://arxiv.org/pdf/2003.11618.pdf

Получите ИТ-профессию
В «Яндекс Практикуме» можно стать разработчиком, тестировщиком, аналитиком и менеджером цифровых продуктов. Первая часть обучения всегда бесплатная, чтобы попробовать и найти то, что вам по душе. Дальше — программы трудоустройства.
Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию
Вам может быть интересно
Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии
Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии

Он делает выводы, измеряя температуру тела.

Зацените: роботы готовят хот-доги, но пока без кетчупа
Зацените: роботы готовят хот-доги, но пока без кетчупа

И горчицу мы не получим.

ИИ предсказывает эпилептический припадок за час до первых признаков
ИИ предсказывает эпилептический припадок за час до первых признаков

Точность предсказания припадка — 99%.

Изобрели: свеча с дистанционным зажиганием (но не автомобильная)
Изобрели: свеча с дистанционным зажиганием (но не автомобильная)

Для тех, у кого уже всё есть.

Создали ранозаживляющие чернила, которые можно наносить с помощью 3D-ручки
Создали ранозаживляющие чернила, которые можно наносить с помощью 3D-ручки
Придумали, как превращать одежду в датчики
Придумали, как превращать одежду в датчики
Сделали алгоритм, который прогнозирует действия спортсменов по явным и скрытым признакам с точностью 80%
Сделали алгоритм, который прогнозирует действия спортсменов по явным и скрытым признакам с точностью 80%
Сделали экзомускулатуру из текстиля для повышения выносливости
Сделали экзомускулатуру из текстиля для повышения выносливости
Сделали солнечный реактор, который преобразует пластиковые отходы и углекислый газ в топливо
Сделали солнечный реактор, который преобразует пластиковые отходы и углекислый газ в топливо