Микрософт научил ИИ понимать, что происходит на видео

ИИ посмотрел «Друзей», «Как я встретил вашу маму» и немного YouTube.

Микрософт научил ИИ понимать, что происходит на видео

😒 Проблема: искусственный интеллект не очень умён. Например, не может сказать, какое утверждение о видео верно, а какое неверно.

😮 И тут научили ИИ понимать контекст видео, исходя из сложного массива информации — видео и текста.

🙂 Как научили: взяли реальных людей, заставили их смотреть 30-секундные нарезки видео с субтитрами и пояснять коротко, что там происходит в сто пятой серии «Санта-Барбары». Получили огромный массив информации. ИИ всё посмотрел, проанализировал и научился.

👥 Кто: Microsoft и ученые из Калифорнийского университета.

😎 И что: теперь можно создавать ИИ-софт, который сможет безошибочно транскрибировать встречи, понимая как визуальную информацию, так и текстовую.

👉 Почитать: https://arxiv.org/pdf/2003.11618.pdf

Через год — лучше работа, выше зарплата
В «Яндекс Практикуме» становятся разработчиками с нуля. Выберите язык — веб, Python, Java, C++ — и учитесь. Джуны зарабатывают от 80 000 ₽, мидлы — от 150 000 ₽. Дальше — программы трудоустройства и компенсация, если пойдёте в Яндекс.
Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата
Вам может быть интересно
Зацените: роботы готовят хот-доги, но пока без кетчупа
Зацените: роботы готовят хот-доги, но пока без кетчупа

И горчицу мы не получим.

Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии
Изобрели: наноматериал, который может предупреждать о травмах и болезнях на ранней стадии

Он делает выводы, измеряя температуру тела.

ИИ предсказывает эпилептический припадок за час до первых признаков
ИИ предсказывает эпилептический припадок за час до первых признаков

Точность предсказания припадка — 99%.

Создатели Qwen выпустили ИИ размером всего 173 МБ — работает прямо на смартфоне
Создатели Qwen выпустили ИИ размером всего 173 МБ — работает прямо на смартфоне

Скорость — до 466 токенов в секунду

Создатель Ghostty выпустил libghostty 1.0 — готовый движок терминала для любых приложений
Создатель Ghostty выпустил libghostty 1.0 — готовый движок терминала для любых приложений

Он уже встроен в IDE от JetBrains

easy
В OpenSSH нашли абсурдную дыру — любой текст от 257 символов давал root-доступ к Linux
В OpenSSH нашли абсурдную дыру — любой текст от 257 символов давал root-доступ к Linux

Уязвимости было около 10 лет

easy
Веса Kimi K3.1 Pro открыли для всех — модель обошла GPT-6 Astra в кодинге
Веса Kimi K3.1 Pro открыли для всех — модель обошла GPT-6 Astra в кодинге

А в некоторых сценариях и Claude

easy
«Крестный отец ИИ» предупредил о катастрофе масштаба Чернобыля уже в 2027 году
«Крестный отец ИИ» предупредил о катастрофе масштаба Чернобыля уже в 2027 году

Звучит не очень обнадеживающе

easy
OpenAI показала GPT-6 Cyber — специальный ИИ для взлома и поиска уязвимостей
OpenAI показала GPT-6 Cyber — специальный ИИ для взлома и поиска уязвимостей

Модель уже нашла дыры в Firefox и Linux

easy