Нейронным сетям полезно спать

Спят усталые нейронки.

Нейронным сетям полезно спать

😢 Проблема: некоторые нейросети становятся нестабильными, если долго обучаются без присмотра.

😴 Решение: дать им поспать. Искусственным нейронным сетям, которые подобны живым, может пойти на пользу цикличность, похожая на ночной отдых у людей. Нейронки ввели в своего рода сон с помощью гауссовского шума — он имитирует состояние, в которое входят человеческие нейроны во время медленного сна.

Теперь планируют реализовать эту идею на чипе нейроморфных исследований Intel Loihi. В теории, если время от времени чип «спит», он сможет обрабатывать информацию в ​​режиме реального времени гораздо стабильнее.

👨‍🔬 Кто: учёные из Лос-Аламосской национальной лаборатории.

Источник: E&T

Получите ИТ-профессию
В «Яндекс Практикуме» можно стать разработчиком, тестировщиком, аналитиком и менеджером цифровых продуктов. Первая часть обучения всегда бесплатная, чтобы попробовать и найти то, что вам по душе. Дальше — программы трудоустройства.
Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию Получите ИТ-профессию
Вам может быть интересно
Придумали новый подход к обучению нейронок
Придумали новый подход к обучению нейронок

Дешевле, быстрее, выше и сильнее.

Почему многие нейроночки названы именами из «Улицы Сезам»?
Почему многие нейроночки названы именами из «Улицы Сезам»?

Очередная программерская шутка со смыслом.

Арт-выставка на базе нейронок
Арт-выставка на базе нейронок

Художник сделал иммерсивную экспозицию на базе нейросетей. Да, теперь это искусство.

МТИ создали алгоритм, который распознает типы кашля
МТИ создали алгоритм, который распознает типы кашля

Диагностика заболеваний по звуку кашля.

Придумали простой способ извлекать пластик из смеси полиэстера и хлопка, чтобы такую ткань можно было перерабатывать
Придумали простой способ извлекать пластик из смеси полиэстера и хлопка, чтобы такую ткань можно было перерабатывать
Российский квантовый симулятор быстрее вычислительного кластера
Российский квантовый симулятор быстрее вычислительного кластера

Что-то на квантово-физическом.

Российская нейронка поможет сортировать мусор
Российская нейронка поможет сортировать мусор
Сделали нейросеть-сомелье на основе нового аппаратного обеспечения
Сделали нейросеть-сомелье на основе нового аппаратного обеспечения
VK Education запустил курсы по машинному обучению и управлению проектами
VK Education запустил курсы по машинному обучению и управлению проектами

Больше знаний, хороших и разных.