Нейронным сетям полезно спать

😢 Проблема: некоторые нейросети становятся нестабильными, если долго обучаются без присмотра.

😴 Решение: дать им поспать. Искусственным нейронным сетям, которые подобны живым, может пойти на пользу цикличность, похожая на ночной отдых у людей. Нейронки ввели в своего рода сон с помощью гауссовского шума — он имитирует состояние, в которое входят человеческие нейроны во время медленного сна.

Теперь планируют реализовать эту идею на чипе нейроморфных исследований Intel Loihi. В теории, если время от времени чип «спит», он сможет обрабатывать информацию в ​​режиме реального времени гораздо стабильнее.

👨‍🔬 Кто: учёные из Лос-Аламосской национальной лаборатории.

Источник: E&T