Придумали новый подход к обучению нейронок

😌 Проблема: тренировать ИИ на графическом ускорении очень затратно, нужны серьёзные мощности и огромный бюджет. GPU-ускорение — это дорого и долго.

😮 Изобрели: алгоритм SLIDE — сублинейный механизм глубокого обучения. Он делает обучение ИИ дешевле и быстрее благодаря CPU-ускорению.

🙂 Как работает: SLIDE делает всё то же самое, но работает на ядрах центрального процессора, а не графических процессорах в видеокарте. Стандартный метод обучения задействует все доступные мощности. SLIDE же использует только те нейроны, которые нужны прямо сейчас, и справляется с обучением нейронки за час. Старый алгоритм — за 3 часа. Безудержная оптимизация и ускорение работы.

👥 Кто: Университет Райса.

🤔 И что: у SLIDE есть свои недостатки, например, кеш-память переполняется. Похоже, GPU-ускорение пока никуда не денется. Но алгоритмы на дороге не валяются. В будущем планируют создать эффективный рабочий метод на базе текущей разработки. Ждём-с.

👉 Почитать: https://news.rice.edu/2020/03/02/deep-learning-rethink-overcomes-major-obstacle-in-ai-industry/