Главная » Статьи » Компьютерная грамотность » Разное

"Яндекс" открыл доступ к библиотеке для обучения нейросетей

"Яндекс открыл для всех библиотеку YaFSDP. Она значительно ускоряет обучение больших языковых моделей - как собственной разработки, так и сторонних, с открытым исходным кодом. Библиотека дает ускорение до 25% - результат зависит от архитектуры и параметров нейросети. С помощью YaFSDP также можно расходовать до 20% меньше ресурсов графических процессоров (GPU), которые требуются для обучения", - сказано в релизе.

Библиотека в первую очередь рассчитана на текстовые модели, но подходит и для нейросетей, которые генерируют изображения.

Теперь YaFSDP могут использовать компании, разработчики и исследователи по всему миру. Как уточнили в компании, это позволит сократить расходы на оборудование для обучения моделей, что особенно важно для стартапов и научных проектов. Также библиотека позволит решить одну из проблем в обучении больших языковых моделей, связанную с недостаточной загрузкой каналов коммуникации между графическими процессорами.

"Библиотека оптимизирует использование ресурсов GPU (графический процессор - ред.) на всех этапах обучения… Благодаря этому YaFSDP задействует ровно столько графической памяти, сколько нужно для обучения, при этом коммуникацию между GPU ничто не замедляет", - отметили в "Яндексе".

 

https://1prime.ru/20240611/neyroseti-849064492.html

Категория: Разное | Добавил: Заведующая (01.07.2024)
Просмотров: 83 | Рейтинг: 0.0/0
Всего комментариев: 0
Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]