Семинар Научно-учебной лаборатории компании Яндекс "Распределённая система для работы с большими языковыми моделями"

Дата: 17 мая 2023 г., 15:00

Докладчик: Борзунов Александр, стажер-исследователь Научно-учебной лаборатории компании Яндекс

Аннотация: Многие задачи по обработке текстов могут быть решены с помощью больших языковых моделей — нейросетей, которые часто имеют более 100 млрд параметров. В последнее время несколько таких моделей были опубликованы в открытом доступе. Тем не менее, они всё ещё остаются недоступными для многих исследователей, так как запуск таких моделей требует дорогостоящего оборудования.

На предстоящем семинаре мы обсудим, как использовать большие модели, если у вас нет собственного кластера из дорогих видеокарт. Среди прочего, расскажем про Petals — децентрализованную систему, позволяющую исследователям на разных концах планеты объединить их вычислительные ресурсы для запуска больших моделей и решения различных задач с их помощью.

Местро проведения: Zoom 

Идентификатор конференции: 884 5438 4629
Код доступа: 326939