Семинар MTML Lab: Новый метод сжатия больших языковых моделей с помощью структурированных матричных разложений без дообучения
В этот четверг, в 17:00 пройдет семинар MTML Lab.С докладом выступит Екатерина Гришина
В докладе будет представлен метод для сжатия больших языковых моделей без использования файнтьюнинга и обратного распространения ошибки. Мы рассмотрим подход для эффективного сжатия линейных слоев с помощью структурированных матричных разложений, таких как кронекерово произведение и монархические (GS) матрицы