Семинар HDI Lab: Часть I: Точная и эффективная оценка спектральной нормы сверточных слоев нейросетейЧасть II: Guide-and-Rescale: Self-Guidance Mechanism for Effective Tuning-Free Real Image Editing
В ближайший четверг, 19 сентября, в 14:40 с докладами выступят Екатерина Гришина (НИУ ВШЭ) и Александра Иванова (НИУ ВШЭ, AIRI)
Часть I:
В докладе будет сделан обзор методов вычисления спектральной нормы свертки. Будет рассказано о новой оценке спектральной нормы сверточного слоя с помощью спектральной нормы ядра. Будет рассмотрено применение данной оценки к регуляризации сверточных нейросетей.
Часть II:
Диффузионные модели активно применяются для редактирования реальных изображений. Для того, чтобы достичь желаемого редактирования обычно используеся classifier-free guidance, однако этого недостаточно, чтобы сохранить структуру исходного изображения. Guide-and-Rescale использует механизм self-guidance для сохранения частей изображения, которые не должны меняться, благодаря чему получается более стабильное редактирование. Более того Guide-and-Rescale не требует оптимизации и файнтюнинга, благодаря чему работает вычислительно эффективно.