Семинар НУЛ ММВП "Предсказание структурных объектов на основе формальных контекстов и данных на естественном языке"

В четверг 30 марта 2023 г. в 18:00 состоится онлайн семинар по теме "Предсказание структурных объектов на основе формальных контекстов и данных на естественном языке". Докладчиком выступит Рамиль Яруллин, аспирант 4-го курса и преподаватель департамента больших данных и информационного поиска ФКН. Исследования, о которых будет рассказано в докладе, сделаны в рамках аспирантской школы, работы в Яндексе и научно-учебной лаборатории Яндекса на ФКН.

Аннотация: В докладе будет рассмотрено несколько задач построения и предсказания структурных объектов на основе данных – начиная с формальных контекстов, заканчивая текстовыми данными на естественном языке. В первой части доклада будет рассказано о теоретической работе, посвященной построению приближенного вероятностного базиса импликаций для формальных контекстов. Во второй части речь пойдет о текстовых контекстах на естественном языке и подходе к задаче текстовой классификации с пересекающимися классами при помощи генерации последовательности классовых меток. В частности, мы рассмотрим постановку задачи с имеющейся иерархической структурой классов и обсудим метод, комбинирующий стандартную для модели BERT архитектуру и подход с последовательным предсказанием меток. В третьей части доклада мы перейдем к задаче ответа на числовые вопросы по текстовому и табличному контексту, где для ответа на вопрос требуется последовательное применение различных дискретных операций, таких как подсчет, сравнение чисел, сортировка и выполнение арифметических выражений. Будет рассказано про новую нейросетевую модель, которая на текущий момент показывает лучшие результаты в этой задаче.