12.11.2026. Бондаренко И.Ю. Семинар ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ и СИСТЕМНОЕ ПРОГРАММИРОВАНИЕ
Семинар ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ и СИСТЕМНОЕ ПРОГРАММИРОВАНИЕ. Дата: 12.11.2026 Докладчик: Иван Юрьевич Бондаренко, доцент, научный сотрудник Лаборатории прикладных цифровых технологий ММЦ НГУ Тема доклада: О применимости малых нейросетевых моделей языка и о необходимости онтологических моделей мира Аннотация В докладе рассматривается вопрос о том, какого размера нейросетевая языковая модель достаточна для построения системы генерации, дополненной поиском по графу знаний (GraphRAG). Утверждается, что способности, нужные языковой модели внутри такого конвейера - понимание текста, извлечение сущностей и отношений, рассуждение по контексту - относятся к языковым навыкам и масштабируются с размером модели существенно медленнее, чем запас фактических знаний о мире. Отсюда естественный замысел: вынести знание о мире из параметров нейросетевой модели в отдельную онтологическую модель - типизированный граф знаний предметной области - а к языковой модели предъявлять требования лишь по качеству языковых навыков, в первую очередь по извлечению и структурированию естественно-языковой информации и по использованию релевантных фрагментов знания для ответа на запросы пользователя. На этом принципе построены компактная модель Meno-Lite-0.1 (7 млрд параметров), сопоставимая по качеству извлечения сущностей и отношений с моделями размерного класса 32 млрд. параметров, и открытая библиотека RAGU, в которой реализовано многошаговое построение типизированного графа знаний, обеспечивающее его большую устойчивость к вариативности и неоднозначности естественного языка в исходных документах. На бенчмарках GraphRAG-Bench, BioASQ, MuSiQue и 2WikiMultiHopQA пара "компактная языковая модель + онтологический граф" обеспечивает более полное извлечение контекста и более высокое качество ответов на задачах синтеза, чем системы, опирающиеся на крупную коммерческую модель. Обсуждаются границы применимости предложенного подхода.
Название:
12.11.2026. Бондаренко И.Ю. Семинар ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ и СИСТЕМНОЕ ПРОГРАММИРОВАНИЕ
Категория:
Наука