20 жовтня 2025 року студенти спеціальності «Інженерія програмного забезпечення» мали можливість прослухати лекцію від запрошеного спікера – професора Paweł Lula з Краківського економічного університету (Польща). Всього прослухало лекцію понад 200 бакалаврів 1-3 курсів, магістрів 1 року навчання, та аспірантів спеціальності «Інженерія програмного забезпечення». Тема лекції «Великі мовні моделі» (Large Language Models).
Під час лекції професор Paweł Lula детально розглянув архітектуру та принципи роботи сучасних мовних моделей, зокрема трансформерів. Студенти дізналися про ключові компоненти цих систем: нейронні мережі, механізми уваги (attention), вбудовування (embeddings) та послідовні моделі.
Особливу увагу було приділено моделям BERT (як енкодеру) та GPT (як декодеру), їх архітектурі та процесам навчання. Професор пояснив, як працює механізм самоуваги (self-attention) та перехресної уваги (cross-attention), а також різні методи генерації тексту – від жадібного пошуку до top-k та top-p семплювання.
Практична частина лекції включала демонстрацію застосування BERTopic для аналізу 73 509 наукових публікацій у сфері управління ланцюгами постачання, проіндексованих у базі SCOPUS з 2010 по 2025 рік. Це дозволило студентам побачити реальне застосування технологій обробки природної мови для аналізу великих масивів текстових даних.
Лекція стала цінною можливістю для майбутніх інженерів програмного забезпечення ознайомитися з передовими технологіями штучного інтелекту та їх практичним застосуванням від досвідченого міжнародного експерта.
Щиро дякуємо за проведену лекцію, а також надіємось на подальшу плідну співпрацю.