|
ИСТИНА |
Войти в систему Регистрация |
ИСТИНА ИНХС РАН |
||
Большие языковые модели в вопросно-ответных системах: от трансформера до собственного чат ботаучебный курс
- Автор: Тихомиров Михаил Михайлович
- Год создания: 2024
- Организация: МГУ имени М.В. Ломоносова
- Описание: Большие языковые модели (LLM) стали важным направлением в области искусственного интеллекта и компьютерной лингвистики. Они используются для генерации текста, перевода, ответов на вопросы и многих других задач обработки естественного языка. Современные LLM, такие как GPT-3, LLaMa, Mistral могут генерировать связные и качественные тексты. Одним из типичных сценариев использования LLM являются вопросно-ответные системы, в которых языковая модель выступает в качестве эксперта для ответа на вопросы пользователя. Однако, в порожденных моделью ответах на вопросы встречаются так называемые галлюцинации - случаи генерации выдуманных фактов, событий и концепций. Помимо этого существует взаимосвязанная проблема отсутствия нужных знаний в модели. Одним из способов борьбы с этими проблемами является использование информационно-поисковых систем, из которых извлекаются релевантные вопросу фрагменты текста, которые подаются в качестве подсказки / помощи в языковые модели. По этим причинам, в курсе будут рассмотрены современные подходы к информационному поиску и поиску ответов на вопросы на основе LLM, а также современная технология комбинирования LLM и информационного поиска Retrieval Augmented Generation (RAG).
- Добавил в систему: Тихомиров Михаил Михайлович
Преподавание курса
- 15 февраля 2024 - 16 мая 2024 Тихомиров Михаил Михайлович
- МГУ имени М.В. Ломоносова, Факультет вычислительной математики и кибернетики
- обязательная, по выбору (спецкурс), лекции, 32 часов
- Автор: Тихомиров Михаил Михайлович