Содержание
- Введение 1
- Теоретические основы генеративных моделей 2
- - Трансформеры и механизм внимания 2.1
- - Методы предобучения и дообучения языковых моделей 2.2
- - Метрики оценки качества генерации текста 2.3
- GPT: архитектура и особенности 3
- - Различия между GPT-2, GPT-3 и GPT-4 3.1
- - Особенности применения GPT для чат-ботов 3.2
- - Ограничения и проблемы GPT 3.3
- Принципы разработки чат-бота на основе GPT 4
- - Подготовка данных для обучения GPT 4.1
- - Выбор оптимальной стратегии обучения GPT 4.2
- - Инструменты и библиотеки для разработки чат-ботов 4.3
- Практическая реализация и оценка качества 5
- - Выбор предметной области и определение требований к чат-боту 5.1
- - Тестирование и оценка качества работы чат-бота 5.2
- - Анализ результатов и рекомендации по улучшению 5.3
- Заключение 6
- Список литературы 7