Содержание
- Введение 1
- Теоретические основы обработки естественного языка 2
- - Морфологический и синтаксический анализ 2.1
- - Семантический анализ и представление знаний 2.2
- - Статистические методы в NLP 2.3
- Нейронные сети и глубокое обучение в NLP 3
- - Рекуррентные нейронные сети (RNN) и LSTM 3.1
- - Трансформеры и механизм внимания 3.2
- - Предварительное обучение языковых моделей (Pre-training) 3.3
- Современные языковые модели и их применение 4
- - GPT-3 и большие языковые модели 4.1
- - Применение языковых моделей в чат-ботах 4.2
- - Языковые модели и генерация контента 4.3
- Заключение 5
- Список литературы 6