Как ИИ понимает тексты: задачи NLP
Коротко: Обработка естественного языка (NLP) охватывает всё, что машины делают с языком: перевод, краткое изложение, ответы на вопросы, определение тональности, поиск имён, создание текста…
Подробнее: Раньше для каждой задачи была своя модель. Сегодня достаточно промпта.
Подробности
- Классификация: спам, тональность, тема.
См. также: как языковая модель создаёт текст шаг за шагом, токенизация: BPE и словарь