Этапы подготовки текстовых данных для обучения моделей.
Предпросмотр не сохраняется в историю диалога.
PIPELINE
Текст после очистки.
Текст разделён на токены.
Используемые признаки.
Распознанное намерение и метод.
Извлечённые значения запроса.
Контекст текущего запроса.
Очистка и токены вычисляются по введённому тексту. Суммы, даты и валюты распознаются правилами; имена, места и организации — моделью NER. Тональность определяет отдельная модель.
