Перейти к содержимому

Критерии оценки

Критерии оценки (также называемые профилями промптов) определяют, что ИИ ищет при анализе разговора. Они управляют тем, какие аспекты оцениваются, как они взвешиваются и что включается в выходные данные. Разные проекты могут использовать разные профили оценки.

Client Admin

Aelo предоставляет базовые категории в качестве отправных точек:

КатегорияЛучше всего подходит для
Звонок по продажамИсходящие/входящие телефонные разговоры по продажам
Звонок поддержкиЗвонки клиентского сервиса и технической поддержки
Чат по продажамТекстовые разговоры по продажам (веб-чат, мессенджеры)
РекламацияОбработка жалоб и звонки с эскалацией

Каждая категория поставляется с предварительно настроенными модулями и весами, оптимизированными для данного типа разговора.

Профили, привязанные к категориям (автоматический выбор)

Section titled “Профили, привязанные к категориям (автоматический выбор)”

Client Admin

Aelo автоматически определяет категорию каждого звонка (Покупка, Поддержка, Жалоба и т.д.). Каждая организация получает набор профилей, привязанных к категориям — по одному на категорию звонка плюс отдельный профиль Чаты, — поэтому каждый разговор анализируется по критериям, настроенным под его тип:

  • 10 категорий звонков: Вопрос о продукте, Покупка, Запись/планирование, Поддержка, Биллинг, Онбординг, Жалоба, Отмена, Повторный контакт, Прочее.
  • Чаты: все чаты всегда анализируются профилем «Чаты» (чаты не категоризируются).
  • Пропущенные и короткие звонки не анализируются, поэтому профилей для них нет.

При анализе записи профиль выбирается в следующем порядке:

  1. Профиль категории — профиль организации, привязанный к определённой категории звонка (или «Чаты» для чатов).
  2. Профиль проекта — профиль, привязанный к проекту (запасной вариант, когда привязанного профиля нет).
  3. Профиль по умолчанию — используется, когда не настроено ни то, ни другое.

Откройте Менеджер профилей (Управление профилями в конструкторе промптов) — блок Привязки категорий показывает все 11 привязок. В каждой строке — привязанный профиль или «Используется профиль проекта».

  • Редактируйте привязанный профиль как любой другой — его модули применяются ко всем разговорам этой категории.
  • Удалите привязанный профиль, чтобы отключить автоселекцию для категории — анализ вернётся к профилю проекта.
  • Восстановить стандартный заново создаёт преднастроенный профиль категории после удаления.

Привязка задаётся при создании профиля и не переносится на другой профиль; у каждой категории может быть не более одного привязанного профиля на организацию.

Каждый профиль состоит из переключаемых модулей анализа. Включайте или отключайте модули для управления тем, что ИИ оценивает:

Формирует высокоуровневые метрики:

  • Оценка качества (0–100)
  • Вероятность сделки (0–100%)
  • Флаг внимания — отмечает разговоры, требующие ручного просмотра

Извлекает содержимое разговора:

  • Темы — основные предметы обсуждения
  • Ключевые слова — важные термины и фразы
  • Ключевые моменты — критические события (возражение, обсуждение цены, достигнутое соглашение)
  • Резюме — обзор разговора на естественном языке

Оценивает паттерны речи:

  • Слова-паразиты — частота «эм», «ну», «типа»
  • Стоп-слова — слишком часто используемые вводные фразы
  • Обязательные фразы — требуемые фразы (например, заявления о комплаенсе)
  • Нецензурная лексика — обнаружение неприемлемых выражений
  • Чёткость речи — общая оценка разборчивости речи

Оценивает структуру разговора:

  • Приветствие — правильное начало и представление
  • Квалификация BANT — оценка бюджета, полномочий, потребности, сроков
  • Работа с возражениями — как агент реагирует на возражения клиента
  • Завершение — эффективное окончание разговора и следующие шаги

Анализирует эмоциональные аспекты:

  • Тональность — позитивная, нейтральная, негативная классификация
  • Вежливость — обходительность и профессионализм агента
  • Перебивания — частота и обработка перебиваний спикеров

Проверяет соблюдение нормативных требований и внутренних политик:

  • Чёткость речи — соответствие минимальным стандартам чёткости
  • Предупреждение о записи — обязательное уведомление в начале разговора
  • Полнота CRM — заполненность обязательных полей CRM после звонка

Формирует коучинговые выходные данные:

  • Сильные стороны — что агент сделал хорошо
  • Улучшения — конкретные области для роста с практическими предложениями
  1. Перейдите в раздел Критерии оценки в боковом меню (или через Настройки).
  2. Выберите базовую категорию или создайте пользовательский профиль.
  3. Включайте или отключайте модули по необходимости.
  4. Настройте веса (если доступно) — насколько каждый модуль влияет на итоговую оценку.
  5. Изучите панель Живого предпросмотра справа:
    • Оценочное количество токенов (влияет на стоимость обработки)
    • Пример вывода — что ИИ вернёт для типичного разговора
  6. Сохраните профиль.

Панель предпросмотра справа обновляется в реальном времени при изменении настроек:

  • Количество токенов — оценочные токены, потребляемые при каждом анализе (напрямую влияет на стоимость)
  • Оценка стоимости — приблизительная стоимость одного анализа для вашего LLM-провайдера
  • Пример вывода — образец результата анализа

Используйте предпросмотр для поиска правильного баланса между глубиной анализа и стоимостью.

Привязка профилей к проектам

Section titled “Привязка профилей к проектам”

Чтобы назначить профиль оценки проекту:

  1. Перейдите в Источники данных > выберите проект > Настройки.
  2. Найдите раздел Профиль промптов.
  3. Выберите нужный профиль оценки из выпадающего списка.
  4. Сохраните.

Все новые записи в этом проекте будут использовать выбранный профиль. Существующие записи не затрагиваются, если не выполнить их переанализ вручную.

Профиль проекта работает как запасной вариант: он применяется, когда для определённой категории разговора нет привязанного профиля (см. Профили, привязанные к категориям).

ФункцияКлиентАдминистраторСупервайзерАгент
Просмотр профилей
Создание/редактирование
Удаление профилей
Привязка к проектам
Просмотр живого предпросмотра
  • Начинайте с базовой категории и настраивайте — не создавайте с нуля.
  • Включайте только нужные модули. Больше модулей = выше стоимость анализа и дольше обработка.
  • Используйте Живой предпросмотр для оценки стоимости перед развёртыванием нового профиля.
  • Создавайте разные профили для разных типов разговоров (например, отдельно для продаж, отдельно для поддержки).
  • После изменения профиля переанализируйте несколько последних записей, чтобы убедиться, что результаты соответствуют ожиданиям.
  • Модуль «Комплаенс» рекомендуется для регулируемых отраслей — он обеспечивает последовательную проверку предупреждений о записи и обязательных фраз.