Перейти к основному содержанию
x

AI-Support: AI-Audit:

    5.4. AI-Audit

   Критерии оценки диалога для LLM (эмпатия, решение, грамотность).

1. Управленческая задача: Объективная оценка работы службы поддержки и выявление точек роста.
Генерация сводного отчета по качеству за неделю — это важнейший управленческий инструмент для регулярного контроля и анализа работы службы поддержки. Цель — предоставить собственнику и руководству объективную и консолидированную картину операционной эффективности, выявить системные проблемы, оценить производительность команды и принять обоснованные решения для улучшения сервиса. Без такого отчета управление качеством будет интуитивным, а проблемы будут копиться, незамеченные, до критического уровня.

 

2. Содержание отчета: Ключевые метрики (KPI).
Отчет формируется автоматически n8n на основе данных из Vtiger, OpenProject и, возможно, FreePBX. Он должен включать следующие разделы:

  • Общие показатели:
    • Количество новых тикетов за период.
    • Количество закрытых тикетов за период.
    • Количество открытых тикетов на конец периода.
    • Средний TTR (Time To Respond — время реакции) по всем тикетам.
    • Средний TTRS (Time To Resolve — время разрешения) по всем тикетам.
  • SLA-метрики:
    • Процент тикетов, решенных в рамках SLA.
    • Количество/процент нарушений SLA (с разбивкой по P1-P4).
    • Список критических тикетов с нарушением SLA.
  • Распределение нагрузки:
    • Количество тикетов на каждого L1-оператора.
    • Количество задач на каждого L2/L3-инженера.
    • Распределение тикетов по типам (инциденты, запросы, консультации).
  • Качество решения:
    • Результаты AI-аудита диалогов (оценка тональности, вежливости, полноты ответа, если это реализовано).
    • Количество повторных обращений по тем же проблемам (Reopen Rate).
    • Оценка CSAT (Customer Satisfaction — удовлетворенность клиентов) по опросам, если проводились.
  • База знаний:
    • Количество новых статей в Wiki.
    • Количество обновленных статей.
    • Использование статей AI-агентами (сколько раз ИИ ссылался на статьи).
  • Финансовые показатели (опционально):
    • Количество Billable (оплачиваемых) часов за неделю (из OpenProject).
    • Сумма выставленных счетов за доп. услуги.
 

3. Автоматизация генерации через n8n.

  1. Планировщик: n8n запускается автоматически в конце каждой недели (например, в воскресенье ночью).
  2. Сбор данных: n8n по API забирает нужные данные из:
    • Vtiger: Статусы тикетов, TTR, TTRS, привязка к клиентам.
    • OpenProject: Статусы задач, Log time, привязка к инженерам.
    • Drupal: Данные по статьям Wiki (созданные/обновленные).
    • FreePBX: CDR-отчеты (количество звонков, средняя длительность).
  3. Обработка данных: n8n выполняет расчеты (средние значения, проценты), фильтрацию.
  4. Формирование отчета: n8n собирает все данные в структурированный формат (например, PDF, HTML или Markdown) по заранее определенному шаблону.
  5. Доставка: n8n отправляет готовый отчет на Email собственника и руководителей.
 

4. Использование отчета для принятия решений.

  • Выявление "бутылочных горлышек": Высокий TTRS по конкретному типу тикетов? Проблема в компетенциях L2.
  • Оценка персонала: Кто стабильно нарушает SLA? Кто самый продуктивный?
  • Планирование обучения: Если AI-аудит показывает низкую эмпатию L1, нужны тренинги.
  • Обоснование инвестиций: Если много P1, нужна инвестиция в инфраструктуру или L3.
  • Корректировка стратегии: Возможно, нужно пересмотреть тарифы или состав услуг.
 

5. Управленческие выгоды.

  • Информированность собственника: Мгновенный доступ к ключевым показателям бизнеса.
  • Принятие обоснованных решений: Данные вместо интуиции.
  • Проактивное управление: Раннее выявление проблем.
  • Повышение эффективности: Непрерывное улучшение процессов.
  • Контроль затрат и доходов: Объективная картина финансовых результатов.
  • Мотивация команды: Прозрачные метрики работы.


   Генерация сводного отчета по качеству за неделю.

1. Управленческая задача: Мгновенное выявление слабых мест в процессах.
Визуализация "Бутылочных горлышек" (Bottleneck Visualization) в OpenProject — это критически важный управленческий инструмент для оперативного обнаружения мест замедления или заторов в рабочих процессах. Цель — предоставить собственнику и руководителям наглядное представление о том, где именно накапливаются задачи, что приводит к задержкам в обслуживании клиентов и нарушению SLA. Это позволяет быстро идентифицировать проблемные зоны, принять корректирующие меры (перераспределение ресурсов, обучение, автоматизация) и повысить общую производительность службы поддержки.

 

2. Что такое "Бутылочное горлышко"?

  • Это этап в процессе, который ограничивает общую пропускную способность системы. Задачи на этом этапе накапливаются, ожидая ресурсов или завершения предыдущих шагов.
  • Примеры: Очередь тикетов в статусе "Новый, ожидает L1", или задач в "В работе, ждет L2", или "Тестирование", или "Ожидает согласования".
 

3. Инструменты визуализации в OpenProject.
OpenProject предоставляет несколько встроенных инструментов для визуализации:

  • Дашборды (Dashboards):
    • Создание персонализированных дашбордов для собственника и руководителей.
    • Виджет "Work packages by Status": График (круговая диаграмма или гистограмма), показывающий количество задач в каждом статусе. Если в статусе "В работе у L2" постоянно висит 50% всех задач, а у L1 — 5%, это сигнал о потенциальном горлышке у L2.
    • Виджет "Work packages by Assignee": Распределение задач по исполнителям. Показывает перегруженных сотрудников.
    • Виджет "Work packages by Priority": Позволяет увидеть, не накапливаются ли P1-P2 задачи.
  • Gantt Chart (Диаграмма Ганта):
    • Визуализирует сроки выполнения задач. Если на диаграмме видно, что много задач "сдвигаются вправо" или "перекрываются", это также может указывать на проблемы с ресурсами или планированием.
  • Burndown Chart (Диаграмма "сгорания" задач):
    • Показывает объем оставшейся работы. Если кривая "сгорания" плоская или поднимается, это означает, что работа выполняется медленнее, чем планировалось, или добавляется много новых задач.
  • Фильтры и сортировка:
    • Возможность быстро отфильтровать задачи по статусу, исполнителю, приоритету и увидеть, где их больше всего.
 

4. Практическое применение и интерпретация.

  • Ежедневный просмотр: Руководитель L2 должен ежедневно просматривать дашборды для оперативного выявления проблем.
  • Анализ причин: Если выявлено горлышко (например, в статусе "В ожидании от клиента"), нужно проанализировать, почему клиенты не отвечают (может, нужны более частые "пинги" через n8n). Если горлышко "В работе у L2", возможно, нужно больше L2-инженеров или обучение.
  • n8n-уведомления: n8n может быть настроен на мониторинг этих показателей. Например, если количество задач в статусе "В работе у L2" превышает 20, n8n отправляет уведомление руководителю L2 о потенциальной перегрузке.
 

5. Управленческие выгоды.

  • Мгновенное выявление проблем: Быстрое обнаружение мест замедления.
  • Оптимизация процессов: Принятие решений по перераспределению ресурсов или изменению Workflow.
  • Сокращение MTTR: Ускорение выполнения задач за счет устранения заторов.
  • Повышение производительности: Более эффективное использование рабочего времени.
  • Проактивное управление: Переход от реагирования на последствия к предотвращению проблем.
  • Улучшение качества обслуживания: Своевременное выполнение обязательств.
  • Обоснование ресурсов: Аргументация для найма новых сотрудников или инвестиций в обучение.