Полная AI-автоматизация: эксперты только на исключениях

Что в ролике
Если ключевые эксперты тонут в рутине и согласованиях, этот доклад предлагает выводить людей из типового потока задач и оставлять им только исключения. На примере автоматизации индексации документов в Clarivate спикер показывает полный конвейер: обработка десятков тысяч правок в месяц, предфильтрация нестандартных кейсов и маршрутизация критичных ошибок в отдельный пайплайн. Первый агентный прототип дал 80–83% точности; после разбора тысячи эвалов с доменными экспертами систему довели до 95%, а затем до 99,95% на самых важных для бизнеса задачах. Отдельно выделили спорные случаи, по которым даже эксперты не имеют единого ответа, и редкие научные новинки вроде препарата Verve 102, требующие ручного онтологического решения. Такая маршрутизация не только убрала рутину, но и организовала «выхлоп»: эксперты получили пачки однотипных неоднозначных кейсов и смогли решать, что замораживать, а что финансировать. Один из сигналов позже помог заранее сформировать позицию по восьмизначному клиентскому аккаунту. Спикер советует строить полные автоматизации только для масштабируемых процессов с материальной выручкой и письменными спецификациями, а не для стартапов в стадии поиска. Главная ставка — не выбор оркестратора, а управление коллективным вниманием и суждениями.
Практика
- Что получишь
- Понять, как спроектировать полную автоматизацию бизнес-процесса с маршрутизацией исключений и довести точность на критических задачах до 99,95%. Увидеть, как возвращать экспертам структурированные пачки неоднозначных кейсов вместо фоновой рутины.
- Первый шаг
- Выбрать масштабируемый процесс с выручкой от семизначных сумм и письменными спецификациями, затем собрать с доменными экспертами примеры и разметить первые эвалы.
- Цифры
- —80–83% — точность первого агентного прототипа до разбора ошибок
- —99,95% — итоговая точность на бизнес-критичных задачах после hill climbing (три с половиной девятки)
- —десятки тысяч задач в месяц — объём обработки изменений документов в Clarivate
- —3–5% — доля исключений, которые требовали отдельной маршрутизации и ручного внимания
- Честно
- Доклад концептуальный: конкретный код и интерфейсы не показаны, а полный список приёмов для роста точности остался на слайде и в речи не раскрыт. Спикер явно не продаёт продукт, но предлагает связаться с ним для обсуждения моделей ошибок; метрики кейса Clarivate заявлены автором и независимо не проверены.
Если слова незнакомы — 4 терминов
- агентИИ-система, которая сама выполняет многошаговые задачи по инструкции
- эвалыпроверочные примеры с эталонными ответами для оценки качества модели
- онтологияструктурированная система понятий и связей предметной области, по которой индексируются документы
- пайплайнцепочка этапов обработки данных, от входа до готового результата
Формат: разбор кейса · для продвинутых · уверенность разметки 0.8 · источник