Расскажу про нас: мы сделали 13 агентов-рекрутеров, которые автоматизируют наиболее рутинные операции рекрутера. Агенты анализируют требования к вакансии, собирают отклики с работных сайтов, сами ищут кандидатов, ведут первичный скрининг в чатах и формируют рекомендации для дальнейшего общения с кандидатом.
Признаюсь честно, при проектировании агентов мы многое пересмотрели в работе. Например, чат-бот — это четыре разных агента. Первый агент следит за тем, чтобы кандидат дошёл до конца диалога, и его главный KPI — доля кандидатов, дошедших до конца. Второй агент «консьерж» — его задача доставать ответы на вопросы кандидатов из различных систем (зарплата, офис, график и т. д.), и KPI — точность предоставляемой информации. Третий агент проверяет ToV и анализирует вопросы кандидата, чтобы оценивать, насколько хорошо мы понимаем вопросы кандидатов. Последний агент оценивает переписку и анализирует ответы кандидатов на соответствие вакансии.
Главный вывод, который мы сделали при проектировании сценариев: для качественного выполнения задачи у агента должны быть очень простая операция и метрика качества. Чем сложнее процесс, который вы хотите реализовать, тем больше будет агентов. Лучше сделать 20 «тупых» агентов, которые гарантированно выполнят простую операцию в нужном качестве, чем одного очень умного, но непредсказуемого агента.