Как ShipStation создала Deckhand, свою службу поддержки Slack AI — и почему «ответ» не «разрешен»

ShipStation Global создала Deckhand, агента службы поддержки ИТ с искусственным интеллектом, который живет внутри Slack: он отвечает на вопросы из тщательно подобранной базы знаний, читает скриншоты сообщений об ошибках и сохраняет билеты Jira — и все это на Amazon Bedrock AgentCore, без необходимости управлять серверами. Результаты кажутся впечатляющими: решено 97,5% запросов к каналам, сэкономлено 1600 часов в год. Но вот в чем загвоздка статьи: два источника по-разному описывают одну и ту же цифру в 97,5%. AWS называет это коэффициентом разрешения. Строитель Ник Чуботариу называет это количеством сообщений, на которые Декханд ответил. Ответ не является решением. Ключевые моменты: Курировалось, а не очищалось: база знаний была основана на многолетней истории Slack, собранной с помощью «Рекурсивных языковых моделей» для тем, в которых было видно работающее исправление — не каждое обсуждение считалось одинаково полезным. Подготовка источника знаний имеет такое же значение, как и агента. Ответ, эскалация, выход: Deckhand читает скриншоты с ошибками; если он не может что-то решить, действие в один клик преобразует разговор в подробный тикет Jira. И он научился молчать, распознавая, когда человек берет верх и отступает. Этот показатель заслуживает пристального внимания: AWS сообщает, что 97,5% канального ресурса