Цей інструмент оцінить ефективність вашого чат-бота
Юлія Ткач
17 января 2023, 16:39
Команда Master of Code Global створила безоплатний інструмент для оцінки розмовних рішень із використанням ШІ. Про те, як працює чат-бот нам розповіли у компанії.
Що сталося
Master of Code Global розробила безоплатний інструмент Chatbot Analysis Framework для оцінки розмовних рішень із використанням штучного інтелекту. З його допомогою можна не лише визначити ефективність рішення з використанням ШІ, але й можливості вдосконалення.
Як це працює
Інструмент перевіряє чат-бота за вісьмома компонентами:
- Аналіз варіантів використання. В яких випадках (діалоги, транзакції тощо) використовується розмовне рішення.
- Персоналізація та контекст. Наскільки використовуються APIs та SDKs для персоналізації та враховуються контексти.
- Обробка природної мови. Наскільки добре система обробляє те, що вводять користувачі.
- Доступність. Чи відповідає інтерфейс користувача стандартам доступності.
- Персона бота та призначення. Наскільки персона бота відповідає бренду та tone of voice.
- Інтеграція живого агента. Наскільки добре бот переключається на живу людину.
- Зворотний зв’язок. Чи дозволяє система ділитися відгуками клієнту.
- Дизайн розмови. Наскільки зрозумілий контент відповідей.
Після оцінки чат-бота за кожним компонентом користувач отримає кінцевий результат за 20-бальною шкалою:
- 1-10 балів — бот має мінімальну кількість функцій й випадків використання. Він обмежений у використанні технологій для автоматизації.
- 11-15 балів — гарне використання автоматизації. Бот краще використовує технології для автоматизації, але має потенціал для вдосконалення.
- 16-20 балів — потужне використання автоматизації. В боті вже впроваджена значна частина кращих практик і бенчмарок.