First alpha-test of Ai persona-based chatbot Avatar completed - by GraphGrailAi

We have completed our first alpha-test of persona-based chatbot Avatar.
30 testers used bot for 1.5 weeks asking it different questions about it's personality and lifestyle.

During this time we have implemented several improvements in ML part - added datasets, fallback policy, fixed some design bugs.
Beta-test coming soon - register for Beta here in Google form

https://docs.google.com/forms/d/e/1FAIpQLScKH14R1htM7dG6o7CbOLv_l00d_2hTQw4RYl4uNx7L6e-Ffw/viewform

If know RU then you will be able to test persona-based neural conversation model.

Next is RU text with more details:

Завершился Альфа-тест чатбота-аватара.
30 человек в течение 1,5 недель писали боту всякие непотребства и выявили несколько недостатков, мы добавили fallback. 😎

🥞Скоро будет бета-тест!🥞 Регистрация там же в Гугл форме

https://docs.google.com/forms/d/e/1FAIpQLScKH14R1htM7dG6o7CbOLv_l00d_2hTQw4RYl4uNx7L6e-Ffw/viewform

В бете будет лучше: протестим persona-based neural conversation model, будет больше датасетов, лучше связность диалогов.

Гипотезу вовлеченности мы протестировали, пока не достигаем нужного уровня, нужно улучшать качество. Поэтому и до виральности пока не дошли, хотя она в целом понятна.
У нас есть еще гипотезы по вовлеченности: игровые механики для бота, которые мы обсуждали с людьми из gamedev.

Итак, наши выводы:
Вообще, у меня была конечно догадка, что боту будут писать не те вопросы, на которые он сможет ответить, и я даже думал это написать во вступительном описании, но потом решил протестить, смогут ли юзеры без этого задавать вопросы, подходящие по концепции.

1. Люди привыкли к Алисе-Марусе, то есть к болталкам общего назначения. И поэтому они похожие же вопросы задают и нашему Аватару, но фишка в том, что мы не делаем аналог Алисы.
   Юзер: как погода в Москве?
   Бот и не должен ответить на такой вопрос. Аватар не бот отвечалка по внешним данным сайтов о погоде (типа виджета в вашем телефоне). Аватар также не ответит на вопросы сколько ног у человека, т.к. он не бот на датасете Википедии (то есть любые вопросы о мире типа на какой планете живем - он не должен отвечать).

Как побороть: я думаю только брендингом. Объяснять и обучать юзеров, что это 👑ЛИЧНОСТЬ👑, и задавать ему надо те вопросы, на которые ответ знает сам прообраз Аватара.

1. Люди задают много вопросов уровня читчат, или уточняющих:

Бот: я умею отвечать на вопросы о своей жизни и шутить, пиши.
Юзер: а что лучше?

Вроде бы логичный вопрос, но это метавопрос, даже реальный человек задумается, если вы его спросите - с ним пошутить или серьезно говорить, зависит же от ситуации, а ситуации мы пока не моделируем.

Как побороть: Думаю мы сделаем отработку таких вопросов, мы добавим читчат датасеты, (это вопросы типа кто тебя сделал, ты умеешь петь - и ответы все вроде "нет я же робот", меня сделали разрабы такие-то) + развилки в тематиках. Отдельно будет фильтр мата и тролинга, и тут важно не переборщить в ответах, иначе это будет уже бот-оскорблятель, то есть ДРУГОЙ продукт.

Наш сайт http://graphgrail.com/ru/