Филиппины, растущая цифровая страна в регионе Юго-Восточной Азии, изобилует инновациями и экспериментами.

Но одно можно сказать наверняка, 100 миллионов человек, живших на Филиппинах, по-прежнему разделены не расстоянием, а средствами связи. Смартфоны, хотя и являются пионерами в области связи, превращают гражданина страны в прямо противоположное. Препятствуя возможности увеличения роста для всех секторов.

Romeo, помощник по платежам на основе искусственного интеллекта, только что выпустил свою последнюю функцию — приложение KYC (Know-Your-Customer/Client). KYC обычно используется в финансовых и банковских транзакциях, но что, если бы мы могли использовать его для повышения ценности транзакций в небольших продуктовых магазинах, улучшая отношения покупателя с продавцом и наоборот.

Прекрасным примером может служить очень известная в стране кофейня Starbucks. Ежедневный потребитель напитков с кофеином в этом заведении взаимодействует с продавцом в два раза чаще, чем менее привычные посетители. Чувство связи с продавцом при использовании его продукта действительно увеличивает шансы потребителя вернуться в то же место снова, увеличивая доход от сустава. Starbucks довольно хорошо использовала эту стратегию игры с именами, добавление вашего имени к продукту послужило толчком к разговору.

Используя тот же принцип, разработчики Romeo проверяют эту стратегию на предмет того, смогут ли местные филиппинские продовольственные магазины выйти из сложившейся ситуации, если смогут хорошо взаимодействовать со своими покупателями.

Разработчики планируют использовать платформу мессенджера для инициализации названия игры. Функция работает следующим образом:

  1. Покупатель приходит в местный филиппинский продовольственный магазин.
  2. Стратегически размещенная камера на входной двери начнет распознавать входящих. (только для зарегистрированных тестовых пользователей) [модуль 1].
  3. Как только человек, вошедший в заведение, решит купить и заказать еду, его или ее узнает более сфокусированная камера, которая размещается над компьютером или терминалом, используемым продавцом.
  4. Продавец также может использовать камеру своего телефона для захвата изображения покупателя [модуль 2].
  5. Алгоритм начинает пинать свои соки и находить правильный результат.
  6. Затем он распечатает имя клиента, что позволит вам, поставщику, начать более человечный разговор с клиентом.
  • (Все до сих пор теоретически проверяется в контролируемом поле внутри нашей школы, разработчики все еще сталкиваются с проблемами принятия пользователями, и в основном финансовыми)

Как только алгоритм или Ромео распознает покупателя, возможности станут бесконечными, продавец может начать хороший разговор о еде, которую клиент хочет купить, разработчики также могут добавить статистику о пользователе (последний прием пищи, который они заказанное, наиболее покупаемое блюдо, наименее покупаемое блюдо, время заказа и другая более важная информация)

Команда хочет протестировать это ценностное предложение, чтобы еще больше определить нишу, в которую Ромео мог бы войти. Использование платежей в качестве основной ниши по-прежнему является большим местом для начала. В надежде улучшить то, как филиппинцы совершают транзакции и общение, команда разработчиков Romeo расширяет исследования в этой области через контролируемое место, известное как школа.

Но как работает Ромео?

Модуль 1: Распознавание лиц с использованием OpenCV и Messenger AI-Chatbot

В первом модуле Romeo использовалась веб-камера на базе Raspberry Pi 3. Как только камера распознает человека, она отправит информацию в мессенджер Facebook человека, отвечающего за местоположение. На двух изображениях выше тестирование прошло успешно. Это был самый первый MVP Ромео.

Добившись успеха с MVP, мы добавили еще одну основную функцию — AI-Chatbot.

AI-Chatbot служит дополнительной рукой, в которой нуждаются поставщики. Пример использования будет для длинных строк. Клиенты могли бы легко совершить покупку внутри мессенджера, сократив процесс и сделав услугу более выгодной. AI-Chatbot будет работать рука об руку с распознаванием изображений для гораздо лучшей реализации (хотя разработчикам все еще сложно полностью интегрировать друг друга, дополняя изображения предложениями или наоборот). AI-чат-бот также служит посредником для денежных транзакций.

Модуль 2: Распознавание изображений с использованием собственных лиц

При представлении первого модуля судьям хакатона была поднята одна конкретная тема. Можем ли мы использовать камеру телефона вместо веб-камеры. Все, что мы могли сделать, это футуристически ответить попыткой сделать это. На этом мы представляем второй модуль.

Используя машинное обучение и очень разреженный набор данных членов команды, мы смогли создать реализацию Eigenface для камеры телефона.

Второй модуль использует опцию камеры на платформе мессенджера. Пользователь делает снимок с помощью этой опции, затем Facebook отправляет изображение в API Romeo для его обработки. Затем Romeo запускает RandomForestClassifier и предсказывает, кто это изображение.

Теперь о некоторых технических вещах. Ромео на земле — это чат-бот с искусственным интеллектом, созданный на платформе мессенджера Facebook. Алгоритм чата в настоящее время работает с использованием RandomForestClassifier для векторизованного набора разговоров. Чат-бот отлично работает на пресете, но плохо работает на нераспознанных предложениях и транзакциях.

Romeo также использует алгоритм Eigenface для распознавания изображений. Вот пример набора данных, который использовался в алгоритме

Набор данных для изображений в настоящее время скудный из-за отсутствия пригодных для использования данных. Разработчики изо всех сил стараются обработать возможные данные, которые можно было бы использовать, и передать их в модель.

Приведенный ниже график служит сводкой для используемого набора данных.

Вот классы на данный момент. Набор данных все еще скудный, но в настоящее время мы наращиваем процесс увеличения сбора данных.

В надежде увеличить шансы для продавцов и клиентов поговорить и пообщаться. Команда Romeo планирует и дальше повышать ценность повседневных транзакций.

Следующая цель Romeo — полностью перезапустить и переоценить модели безналичных платежей с использованием двух вышеуказанных модулей и собранных данных.

Для получения дополнительной информации вы можете посетить следующее:

Facebook: https://www.facebook.com/Romeo-345435105819111/

Сайт: https://romeobot.herokuapp.com/