Новое приложение Pixi превращает текстовые сообщения в интерактивные AR-приложения

Забудьте о стикерах, GIF-анимациях и реакциях с  эмодзи. Компания Pixi делает ставку на то, что следующая ступень эволюции мессенджеров — это интерактивная дополненная реальность.

В среду стартап запустил в App Store свое приложение для мессенджеров, позволяющее пользователям отправлять AR-персонажей, управляемых искусственным интеллектом, через iMessage. Вместо статичных изображений персонажи оживают в камере iPhone получателя, где они могут реагировать на окружающую обстановку, взаимодействовать с людьми и отвечать в режиме реального времени.

Хотя AR уже не является чем-то новым и модным — такие компании, как Snap, создают AR-фильтры и линзы уже много лет — Pixi считает, что ее подход отличается. Объединяя AR с встроенным ИИ, ее персонажи могут понимать, что происходит вокруг них, и вести себя соответствующим образом. Например, виртуальный кот реагирует, когда мимо проходит настоящая собака (по словам компании, вся обработка изображения и звука остается на устройстве для сохранения конфиденциальности пользователя).

Основатель Pixi Марк Драммонд (бывший сотрудник DreamWorks Animation и Apple) говорит, что приложение разработано для того, чтобы привнести больше ощущения присутствия и спонтанности в цифровые разговоры. Вместо отправки текстового сообщения с поздравлением с днем ​​рождения пользователи могут отправлять персонажей, которые создают ощущение совместного опыта, превращая простое сообщение в нечто, близкое к цифровому подарку или игривому взаимодействию.

«Проблема, которую мы решаем, заключается в том, чтобы думать о друге, когда его нет рядом», — сказал он TechCrunch. «Иногда это называется «креативным дарением». Вы делитесь знаками привязанности, в основном открытками, электронными открытками и подарками. Это уровень вашего отца или, в некоторых случаях, дедушки. Мы можем сделать лучше. Мы можем сделать что-то, что будет изначально цифровым и будет использовать все, что мы узнали о дополненной реальности на iPhone».

Ранее на этой неделе Драммонд продемонстрировал приложение, выбрав персонажа-кота, который разыграл серию стендап-шуток на его столе. Примечательно, что кот, похоже, реагировал на мимику Драммонда. Например, представление завершилось, когда он улыбнулся, демонстрируя способность персонажа распознавать эмоциональные сигналы.

На момент запуска пользователям будут доступны робот, кот и анимированный персонаж-конверт, который может реагировать на голос и игриво «атаковать» друзей. Если они пошевелятся, конверт будет преследовать их. Также есть игры, такие как крестики-нолики и «бей крота».

Pixi планирует расширить свою линейку персонажей. Цель состоит в создании маркетплейса, где студии, бренды и независимые создатели смогут делиться своими уникальными персонажами, чтобы пользователи могли выбирать из них. Компания предполагает использовать это для таких событий, как премьеры фильмов или запуск продуктов, позволяя персонажам вызывать ажиотаж, например, когда M&M’s выпускает новый вкус.

Драммонд также упомянул о возможности создания персонажа Алисы в Стране чудес, поскольку она является открытой интеллектуальной собственностью. Он отметил, что «наш персонаж Алисы должен реагировать на объекты, которые она видит на вашем рабочем столе, в соответствии с характером Алисы», чтобы продемонстрировать партнерам, как их творения будут взаимодействовать с технологией.

В будущем Pixi надеется позволить пользователям создавать собственных персонажей и личности.

«Часть нашего плана — открыть эти возможности генеративного ИИ для наших [пользователей], чтобы они могли подсказывать им, как что-то сказать, например: «Я хочу синюю субстанцию, которая угрожает моему другу, рычит на него и постоянно преследует его в телефоне», — объяснил Драммонд.

Чтобы отправить персонажа другу, нужно загрузить приложение на iOS и использовать iMessage, нажав на знак плюса в левом нижнем углу. Для получения сообщений от Pixi установка не требуется.

Первоначально приложение будет доступно только для моделей iPhone 11 и новее, но в будущем планируется расширение на устройства Android и мессенджеры, такие как WhatsApp и Instagram*.

Кроме того, хотя приложение бесплатное для пользователей, бренды смогут взимать плату за своих персонажей, если захотят.

«Мы будем поощрять людей делать это бесплатно, потому что тогда люди станут вашими собственными амбассадорами бренда. Вы предоставляете им возможность использовать ваших персонажей для рассказа собственных историй», — сказал Драммонд.