everies

С помощью приложенияeveries, созданного на основе технологии Gemini, окружающие вас объекты оживут благодаря уникальным, игривым, интерактивным персонажам «everies». Просто отсканируйте окружающие объекты с помощью камеры, и на них появятся глаза каждого.

Нажатие на эти глаза создает персонажа с ярко выраженной индивидуальностью, внешностью, диалогами и голосом, адаптированными к конкретному объекту, окружающей среде и контексту. Вы также можете нажать на любой объект и создать каждого персонажа, даже если глаз изначально не появляется.

Каждый персонаж может участвовать в непрерывном разговоре с помощью вашего голосового ввода, что улучшает взаимодействие. Вы также можете сохранить свои любимые эпизоды и памятные сцены.

Единственная способность каждого превращать «все» в интерактивных игривых персонажей — выдающаяся особенность технологии LLM, упрощающая работу и делающая ее более удобной для пользователя. Этот процесс автоматизирован с помощью Gemini API, с обнаружением объектов на базе TensorFlow Lite и генерацией символов с помощью файлов JSON. Положение глаз определяется при высокой частоте кадров с помощью обнаружения объектов на устройстве в сочетании с AR. ARCore фиксирует глаза и лица персонажей, а обнаружение с высокой частотой кадров и мультимодальный LLM (Gemini) обеспечивают быстрый отклик и высокое качество изображения.

В настоящее время находится в стадии бета-тестирования в качестве доказательства концепции. Everies стремится к официальному выпуску с будущими обновлениями, включая непрерывные разговоры с любимыми пользователями и функции записи видео.