このeveriesについて
周囲の物体をインタラクティブなキャラクターに変えるAR
Gemini テクノロジーを活用した Everyies アプリを使用すると、あなたの周囲のオブジェクトが、ユニークで遊び心のあるインタラクティブなキャラクター「everies」で生き生きと動きます。カメラで周囲のオブジェクトをスキャンするだけで、すべての人の目がオブジェクトに表示されます。
これらの目をタップすると、特定のオブジェクト、環境、コンテキストに合わせて調整された、明確な性格、外観、会話、声を備えたキャラクターが生成されます。最初に目が表示されない場合でも、任意のオブジェクトをタップしてすべてのキャラクターを生成することもできます。
すべてのキャラクターは音声入力を通じて継続的な会話を行うことができ、インタラクションを強化します。お気に入りのシーンや思い出のシーンを保存することもできます。
「すべて」をインタラクティブで遊び心のあるキャラクターに変える、everies の唯一無二の機能は、LLM テクノロジーの傑出した機能であり、エクスペリエンスを簡素化し、よりユーザーフレンドリーなものにします。このプロセスは Gemini API によって自動化され、TensorFlow Lite によるオブジェクト検出と JSON ファイルによるキャラクター生成が行われます。目の位置は、AR と組み合わせたデバイス上のオブジェクト検出を使用して、高フレーム レートで決定されます。 ARCore はキャラクターの目と顔を固定し、高フレームレート検出とマルチモーダル LLM (Gemini) により高速応答と高品質のエクスペリエンスを保証します。
現在、概念実証としてベータ版のエブリイは、お気に入りのエブリイとの継続的な会話やビデオ録画機能など、将来のアップデートにより正式リリースを目指しています。



