「これはメタバースでマーク・ザッカーバーグと私が交わした会話です。私はマークから物理的に何百マイルも離れていますが、彼と向き合っているように感じます。なぜなら私たちの画像は写真と同じくらい正確な 3D モデルで構築されているからです。モデルさん、このテクノロジーは素晴らしいです! これが将来、人々がインターネット上でコミュニケーションする方法になると思います」とレックス・フリッドマン氏は言いました。
Lex Fridman Podcast の「First Metaverse Conversation」で、ザッカーバーグ氏は Meta の新しい Codec 仮想現実アバターを披露しました。このアバターは、スキャン技術を使用してユーザーの顔の 3D モデルを構築し、その後機械学習の実装によって駆動されます。新しいヘッドセットは会話中にユーザーの表情を検出し、リアルタイムで 3D アバターにマッピングしてアクションを形成します。
メタバースでのザッカーバーグの 1 時間の「ライブ会話」は世界を驚かせた
出典: ハート・オブ・ザ・マシン
編集者:ゼナン、ビッグパンチキン
「目の前の人が現実の人間ではないということをしばし忘れさせてくれました。」
「これはメタバースでマーク・ザッカーバーグと私が交わした会話です。私はマークから物理的に何百マイルも離れていますが、彼と向き合っているように感じます。なぜなら私たちの画像は写真と同じくらい正確な 3D モデルで構築されているからです。モデルさん、このテクノロジーは素晴らしいです! これが将来、人々がインターネット上でコミュニケーションする方法になると思います」とレックス・フリッドマン氏は言いました。
一昨日、マサチューセッツ工科大学(MIT)の科学者レックス・フリッドマンとメタCEOのマーク・ザッカーバーグとの遠隔会話がソーシャルネットワーク上で最大のヒットとなった。メタバースでの 1 時間にわたるインタビューのビデオは、すぐに数千万回の再生回数に達しました。
さて、メタバースでは、全身の細部から表情や動作に至るまで、私たちの画像が現実の人間とほぼ同じになることができ、驚くほど自然です。
したがって、現実の世界では、式の管理に注意を払う必要があります。
その効果はあまりにもリアルなので、人々に不快感を与えます。
Lex Fridman Podcast の「First Metaverse Conversation」で、ザッカーバーグ氏は Meta の新しい Codec 仮想現実アバターを披露しました。このアバターは、スキャン技術を使用してユーザーの顔の 3D モデルを構築し、その後機械学習の実装によって駆動されます。新しいヘッドセットは会話中にユーザーの表情を検出し、リアルタイムで 3D アバターにマッピングしてアクションを形成します。
ザッカーバーグ氏はメタバースでの会話について、「このプラットフォームは基本的に、ビデオを送信するよりも帯域幅効率がさらに高い方法で、エンコードされたバージョンのアバターをネットワーク経由で送信している」と述べた。
もちろん、メタバースでは、照明を変更するなど、画像をカスタマイズすることもできます。
足がなく、目が鈍く、不快だと揶揄された Meta のオリジナルのアバターとは異なり、新世代のアバターは非常にリアルに見え、遅延が無視でき、仮想世界で他の人とつながっているように感じることができます。
「これは、世界のどこにいても臨場感を提供するという、拡張現実のビジョンの中核に関わるものです」とザッカーバーグ氏は語った。
これらすべてにより、レンダリング ハードウェアへの負荷が明らかに増加します。会話中、ザッカーバーグ氏とフリードマン氏はどちらも、顔追跡機能と視線追跡機能が組み込まれた最新バージョンのQuest Proを着用していた。これは数日前にリリースされたQuest 3ではないことに注意してください。 Quest Pro は 2025 年まで正式にリリースされない可能性があります。
コーデック イメージでは、3D 仮想モデルを構築するためにユーザーの顔をスキャンする必要があります。
ザッカーバーグのインタビューはメタバース内にあり、会話の内容もメタバース内にありました。 1時間にわたる会話の中で、ザッカーバーグ氏はメタバース、拡張現実、大型モデルなどの話題について語った。
ザッカーバーグ氏は、実際、人々の間のコミュニケーションのほとんどは言語ではなく、表情などの細部を通じて行われると述べた。 Meta は、より多くの漫画アバターを使用して表情を捉え、ある程度の現実感を持ちながら現実的な体験を提供しようとしています。
同氏は、ユーザーが自分の仮想ドッペルゲンガーを編集して、より大げさな感情を表現できると示唆し、有名な無表情な表現を調整するためにアバター技術を使用するかもしれないと冗談を言った。
アバターは印象的なものですが、広く使用されるまでにはしばらく時間がかかるかもしれません。
このインタビューで示された数値は、数百台のカメラを使用した数時間にわたる最先端のスキャンを使用して作成されたことに注意することが重要ですが、これは現在平均的な消費者の手の届かないものです。
しかしザッカーバーグ氏はインタビューで、メタ社の計画は人々がスマートフォンを使って非常に素早くスキャンできるようにすることだと語った。
「携帯電話を手に取り、自分の前で数分間振るだけで、いくつかの言葉を発し、たくさんの表情を作るだけです...そうすれば、AI が私たちが今持っているような品質のものを生み出すことができます。」ザッカーバーグ・ジーはレックス・フリッドマンに語った。
ザッカーバーグ氏は、メタ社は今後数年間でこの技術を自社製品に統合する計画だと語った。
現在のリアルな投影は、Meta の無料 VR ゲームおよびソーシャル プラットフォームである Horizon Worlds で使用されている漫画のアバターよりも大幅に改善されています。
ザッカーバーグのメタバースセルフィー。
昨年、ザッカーバーグ氏は仮想のエッフェル塔の外にメタバースのアバターの自撮り写真を投稿し、その画像を1990年代のビデオゲームと比較するコメントが寄せられ、ソーシャルメディアで嘲笑された。ザッカーバーグ氏は当時、アバターが「基本的なもの」であることを認めた。
驚くべきことに、技術はわずか1年でこれほど進歩しました。
AI 科学者のレックス・フリッドマンはインタビューの中でこう嘆いたように、「この感覚をどう表現していいのか本当に分かりません。まるで同じ部屋にいるような、未来のような」。
ザッカーバーグ氏の継続的な取り組みにより、Horizon Worlds に対する人々の認識が変わりつつあります。同氏はレックス・フリッドマン氏に対し、リアルなアバターは、メタバースの画像に嫌悪感を抱く人々を惹きつけるのに役立つかもしれないと語り、「人々はその体験に衝撃を受けたが、アバターがこの環境にあるという人々からのフィードバックもいくつか得た」とレックス氏に語った。 「フリッドマン。それはあまり現実的ではありません。」
今日のメタバース機能は、私たちの対話方法に大きな変化をもたらすことは明らかです。確かに、これはザッカーバーグのメタバース プロジェクトのこれまでで最も印象的なデモンストレーションです。
「状況は変わり、メタバースに対する私たちの認識も変わり始めました。」 これは画期的なテクノロジーです。
Meta が近いうちにこれを消費者向け製品で実現すれば、革新的なアプリケーションとなる可能性があります。
参考内容: