誰もが衝撃を受けたこの「バーチャルヒューマン」の会話を読んだ後、私はメタバースが本当に来るかもしれないと感じました...

2023-10-01 03:56:40

画像ソース: Unbounded AI によって生成

メタバースの概念が 2021 年にザッカーバーグによって普及されて以来、人々にとってメタバースは常に遠く、時には遠く、時には近くにある「最も身近な見知らぬ人」のように感じられてきました。はっきり言って存在感が足りず、想像していたほど迫力が無いと誰もが感じています。

なぜなら、元宇宙について語るとき、ネチズンの心に残る印象は今でも次のとおりだからです。

ザッカーバーグ氏は、有名なホライゾン・ワールドのアバターと一緒にセルフィーを撮ったが、観衆から「嘲笑された」（写真はFacebookより）

しかし、わずか 1 年で、メタバース世界で行われた 1 時間の遠距離会話がどこからともなく生まれ、ソーシャルネットワークが爆発しました。今度はネチズンが唖然として叫ぶ番だった、どうして注意もせずにこのように静かに進化することができたのでしょうか？！

最近、人工知能の第一人者であり、ポッドキャストの司会者としても有名な MIT の科学者レックス・フリッドマン氏が、拡張現実、AI、大規模言語モデルについてメタの CEO マーク・ザッカーバーグ氏に詳細なインタビューを行いました。

これまでとの違いは、今回は二人が物理世界で出会うのではなく**、アメリカの半分以上を隔てて離れており、超リアルな3D仮想画像を使ってメタバース内で会話を完結させたことです**。。 Silicon Star が報道に掲載された時点で、「メタバースでの最初のインタビュー」と題されたインタビューは X (旧 Twitter) で 1,300 万近くの再生回数を獲得していました。

画像はレックス・フリッドマンのYoutubeチャンネルより

ビデオの冒頭で、白い未来空間にレックス・フリッドマンの全身高精細デジタルアバターが登場し、「現実世界ではマークと私は何百マイルも離れていますが、私たちの画像はすべて3Dモデルなので、写真レベルの精度です。空間オーディオでお互いをモデリングして提示すると、同じ部屋で対面でコミュニケーションしているように感じます。このテクノロジーは本当に素晴らしいです。これが人間同士が同じ空間でつながる方法になると思います。将来的にはインターネット上でより深く有意義な方法を実現します。」

両氏はインタビュー中、Meta Quest Pro VR ヘッドセットを着用しました。おそらくそれは、視野内の効果があまりにもリアルだったからでしょう。レックスはしばらくの間、好奇心旺盛な赤ん坊のようでした。ニヤリと笑う以外に、彼はため息をつき続けました。「ここはどこ？マークは本当にあなたなの？これは素晴らしい！あなたはそうではない」気にしないでください。「近すぎますか？」

もちろん視距離の調整も可能です。それだけでなく、ハンドルを操作して光源の位置を調整し、顔の利点を最も強調する照明角度を見つけることもできます。

ザッカーバーグ氏は、Horizon Worlds での漫画版やビデオ送信とは異なり、現実の人間をシミュレートするこれらの新しいメタコーデックアバターを作成するには、ユーザーのさまざまな顔の表情や動きの詳細を広範にスキャンし、エンコードされたバージョンにモデリングして圧縮する必要があると述べました。

ヘッドセットのリアルタイムの目と顔の追跡機能は、ユーザーの表情をキャプチャして 3D アバターにマッピングし、仮想世界または電話会議の相手に「どのように見えるべきかのエンコードされたバージョンを送信」します。本当の自分に似た人物を彼らの前に提示します。

メタバース内の画像データはエンコードされた形式で送信されるため、実物に近いだけでなく、完全なイマーシブビデオを送信するよりも帯域幅効率が高くなります。

インタビュービデオから判断すると、実際の人間の細部を復元するアバターの能力は確かに強力すぎるが、レックス氏の言葉を借りれば「人間の顔の欠点も含めてすべてを捉えている。私にとって、これらの欠点は人間の機微そのものだ」とのこと。小さなそばかす、しわ、非対称の頬、笑ったときの目尻の表情...それらは私にそれをより楽しんでもらい、完璧であることが没入感の鍵ではないことに気づきました。」

ザッカーバーグ氏は、「目は確かに重要だ。多くの研究で、人間のコミュニケーションは主に言語ではなく表情や体の動きによって行われることが証明されている。メタ社は写真を通じて、独自の古典的な仮想システムでこれらの表情を捉えることに懸命に取り組んできた」と述べた。これは、世界中のどこにいても人々が一緒にいると感じられるようにするという、仮想現実と拡張現実の視覚的核心に触れるものだと彼は信じています。

未来の会議室に入ると想像してみてください。実際に存在する人もいれば、複合現実技術を組み合わせることによって物理環境に重ね合わされた、現実的な仮想形式で現れる人もいます。彼らはテーブルに座ってプロジェクトについて話していると思いますが、しかし実際には、彼らは何千マイルも離れたところにあり、真夜中、外国で一人で家が恋しくなったとき、ヘッドセットを装着すれば、近くにいる愛する人を見ることができます。相手のしかめっ面や笑顔、あらゆる微妙な表情を、遅延やロスがほとんどなく、リアルに三次元的に再現します。

体験中、レックスはこれがとても素晴らしいと思わず叫んだ。「あなたと私が本当にそこにいるということ。これは私の人生で最も難しいことです。最も信じられない経験の一つで、本当に目を見張るような経験です！」

ただし、一般の人にとって動画で対話効果を実現するのはまだ簡単ではないことに注意してください。インタビューを始める前に、両氏は事前にピッツバーグに飛び、現在のソフトウェアとハードウェアの最高技術を統合したメタコーデックプロジェクトチームで数時間にわたって詳細なスキャンを実施した。

数日前に終了したばかりのConnectカンファレンスで、ザッカーバーグ氏は、自身の最大のビジョンは、こうしたハイエンドテクノロジーを人々が利用できるようにして、ほとんどの人々の生活を変えることだと語った。さて、今回彼は将来について何を考えているのでしょうか？

シャオ・ザーは、まだ始まったばかりだと言いました。最初に少数の人をスキャンし、十分な表情データを収集することで、プロセス全体をどれだけ簡素化できるかを検討し、その後、多数の人に適用した場合にスムーズにすることができます。このテクノロジーはまだ完全には市場に投入する準備ができていませんが、生産性の問題を解決するためにできるだけ早く作業シナリオに適用できるよう、今後数年間で引き続き調整と最適化が行われる予定です。

Meta が達成しようと懸命に取り組んでいることは、携帯電話を手に取り、顔の前で振り、いくつかの言葉を発し、いくつかの表情を作るなど、携帯電話を使用して非常に高速な顔スキャンを実行するだけでよいということです。プロセス全体で、現在と同じ結果が得られるまでに 2 ～ 3 分しかかからない場合があります。会話の質。エクスペリエンスを確保しながら効率を高める方法は、今後の課題の 1 つです。

レックス氏は、新しいメタコーデックアバターが過去の「恐怖の谷」を明らかに越えたと信じています。カメラに映るシャオザーは自分にそっくりです。そして、ためらいがちに笑いながら尋ねました。「ということは、もう腕も足も必要ないのですね。」、右？"

「いいえ、いいえ、これらの問題はまだ解決します。実際、問題があります。高精度の全身スキャンには、ヘッドマウントディスプレイのセンサーとレンダリング機能の両方に対する強力なコンピューティング能力のサポートが必要です。」とザッカーバーグ氏は急いで説明した。そこで、大きな動きは残したままなど、忠実度を落としてボディを復元することも考えられますが、一番分析しなければならないのは顔ですし、眉毛を1ミリ動かすだけで、全く違う感情が伝わるのです。腕を1インチ動かすことは、もうそれほど重要ではないようです。」

Horizon Worlds のアバターは、その青白い表情と下半身の欠如により「不気味の谷効果」と言われています。

その後、二人は新しくリリースされたクエスト 3、拡張現実、メタバースの人工知能、そして人類の未来について語りました。レックスはザッカーバーグとのこのインタビューを「インターネット上で最も硬い表情をした二人がメタバースで会ったようなもの」と揶揄し、この仮想空間ではザッカーバーグの表現力がより捉えやすく、よりリアルだと感じた。感情を完璧に伝えるにはこう言った。「もっと多くの人が来て、実際に体験してほしいと心から願っています！」シャオ・ザーはまた、ポッドキャストのこのエピソードを見た後のネチズンの反応を非常に楽しみにしていると述べた。唯一の心配は、視聴者が本当にそれを体験できるかどうかです。 2D画面、このリアルな衝撃感が今にも出てきます。

ネチズンのコメントから判断すると、彼らがそれを感じただけでなく、ショックを受けたことは明らかです。

ここ数か月は、Google、Microsoft、特に OpenAI の ChatGPT の数回にわたる怒涛のアップデートの洗礼を受けてきましたが、メタバースでのこのインタビューは、まだ人々の認識の範囲を超えています。世界のトップYoutuberであるMrBeast氏は、動画の下にコメントを残して「どうやってピクセルアバターからここにたどり着いたの？私が見逃していたものは何だった？」とコメントしたほか、「これは私が今まで見た中で最も信じられないことだ」とコメントする人もいた。物事。"

メタは今後も技術革新における強力なリーダーの一員としての地位を占めるだろうと言う人もいる。メタバースは、長い間質問され、からかわれ、さらには批判されてきたにもかかわらず、依然としてこのような強力な 3.0 形式に進化しています。