NVIDIA「GTC 2021」基調講演レポート「ロボティクス/メタバース/デジタルツイン/対話型AIアバター」BMWやエリクソン導入事例
![NVIDIA「GTC 2021」基調講演レポート「ロボティクス/メタバース/デジタルツイン/対話型AIアバター」BMWやエリクソン導入事例](https://image.news.livedoor.com/newsimage/stf/5/2/52787_1668_0c612129_47544b80-m.jpg)
![](https://image.news.livedoor.com/newsimage/stf/a/5/a5b87_1668_4368220367a161479769b80f92de2aa0.jpg)
フアン氏は「AIがあらゆる産業に浸透し、クラウドからエッジにまで広がっている」と語り、300万人におよぶグラフィックス、医療・科学分野、ロボティクスなどのAI開発者に対し、150のアクセラレーションライブラリを提供していて、今では100兆ドルもの産業にサービス提供するに至っている」と続けた。
![](https://image.news.livedoor.com/newsimage/stf/2/9/291d7_1668_121252417277eb438dbd4bc3938b33b9.jpg)
AIの活用はクラウド環境からエッジへとフェーズが移行。エッジアプリケーションはいずれもロボティクスや自動運転と同様の要素技術で進化を遂げていく
●基調講演で紹介された新技術群
今回の新たな発表のキーワードは「Quantum-2とBlueField3の連携」「DOCA 1.2による分散ファイアウォールの実現」「侵入者をディープラーニングで検出するMorpheus(モーフィアス)」「大規模な言語モデルをトレーニングするNemo Megatron(ニモ メガトロン)」「DNNフレームワークにグラフを投影する技術」「物理情報に基づいた機械学習モデルの構築を可能にするNVIDIA Modulus(モジュラス)」「量子コンピューティングの研究を加速するcuQuantum(クー クアンタム)」「NumPyを加速するcuNumeric」(クー ニューメリック)などを発表した。
●物理的なロボットと仮想世界のロボットが共存
![](https://image.news.livedoor.com/newsimage/stf/4/c/4c5ce_1668_e60e3acabc2b587fddd0d66b174986a2.jpg)
印象に残ったのはまず「AIの次の波は企業と産業におけるエッジであり、AIによる実際の環境での自動化」という言葉だ。これはスマートシティ向け「Metropolis」、医療向け「Clara(Holoscan)」、ロボティクスシュミレータ「Isaac」、自動運転「DRIVE」など、身近なエッジ分野で、そして実際に動く環境でのAI活用が加速することを意味する。
![](https://image.news.livedoor.com/newsimage/stf/9/8/9888a_1668_ac85657b249def94582549faa3a8901a.jpg)
「ロボティクス産業は信じられないほど成長している。NVIDIAのIsaacエコシステムは700を超える企業とパートナーから構成され、その数は4年間で5倍に増加した」(フアン氏)
![](https://image.news.livedoor.com/newsimage/stf/c/5/c53ff_1668_362e943ccffb2e9e665d8e32f4454dc1.jpg)
![](https://image.news.livedoor.com/newsimage/stf/f/2/f22c9_1668_756c4b2c00c4ef0091a0fcff4ec70e14.jpg)
![](https://image.news.livedoor.com/newsimage/stf/5/8/5843b_1668_4982206d76ee79a6759695ea599d0c0c.jpg)
エッジコンピューティングでは、クラウドとは大きく異なり、センサーからのデータ、画像や音声のストリーミングデータ、グラフィクス、会話などの多くのデータをAIが判別したり推論をリアルタイムで実行する必要がある。
NVIDIA Unified Computing Framework(UCF)はロボティクスアプリケーション向けに構築されていて、例えば医療の「Clara Holoscan」ではソフトウェア・デファインド(ハードウエアを仮想化で抽象化する技術)の医療機器プラットフォームとなる。
![](https://image.news.livedoor.com/newsimage/stf/2/1/218a6_1668_49d8a7ab8b5dad7ac1089a02cca42522.jpg)
医療分野の「Clara Holoscan」での仮想化活用例ロボティクス関連では、10兆ドル規模のロジスティクス業界向けの「ReOpt」をあげた。また、これに関連して今後、更に注目されるシステムが「Omniverse」と「Maxine」だ。
■Optimize Route Planning with NVIDIA ReOpt:
●デジタルツインを構築する「Omniverse」
「Omniverse」はこれから加速することが期待されている「メタバース」「デジタルツイン」を構築するためのアーキテクチュア。「Omniverse」はひとことで言うと、仮想世界を構築するシミュレーションエンジンとそのプラットフォームだ。
フアン氏は「ロボットや自動搬送車両だけでなく、工場や倉庫、産業プラントが、次々とシミュレーションのための仮想世界として構築されるようになる」と語る。「デジタルツイン」「メタバース」「ミラーワールド」と呼び方は様々だが、いずれも同様の未来を示しているだろう。
![](https://image.news.livedoor.com/newsimage/stf/4/b/4b428_1668_d4b97b6082e51c38dbc89fffd1cb498a.jpg)
そして、デジタルツインの仮想世界は都市全体に広がっていく。なんのために?
![](https://image.news.livedoor.com/newsimage/stf/0/2/024f5_1668_50549eee251c99c6b15931789112092c.jpg)
●BMWが「未来の工場」を加速
Siemens Energy社が廃熱タービンの腐食や故障の予測を工場全体のデジタルツインを構築しておこなっている例を紹介した。
また、BMWは前回の「GTC 2021」で、ローゲンスベルク工場をOmniverseデジタルツイン工場を導入していることを紹介したが、現在では3つの工場をデジタルツイン化、総面積は1000万平米に拡大したという。
![](https://image.news.livedoor.com/newsimage/stf/3/2/32583_1668_6ba0942b29a2cdec2d64fb02bf322320.jpg)
![](https://image.news.livedoor.com/newsimage/stf/4/a/4a4a2_1668_3770d7b1a2470a41164bf28e84b50f5b.jpg)
BWMは1分に1台の割合で自動車を生産していて、1台あたりの部品点数の平均は25,000個、工場には常に500万の部品がある、という。
![](https://image.news.livedoor.com/newsimage/stf/5/9/59e28_1668_c46932f1d86a2217688df7918d72d7d3.jpg)
ロボットたちはIsaac Gymで新しいスキルを学んでいる。
![](https://image.news.livedoor.com/newsimage/stf/7/6/76642_1668_58c1d502edb5f015f7ab8c9f501ae9e2.jpg)
デジタルツインの仮想世界では、このようなロボットたちのトレーニングや配置、人員や生産ラインの変更など、膨大なケースをシミュレーションして、最適な状況を予測した上で、実世界にフイードバックする。これが最大の利点だ。
![](https://image.news.livedoor.com/newsimage/stf/b/8/b8cdc_1668_23dadd358f18ee1dde58488a0b4ade76.jpg)
![](https://image.news.livedoor.com/newsimage/stf/1/8/1823e_1668_12f08b6b81d6ad4886ff18a43c71514b.jpg)
■動画:
●Ericssonは街をデジタルツイン化、通信環境や電波強度等を正確に見える化
また、Ericssonは、都市全体をデジタルツイン化し、5G基地局による電波と通信状況をシミュレーション、継続的な最適化をおこなっているという。
![](https://image.news.livedoor.com/newsimage/stf/9/6/9631e_1668_4559dde9b3724775fc843b189c97ff89.jpg)
街全体をOmniverseデジタルツインで仮想化。基地局を配置
![](https://image.news.livedoor.com/newsimage/stf/e/3/e32d5_1668_cae6cf5165e025f3cdff1828797e29b5.jpg)
Ericssonは今後5年間で1500万の5G基地局やマイクロセルと世界中で展開していく予定だという。そのためにOmniverseを導入して都市をデジタルツイン化、建物や植林まで仮想空間に再現し、最適なカバレッジとネットワークのパフォーマンスのためにどこに基地局やアンテナを設置するべきかをシミュレーションしている。
![](https://image.news.livedoor.com/newsimage/stf/6/d/6daaa_1668_bd2aff64e286e32e4f3cddb03a7fc8b3.jpg)
レイトレーシング技術を活用し、電波の伝搬や反射を正確に可視化、ビームフォーミングによる通信効果や電波強度、スループット等もカラーで再現している
![](https://image.news.livedoor.com/newsimage/stf/7/b/7bf66_1668_346670683568df01176f82fdb1ee6f0e.jpg)
ビームフォーミングによる通信強度を可視化。カラーによって電波強度やスループットが確認できる■動画:
そしてフアン氏は"ワン・モア・アナウンス"として「気候変動をシミュレーションし、将来を予測するデジタルツインを構築する」ことを発表している。それは「Earth two」、地球全体のデジタルツイン。Modulusが作成したAI物理モデルをOmniverseで100万倍の高速性で実行するという。
![](https://image.news.livedoor.com/newsimage/stf/8/3/83107_1668_2c2c5f7ff879ceb61ed7a5ffc3433a4b.jpg)
●対話型AIアバター「Omniverse Avatar」と「New Maxine」
「Maxine」(New Maxine)は、会話は言語認識/発話ソリューションだったが、今回はアバタープラットフォームとして紹介された。コンピュータビジョン、RivaスピーチAI、グラフィクスによるアバターアニメーションなどを組み合わせることで、リアルタイムの「対話型AIロボット」としてそこに存在させる。
![](https://image.news.livedoor.com/newsimage/stf/6/6/66e97_1668_dd8387597a3e2d3b6cd710351cc79c0b.jpg)
対話型AIアバターがオーダー受付をする会話型キオスク「Tokkio」実用例として掲げたのが、Maxineを活用した会話型キオスク「Tokkio」(トッキオ:Talking Kioskの略から)。スマート店舗に導入が進むであろう無人のオーダーシステムとして「対話型AIロボット」のアバターが対応する。
![](https://image.news.livedoor.com/newsimage/stf/0/2/02fd5_1668_375be3cfcf7ddeb8ea0f0ec0cc526cf6.jpg)
対話型AIロボットのアバターの例(NVIDIA Omniverse Avatar)
![](https://image.news.livedoor.com/newsimage/stf/f/6/f625f_1668_6d2f63a1d1aff5d53ab9cb4150e325e7.jpg)
キオスク側もユーザーの分析をおこない、最適なリコメンドをおこなう■動画:
「Maxine」は自動車のアシスタントとして活用した場合は「DRIVE」と連携した「DRIVE Concierge(ドライブ コンシェルジュ)」として構築できることを示唆した。
![](https://image.news.livedoor.com/newsimage/stf/1/9/19838_1668_882581b744892f8be8e2606b3f28ab9d.jpg)
NVIDIA DRIVE IX テクノロジーとNVIDIA Omniverse Avatarを基盤とした「DRIVE Concierge」が乗車(画面中央下)。運転者と同乗者一人ひとりにパーソナライズされたAIアシスタント。関連記事「NVIDIAが自動車向けAI音声アシスタント「DRIVE Concierge」と自律走行を強化する「DRIVE Chauffeur(ドライブ ショーファー)」を発表 GTC 2021で」
●「トイ・ジェンスン」に難しい質問を投げかけるデモ
また、基調講演では「Omniverse Avatar」で自身のキャラクターをアバター化する「Toy-Me」を紹介。「トイ・ジェンスン」が登場し、3人のエンジニアがシビアな質問を浴びせるデモが紹介されている。
![](https://image.news.livedoor.com/newsimage/stf/0/a/0a2ef_1668_2dc88a9089c277d91427ee8a95807b71.jpg)
「Omniverse Avatar」で生成されたトイ・ジェンスン
![](https://image.news.livedoor.com/newsimage/stf/a/0/a02e6_1668_703133d9e71fb0c34f61e9a6a6cfbe17.jpg)
![](https://image.news.livedoor.com/newsimage/stf/5/b/5bf3b_1668_87e35d3217f6da1d86d81908e6f4acd9.jpg)
![](https://image.news.livedoor.com/newsimage/stf/a/7/a7e51_1668_597616a412c182cf6a6bc12a673c5bf4.jpg)
■動画:
●「Maxine」の多言語対応、ビデオ会議室ステムでの応用
基調講演の中で、将来的には同様にOmniverse Avatarと、IsaacやClara Holoscanが連携していくだろう、とフアン氏は語っている。
また、Omniverse Avatarはアニメのようなキャラクターだけではなくリアルな人物としても構築できる。ユースケースの一例として「ビデオ会議システム」でのAIアバターの導入があげられる。基調講演では、「Maxine」の言語翻訳機能を使って、多言語にリアルタイム翻訳したり、周囲の雑音をカットする様子などが紹介されている。
![](https://image.news.livedoor.com/newsimage/stf/9/9/9950e_1668_f5379f440bf4770e486dd402a9d39c1a.jpg)
「Maxine」のAvatarはリアルな人物でも
![](https://image.news.livedoor.com/newsimage/stf/a/3/a3113_1668_56354d5450769e1a6872f5c3356321cb.jpg)
各種言語に対応し、言語に合わせて口の動きや表情が変わり、より自然な動きを実現する■動画:
●CEOのジェンスン・フアン氏の基調講演はアーカイブ視聴できる
また、CEOのジェンスン・フアン氏の基調講演(日本語字幕可)は11月9日にストリーミング配信され、現在アーカイブで視聴ができる。
![](https://image.news.livedoor.com/newsimage/stf/a/5/a5b87_1668_4368220367a161479769b80f92de2aa0.jpg)
「GTC 2021」公式ホームページ (基調講演)
GTC 2021 関連記事:
NVIDIAが「Jetson AGX Orin」を発表!ロボティクスとエッジ向け超小型AIコンピュータボード、Xavierの6倍の高速性能 NVIDIAが自動車向けAI音声アシスタント「DRIVE Concierge」と自律走行を強化する「DRIVE Chauffeur」を発表 GTC 2021で NVIDIA Jetson 関連記事(ロボスタ) GTC 2021 関連記事(ロボスタ) NVIDIA 関連記事(ロボスタ)