国立研究開発法人新エネルギー・産業技術総合開発機構（NEDO）と東京工業大学 情報理工学院情報工学系の小長谷明彦特任教授は、NEDOの研究プロジェクト「次世代人工知能・ロボット中核技術開発」において、DNAオリガミで構成されるナノスケール構造体を仮想現実（VR）上の仮想分子として表現し、手で操作できるネットワーク型VR環境を開発しました。また、仮想分子や仮想ハンドの動作を遠隔のサーバーコンピューターを用いて高速に計算処理する技術や、人工知能（AI）による深層学習技術を用いて実際の手の動きを予測制御する技術の開発により、実際の手の動きと遠隔のサーバーコンピューター上で動作する仮想ハンドの動きを同期させることに成功しました。
図1. 仮想ハンドで仮想分子を操作
概要
仮想現実（VR）は、Society 5.0時代のサイバー空間と実空間を融合する新しいコンピューター利用環境として注目されています。VRを用いることで、実際には目で見ることができない分子構造を、コンピューターシミュレーションにより仮想分子としてサイバー空間上に創り出し、あたかも目の前に分子があるかのように表示することができます。また、市販のVRカメラと組み合わせることで、自分の手をVR空間上に仮想ハンドとして表示することが可能となります。これにより、目の前の仮想分子をつかみ、どのくらいの力をどの方向に加えると仮想分子がどのように変形するかをVRシミュレーションで確かめることができます。しかし、DNAオリガミ[用語1]などで構成されるナノスケール構造体をシミュレーションするためには高性能なサーバーコンピューターが必要でした。さらに遠隔のサーバーコンピューター上で動作させた場合、実際の手の動きに対して仮想ハンドの動きが遅れることで「VR酔い[用語2]」と呼ばれる現象が発生し、長時間のVR操作が難しいという問題がありました。
今般、NEDOと小長谷特任教授は、VRクライアントコンピューターとVRサーバーコンピューターから構成され、DNAオリガミで構成されるナノスケール構造体を手で操作できるネットワーク型仮想現実（VR）環境を開発しました。また、人工知能（AI）による深層学習技術を用いて、人間の手の動作を予測制御する技術を開発することにより、人間の手の動作と遠隔のVRサーバーコンピューター上での仮想ハンドの動作を一致させることに成功しました。これにより、大規模な分子の正確な立体構造や動きをより詳細に理解することが可能となり、より効率的な分子設計の研究開発が期待されます。この研究成果は、新しい分子人工筋肉や創薬などの有機物分子の研究開発に応用できるほか、クラウドを用いたVRゲームの開発やロボットの遠隔操作への応用も期待されます。
今回の成果
ネットワーク型VR環境の開発
DNAオリガミで構成されるナノスケール構造体をVR環境で実現するためには、1秒間に90フレーム以上のVR表示と大規模なVRシミュレーションを同時に実現する必要があり、高速な計算処理が必要となります。本研究では、VRの表示と操作を行うVRクライアントコンピューターとVRシミュレーションを実行するVRサーバーコンピューターを毎秒10ギガビット（10 Gbps）の転送速度を持つ高速ネットワークで結合したネットワーク型VR環境を構築しました。複数のGPUを用いたVRサーバーコンピューターを用いることにより、DNAオリガミのように40万原子を超すようなナノスケール構造体をVR上でシミュレーションすることが可能となりました。
図2. ネットワーク型VR環境の開発
DNAオリガミ原子モデルの構築
分子人工筋肉[用語3]では、微小管[用語4]やDNAオリガミで構成されるナノスケール構造体を構築し、分子モーター[用語5]を使って分子部品を動かすことで筋肉のような収縮運動を実現しています。従来、ナノスケール構造体は研究者が実験的にしか作成することができなかったため、開発に数ヵ月単位の時間がかかっていました。本研究では、DNAオリガミのモデルをVR上に仮想分子として再現することで、DNAオリガミの詳細な構造を手で確かめながら設計することが可能となりました。
仮想ハンド予測制御技術の開発
前述したネットワーク型VR環境を用いると、大規模VRシミュレーションは可能となりますが、VRサーバーコンピューターとVRクライアントコンピューターの間にネットワークの遅延が生じます。VR環境では、通常、遅延が0.03秒を超えると利用者に違和感が生じ、VR酔いが発生すると言われています。本研究では、AIの深層学習技術を用いて利用者の手の動きを予測し、予測結果に基づいて遠隔のサーバーコンピューター上にある仮想ハンドを動かすことにより、遅延を解消しました。図3に示すように、通常は、実際の手（緑）より遅れて遠隔仮想ハンド（白）が動くため違和感が生じます（上図）。一方、AI予測制御を用いると実際の手の動き（緑）と遠隔仮想ハンドの動き（白）が一致するため違和感なく操作ができます（下図）。
図3. AI予測制御による実際の手と遠隔仮想ハンドの同期
本研究成果は、1月29日（水）から31日（木）まで開催される「nano tech 2020（国際ナノテクノロジー総合展・技術会議）
」のNEDOブースでデモ展示されます。（ブース番号：西1・2ホール AT-01）
用語説明
[用語1] DNAオリガミ : DNAを素材とした2次元または3次元の人工物。約7,000塩基の一本鎖DNAを数百本の短いDNA鎖を用いて部分的に二重らせんを形成することでさまざまな形状の人工物を数十ナノメートルというサイズで構築できる。分子人工筋肉では、6本のDNAオリガミを合体させ、さらにDNA修飾微小管と結合可能なDNA鎖を周囲に装備したDNAオリガミ分子部品を利用。
[用語2] VR酔い : VR環境を長時間体験することで発生する、乗り物酔いと似た症状。脳で認識する視覚情報と実際の手や体の動きが一致しないことが原因と考えられている。
[用語3] 分子人工筋肉 : 微小管、DNAオリガミおよび分子モーターを素材として作られた分子部品から構成される人工物。光を照射すると収縮運動する人工筋肉のプロトタイプがNEDO「分子人工筋肉プロジェクト」で開発されている。
図4. 分子人工筋肉の概略図
[用語4] 微小管 : 細胞内では骨格構造として使われている直径25ナノメートルの筒状の蛋白質複合体。分子量約5万のαチューブリンとβチューブリンが結合したチューブリン二量体が直線状に重合した線維構造（プロトフィラメント）を構成し、およそ13本のプロトフィラメントが横に並んで管構造を形成します。分子人工筋肉では、部分的にDNA鎖で化学修飾した微小管分子部品を利用。
[用語5] 分子モーター : 化学エネルギー（アデノシン三リン酸：ATP）で駆動する分子。キネシン分子モーターは1つの分子でも微小管を動かすほどの駆動力を持つ。分子人工筋肉では、4つのキネシン分子を結合したキネシン分子部品を利用。
- プレスリリース ナノスケール構造体を手で操作できるネットワーク型VR環境を開発―AIを用いた予測制御技術により実際の手と遠隔仮想ハンドの同期を実現―
![PDF]()
- 分子機械の集団運動制御に世界で初めて成功｜東工大ニュース
- 世界初！DNAオリガミを融合した分子人工筋肉を開発｜東工大ニュース
- 小長谷研究室
- 研究者詳細情報（STAR Search） - 小長谷明彦 Akihiko Konagaya
- 情報理工学院 情報工学系
- 次世代人工知能・ロボット中核技術開発｜新エネルギー・産業技術総合開発機構
- 研究成果一覧
