2023.06.01 【ロボット・ドローン用部品技術特集】NTTと三菱電機、ネットワーク・サーバー連携制御で遠隔ロボット操作技術の有効性を確認

図1 技術概要

 NTT、三菱電機は、NTTのネットワークおよびコンピュート基盤の連携制御技術と三菱電機の遠隔操作技術を組み合わせた実証実験を通じて、これまで操作が困難であったロボットアームを用いた作業を遠隔地から違和感なく持続的に操作可能であることを確認した。

 この実証実験により、力触覚情報を用いたロボットによる高度な遠隔操作を簡易なデバイスで実現できることに加え、遠隔操作を安全に実施可能であることが分かった。

 これによって、End-to-Endで遅延品質を管理し、制御する技術を用いて低遅延品質保証が可能になり、また力触覚情報を色情報に変換する技術を用いて機器数が少ないシンプルなデバイス構成で力触覚情報の伝達が可能となる。その結果、ロボットなどによる高度な遠隔操作の適用領域の拡大が期待できる。また、操作者の拠点集約による効率化、労働人口減少等の社会課題の解決が期待できる。

 なお、本実証実験で実施した技術については5月17~18日に開催された「つくばフォーラム2023」で紹介された。

1.背  景 

近年日本では労働人口の減少が進んでおり、技術者を日本全国に配置・派遣することが困難になることが予想される。また、新型コロナウイルスの世界的な感染拡大に伴いライフスタイルおよび業務スタイルが大きく変化し、リモートワークが一般的なものとなった。

 一方で、現在も遠隔での実施が難しい業務が多くあることから、リモートワークが困難な技術者が依然として多い状況にある。特に、自動化・機械化が困難なことから危険を伴う作業であっても人手で実施されているケースや、身体的、時間的、移動の制約などから技術者の専門性が発揮できる場での業務に従事できていないケースがある。

 これらの課題を解決する方法の一つとして、遠隔地から高度な作業をできるようにすることで作業者の所在地にかかわらず業務の遂行を可能とする遠隔作業の実現が期待されている。

 高度な作業では視覚以外の感覚も使って作業をするため、遠隔作業の実現に当たっては、現地の映像情報に加えて、物体との接触状態や作業中の力加減を知るための力触覚情報等の感覚情報の伝達が重要となる。映像情報や力触覚情報等をユーザーが使用するデバイスの性能に依存せずに安定的に伝達するには、映像情報や力触覚情報等の高負荷処理をネットワーク上のエッジサーバーで行うなどの工夫が必要となる。

 一方で、エッジサーバー上で処理を実施するに当たっては、ネットワークの観点では、エッジサーバーでの処理も含めたEnd-to-Endサービスとしての遅延時間やジッター(ずれや揺らぎ)を低くするだけでなく、システムの故障や性能劣化時にもサービスの品質劣化を招かないようにすることが課題となっていた。また、デバイスの観点では、機器数が少ないシンプルな構成でありながら、映像情報等と同期して、違和感なく力触覚情報を伝達する方法が課題となっていた。

2.技術のポイント

 NTTグループでは次世代コミュニケーション基盤であるIOWN構想の具現化を進めており、2023年3月16日にAPN IOWN1.0サービスの提供を開始した。さらに、IOWN2.0以降に向け、光技術を用いたさらなる低遅延・低ジッターなネットワークの実現に取り組んでいる。

 従来、ネットワークサービスを提供する際、エッジサーバーの処理時間とネットワークの遅延時間に関し個々の品質管理は実施していたが、両者を組み合わせたEnd-to-Endでの遅延時間の評価や品質管理は実施されていなかった。今回、APNのネットワークで2地点間を複数経路で結ぶことができる環境において、エッジサーバーでの処理時間とネットワークの遅延時間をリアルタイムに状態把握し、End-to-Endでの遅延時間が性能要件を満たさなくなる場合には、別の経路および別のサーバー処理に即座に切り替えることで安定した低遅延サービスを提供する、ネットワーク&コンピュート高速クローズドループ制御技術の研究開発に取り組んだ(図1)

 三菱電機では、視覚と力触覚との間の感覚間の相互作用を活用したVisual Hapticsを開発し、遠隔地の力触覚情報を色情報に変換し、視覚情報としてユーザーに提示することで、力触覚デバイスなしで遠隔地の力触覚情報の伝達を実現してきた。

 今回、Visual Hapticsをロボット内での実装からエッジサーバー上での実装に変更することで、ロボット側で必要な処理負荷を軽減するとともに、エッジサーバーの切り替え動作にも対応可能なVisual Hapticsの研究開発に取り組んだ。

3.実証実験

 遠隔操作における本技術の効果を確認するために、NTT武蔵野研究開発センタにディスプレーとロボット操作用デバイス、NTT横須賀研究開発センタにロボットを配置し、直線距離50キロメートル強の2拠点間をAPNを模擬したネットワークで接続して遠隔操作を行う実験用ネットワークを構築した(図2)

図2 実証実験構成

 ロボット側で撮影したカメラ映像にはVisual Hapticsにより力触覚情報を付加し、操作者は力触覚情報を視覚的に確認しながら操作を行った。また、Visual Haptics処理に要する時間とネットワークの遅延時間をリアルタイムに測定し、End-to-Endでの遅延時間が性能要件を満たさなくなる場合に別のネットワークおよび別のサーバー処理へと切り替える機能を備えた。

 この実験構成において、エッジサーバーを過負荷状態にして遠隔操作環境を悪化させた場合、従来構成では遠隔操作が困難になったが、提案構成では品質が悪化してから約100ミリ秒後には切り替え制御が完了したことに加え、力触覚情報等の感覚情報を遠隔に伝達することで違和感なく操作できることを確認し、技術の有効性を確認した。

4.今後の展開

 本実証実験で得られた成果は、高度な作業をアシスト機能付きの遠隔操作で実施可能にすることができ、場所を問わない作業の幅を広げることが期待できる。

 今後は適用可能領域を広げ、人命にかかわる高度な操作の遠隔化として遠隔手術や遠隔設備修理などさまざまなユースケースで適用可能とすることで、場所にとらわれない新たな働き方の具現化を実現していく。これにより、技術者の移動時間削減による生産性向上、身体的な制約のある人の就労機会提供、さらには医療等の地域格差解消などを目指していく。

<資料提供:NTT、三菱電機>