NEDO、北海道大学、BIPROGY、テクノフェイス 触覚情報と診察動画を統合・伝送し、遠隔で触感の再現に成功

2024/01/10  BIPROGY 株式会社 

2024.1.10

NEDO(国立研究開発法人新エネルギー・産業技術総合開発機構)
国立大学法人北海道大学
BIPROGY 株式会社
株式会社テクノフェイス

NEDO、北海道大学、BIPROGY、テクノフェイス 触覚情報と診察動画を統合・伝送し、遠隔で触感の再現に成功

触覚情報と診察動画を統合・伝送し、遠隔で触感の再現に成功 ―医療手技の定量化や教育利用など、医療の高度化に貢献― NEDOが委託する「ポスト5G情報通信システム基盤強化研究開発事業」(以下、本事業)の一環で、国立大学法人北海道大学、BIPROGY株式会社、株式会社テクノフェイス(以下、本研究グループ)は、触覚情報と診察動画を統合し、遠隔の医師間で共有する遠隔触診システム(以下、本システム)を開発しました。今般、北海道大学病院(北海道札幌市)、帯広厚生病院(北海道帯広市)、函館中央病院(北海道函館市)の3拠点を結んだ遠隔触診の実証に成功しました。

本システムは、画像、音声、触感などのデータを統合的に解析するマルチモーダル信号を動画のフレーム単位で統合・同期し、5Gで伝送するものです。マルチモーダル信号が、動画ストリーミングの既存フォーマットに統合されることで、通信品質を決める要素が帯域と遅延のみに単純化されます。これにより、マルチモーダル信号をリアルタイムに扱うだけでなく、データベース化して蓄積・配信・再現でき、医療手技の定量化や教育用途など、新しい利用機会をもたらすことが見込まれます。本研究グループは、本システムの普及促進やユーザーとの価値共創を目指し、本格運用や関連技術の展開を2024年度以降に予定しています。

1.背景

ポスト5G環境下では、多数の機器が接続した状態でマルチモーダルなセンシング情報が行き交い、それらの情報を活用した各サービスに対して、最適なネットワークの提供が必要となります。ポスト5Gは今後、医療や工場、自動運転といった多様な産業用途への活用が見込まれており、日本の競争力の核となり得る技術と期待されています。

ポスト5Gでは、各接続サービスに対して、さらなる高速・大容量、高信頼、低遅延など、幅広い要求条件に対応する必要があります。そこでサービス要件に合わせて単一のネットワークを複数のスライスに分けて提供するネットワーク・スライシングが提案されています。ネットワーク・スライシングは、継続的に拡張がなされていますが、最適化にはサービスごとに接続された膨大な機器群の監視や各サービスの性能要求の判別、経済性を考慮した機器開発、複数の規格の扱いなどの課題を解決する必要があり、ネットワーク事業を担う企業だけではこれらの課題を解決することが難しい状況です。

そこで、NEDOは、本事業※1においてポスト5Gに対応した情報通信システムの中核となる技術の開発を強化しており、その一環として本研究グループは、マルチモーダル情報サービスにおけるネットワークの最適化と、その技術応用に取り組んできました。

今般、本研究グループは、動画・音声配信の中核技術であるコーデック※2に着目し、それにマルチモーダル信号を埋め込み、統合することで、コーデックの持つ性能基準とスライシング基準をひも付ける手法を開発しました。その技術の応用として、触覚情報と診察動画を遠隔の医師間で共有する遠隔触診システムを構築し、北海道大学病院、帯広厚生病院、函館中央病院の3拠点を結んだ遠隔触診の実証に成功しました。

公式ページ(続き・詳細)はこちら
https://www.biprogy.com/pdf/news/nr_240110.pdf

他の画像

関連業界