読話術(shù)の難易度を下げるための既存の技術(shù)手段には、主に磁場、視覚畫像、超音波などの方法がある。最も流行している非接觸式視覚畫像方法を例にすると、読話の精度は比較的高いが、顔の角度、光の強さ、頭の動き、遮りなどの干渉を受けやすい。特にコロナ流行中のマスク著用により、視覚による読話術(shù)が新たな挑戦に直面している。顔の筋肉の細かな動きによる読話術(shù)には、重要な科學研究の価値と広い応用の見通しがある。光明日報が伝えた。

清華大學機械工學部スマート?生物機械チームはこのほど、中國科學院北京ナノエネルギー?システム研究所のチームと協(xié)力し、新たな読話システムを研究開発した。関連研究成果はオープンアクセスジャーナル「ネイチャー?コミュニケーションズ」に掲載された。

同システムには低コストで自ら給電するフレキシブル摩擦帯電センサーと、プロトタイプ學習に基づくディープラーニングモデルが含まれる。センサーは唇の筋肉の動きにより生まれる電気信號を解読システムに送り、意思疎通が可能な言語に翻訳する。この研究はセンサーの機械?電気性能をテスト?分析し、母音、単語、句、無聲音、有聲音を選定する唇の動きの信號的特徴を採取?抽出した。同時に採取した唇の動きと音聲信號と比較することで、発聲の有無に関わらず唇の動きの信號に一致性があることを証明した。さらに話す速度と唇の動き方などの異なるパラメータによる信號の特徴への影響の法則を分析し、唇の動きの信號の識別に用いられるプロトタイプ學習に基づく空洞循環(huán)ニューラルネットワークモデルを打ち出した。20の分類（1分類のサンプル數(shù)は100件）のテストの正確度は94.5％にのぼった。

注意すべきは、上述した自ら給電するセンサーが、フレキシブルポリマーフィルムとフレキシブル電極によって作られており、人の裝著の快適性を高められることだ。研究チームはこのシステムを利用し、本人確認による入口のロック解除、ラジコンの方向制御、唇の動きと音聲のリアルタイムの切り替えなど複數(shù)のシーンにおける使用方法を示し、同システムの読話分野の実現(xiàn)可能性と応用のポテンシャルを示した。（編集YF）

「人民網(wǎng)日本語版」2022年3月28日