中臺研究室

About研究室について

聖徳太子のように、音を聞き分ける。

中臺研究室は、ロボットに音を聞かせ、まわりの環境を理解させる技術を研究しています。
雑音や反響が大きく変わる実際の場所でも働くよう、音源の位置推定、音源分離、音声認識を組み合わせます。
これまでの技術は、ロボット聴覚のオープンソースソフトウェア HARK として一般に公開されています。
音だけでなく映像などもあわせて扱い、人とのやりとりや野鳥の観測、災害救助にも広げています。

Research研究テーマ

2006年の発足以来、ロボット聴覚と環境理解の研究を中心に進めてきました。2024年4月に研究室の名称を「Robotics and AI Laboratory」に変え、これまでの技術に加えて、コミュニケーションやインタラクションに使える次世代の技術まで、人の社会に貢献できるAIとロボット工学の研究に取り組んでいます。

※イメージ画像

ロボット聴覚・音環境理解↗

人が普段聞いているような音環境を、ロボットにどう理解させるかを扱っています。音源の位置推定、目的の音の抽出、抽出した音の認識という要素技術を組み合わせ、複数の人が同時に話してもそれぞれの声を聞き分ける技術をつくります。

※イメージ画像

コミュニケーションとインタラクション↗

ロボット聴覚の技術を、人とロボットのやりとりに応用してきました。近年は多様性・公平性・包摂性（DE&I）に力を入れ、聴覚障害のある人と聴者の隔たりをなくす手話処理や、反響音から周りの形をつかむエコロケーションに取り組んでいます。

※イメージ画像

動物生態学と音情景理解↗

複数のマイクロホンアレイを使い、屋外の広い範囲で音源の三次元位置を推定して野鳥の居場所を求めます。教師データが少なくても学習できる深層学習の手法で歌声から種類を聞き分けるほか、鳥・クジラ・カエルをまとめて識別できる分類器づくりにも取り組んでいます。

※イメージ画像

災害救助↗

ドローンにマイクロホンアレイを載せ、ドローン自体の騒音や風の音を抑えて、要救助者の声などを検出する研究です。推定した音源の三次元位置を地図に重ねる「音の見える化」のインタフェースを、早稲田大学や熊本大学と協力して実現しています。

Voices先輩の声

所属していた学生の回答をもとにまとめています。評価・クチコミは学生個人の経験に基づくもので、研究室の公式見解ではありません。

インタビューに協力いただいた学生に、内容にかかわらず謝礼（1,000円分のギフト）をお渡しすることがあります。