李研究室では、音声および言語を用いた人対人・人対機械のコミュニケーションを対象として、音声認識・音声対話・自然言語処理・音声インタラクション・アバターコミュニケーションに関する研究を行っています。機械による音声・言語・対話処理を軸とした知的情報処理(いわゆるAI)の技術発展、ならびに万人にとってより自然で使いやすい声やことばによるマンマシンインタフェースの高度な実現を目指して、理論に基づくものづくり、モノづくりの知見による理論の推進の両面を重視しながら、身近な話題から最新のトピックまで様々な研究に取り組んでいます。

主な研究トピック

  • 音声認識・音声合成
  • 音声対話システム
  • 自然言語処理
  • CGエージェントインタラクション
  • アバターコミュニケーション支援

李研は酒向研究室と共同で研究室を運営しています。また徳田・南角・橋本研究室と協力関係にあります。


研究室主催者

名古屋工業大学 教授

李 晃伸 / LEE Akinobu

名古屋工業大学 教授

1998年京都大学大学院修士課程修了.2000年同大学院情報学研究科博士課程短期修了.同年奈良先端科学技術大学院大学情報科学研究科助手.2005年より名古屋工業大学大学院工学研究科助教授,2007年,同准教授.2016年,同教授。主として音声言語理解・音声認識・音声対話システム・アバターコミュニケーションの研究に従事.博士(情報学).JSPS科研費,JST CREST,内閣府ムーンショット型研究開発等の研究開発プロジェクトおよび多くの共同研究に従事.電子情報通信学会,情報処理学会,日本音響学会,人工知能学会,ISCA,IEEE各会員.

コーディングを愛し、オープンソース活動に長年従事。 以下のオープンソースソフトウェア・CGアバターの主開発者でもある。

  • 連続音声認識エンジンJulius (1996~)
  • 音声インタラクション構築ツールキット MMDAgent (2011~)
  • 音声インタラクション・アバターツールキット MMDAgent-EX (2020~)
  • CGアバター ジェネ / うか (2023~)

最近のニュース・投稿


招待講演

電子情報通信学会VNV研究会の第18回年次大会(3月25日開催)において李先生が「リアリティを体現するアバターコミュニケーション研究」と題して招待講演を行いました。

HAIシンポジウム2024でM2の東省吾君と宮下陸君、B4の鈴木香保さんが発表を行いました

3月5日~3月6日開催のHAIシンポジウム2024で以下の内容について、M2の東省吾君と宮下陸君、B4の鈴木香保さんが発表を行いました。

CGエージェントを用いた音声対話システムにおける空間共有感のための自己投影法」 著者:○東 省吾,上乃 聖,李 晃伸(名古屋工業大学)

豊かなノンバーバルコミュニケーションのためのHMDを用いた没入型音声対話システム」 著者:○宮下 陸,上乃 聖,李 晃伸(名古屋工業大学)

カウンセリングにおける悩み構造の言語化を支援する音声対話システム」 著者:○鈴木 香保,上乃 聖,李 晃伸(名古屋工業大学)

言語処理学会第30回年次大会(NLP2024)でM2の藤田敦也君と志満津奈央さん、B4の酒井健壱君が発表を行いました

3月5日~3月6日開催の言語処理学会第30回年次大会(NLP2024)で以下の内容について、M2の藤田敦也君と志満津奈央さん、B4の酒井健壱君が発表を行いました。

大規模言語モデルを用いたEmotional Support Conversationシステムの構築とその評価」 著者:○藤田 敦也,上乃 聖,李 晃伸(名古屋工業大学)

経験情報収集および伝達を主目的とする雑談対話による関係性維持支援システム」 著者:○志満津 奈央,上乃 聖,李 晃伸(名古屋工業大学)

日本音響学会第151回(2024年春季)研究発表会でM2のLourenco Correa Iago君、M1の市川奎吾君、B4の岡本海君と嶋崎純一君、上乃聖先生が発表を行いました

3月6日~3月8日開催の日本音響学会第151回(2024年春季)研究発表会で以下の内容について、M2のLOURENCO CORREA Iago君、M1の市川奎吾君、B4の岡本海君と嶋崎純一君、上乃聖先生が発表を行いました。

「Synthesis of non-native voice with native-like accent using voice conversion」 著者:○Iago Lourenco Correa,Sei Ueno,Akinobu Lee ( Nagoya Institute of Technology )

MMDAgent-EXを一般公開しました

研究室で開発してきたCGアバターを用いた音声対話・マルチモーダル対話・アバターコミュニケーションのためのオープンソースな研究開発プラットフォーム MMDAgent-EX を一般公開しました。詳細は以下からご覧ください。

自動車技術会2023年秋季大会学術講演会でM1の柄澤光一朗君が発表を行いました

10月11日~10月13日開催の自動車技術会2023年秋季大会 学術講演会で以下の内容について、M1の柄澤光一朗君が発表を行いました。

「質問応答データベースと大規模言語モデルによる音声対話システムを用いた運転中の音声操作発話収集」
○柄澤 光一朗,李 晃伸(名古屋工業大学),神沼 充伸(日産自動車)

日本音響学会2023年秋季研究発表会でM1の市川奎吾君と木全亮太朗君、上乃聖先生が発表を行いました

9月26日~9月28日開催の日本音響学会2023年秋季研究発表会で以下の内容について、M1の市川奎吾君と木全亮太朗君、上乃聖先生が発表を行いました。

「発話交替頻度を導入した実対話音声に対するSpeaker Diarizationのためのデータ生成」
○市川 奎吾,上乃 聖,李晃伸(名古屋工業大学)

「異なるスタイルの笑い声生成のための有声音・無声音間隔の制御」
○木全 亮太朗,上乃 聖,李晃伸(名古屋工業大学)

「時間軸-周波数軸上の幅を持たせる音声合成を用いた音声認識のデータ拡張」
○上乃 聖,李晃伸(名古屋工業大学)