About me

Educations / Research areas / Awards / Societies / Internship experiences

Activity Datasets on Education and Research, Kyoto University

学歴 (Educations)

  • Kyoto University
    Ph. D. course
    Dept. of Intelligence Science and Technology
    Graduate School of Informatics
    (京都大学 大学院情報学研究科 知能情報学専攻 博士後期課程)
    Kyoto, Japan
    April 2015 - March 2018 Ph.D. thesis : Engagement Recognition based on Multimodal Behaviors for Human-Robot Dialogue
    (博士論文 : ロボットとの対話におけるマルチモーダルなるまいに基づくエンゲージメント認識)
    [PDF]
  • Kyoto University
    Master course
    Dept. of Intelligence Science and Technology
    Graduate School of Informatics
    (京都大学 大学院情報学研究科 知能情報学専攻 修士課程)
    Kyoto, Japan
    April 2013 - March 2015
    Master thesis : Speaker diarization and backchannel detection by combining acoustic and eye-gaze information in poster conversations
    (修士論文 : ポスター会話における音響・視線情報を統合した話者区間及び相槌の検出)
  • Kurume National College of Technology
    Mechanical and Electrical Systems Engineering Advanced Course
    Advanced Engineering School
    (久留米工業高等専門学校 専攻科 機械・電気システム工学専攻)
    Fukuoka, Japan
    April 2011 – March 2013
  • Kurume National College of Technology
    Dept. of Control and Information Systems Engineering
    (久留米工業高等専門学校 制御情報工学科)
    Fukuoka, Japan
    April 2006 – March 2011

* Ph.D. degree (Informatics) from Kyoto University (September 2018)

* Master’s degree (Informatics) from Kyoto University (March 2015)

* Bachelor’s degree (Engineering) from National Institution for Academic Degrees and University Evaluation (March 2013)

* Research Fellow (DC1) of The Japan Society of the Promotion of Science (JSPS) 日本学術振興会 特別研究員 (DC1) (April 2015 - March 2018)

研究分野 (Research interests)

  • Spoken dialogue system
  • Multimodal signal processing
  • Human-robot interaction
  • Speech signal processing

記事掲載 (Media Article)

受賞 (Awards)

  • 人工知能学会 2023年度 研究会優秀賞 (June 2024) [賞状]
  • NETEXPLO Innovation 2022 Award Winner (April 18th 2023) [Interview] [Link]
  • Frontiers in Robotics and AI - 2022 outstanding article (March 2023) [Certificate] [Link]
  • International Workshop on Spoken Dialogue Systems Technology (IWSDS) 2023, Best Paper Award (Feb. 2023) [Certificate] [Link]
  • 第4回 日本オープンイノベーション大賞 文部科学大臣賞 (Feb. 2022)
  • International Conference on Multimodal Interaction (ICMI) 2021, Outstanding Reviewer Award (Oct. 2021) [賞状] [Link]
  • 人工知能学会 2019年度 研究会優秀賞 (June 2020) [賞状]
  • 日本音響学会 粟屋潔学術奨励賞 (May 2020) [賞状]
  • 人工知能学会 2018年度 研究会優秀賞 (June 2019)
  • 人工知能学会 2017年度 研究会優秀賞 (June 2018)
  • 人工知能学会 音声・言語理解と対話処理研究会(SIG-SLUD) 第8回対話システムシンポジウム 若手奨励賞 (Oct. 2017)
  • 日本音響学会 学生優秀発表賞 (Sep. 2016)
  • 日本学生支援機構 第一種奨学金 (修士課程) 特に優れた業績による全額返還免除 (June 2015)
  • 情報処理学会 第77回全国大会 学生奨励賞 (March 2015)
  • 日本音響学会 関西支部 第17回 若手研究者交流研究発表会 優秀奨励賞 (Dec. 2014)
  • 久留米工業高等専門学校 専攻科 機械・電気システム工学専攻 修了生総代 (March 2013)
  • ACM-ICPC (ACM 国際大学対抗プログラミングコンテスト) アジア地区予選 出場 (Dec. 2010)
  • 全国高等専門学校第19回プログラミングコンテスト 自由部門 特別賞 (Oct. 2008)
  • 電子情報通信学会 情報・システムソサイエティ スーパーコンピューティング奨励賞 (Aug. 2008)
  • 情報処理学会 若手奨励賞 (Aug. 2008)

職歴 (Job experiences)

  • 京都大学 大学院情報学研究科 助教 (工学部情報学科 兼担, April. 2019 - 現在)
  • スウェーデン王立工科大学 (KTH) 客員研究員 (May 2023 - Oct. 2023)
  • 京都大学 大学院情報学研究科 特定助教 (Oct. 2018 - March 2019)
  • 京都大学 大学院情報学研究科 教務補佐員 (April 2018 - Sep. 2018)
  • 久留米工業高等専門学校 非常勤講師 (Dec. 2018)
  • 京都大学 大学院情報学研究科 情報学展望２ ティーチングアシスタント (April 2017 - Sep. 2017)
  • 京都大学 物理学実験 ティーチングアシスタント (April 2016 - Sep. 2016)
  • 京都大学 大学院情報学研究科 知能情報学専攻 メディアアーカイブ分野 オフィスアシスタント (April 2013 - March 2015)

教育歴 (Teaching experiences)

  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2023年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習２ (2023年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2022年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習２ (2022年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2021年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習２ (2021年度後期)
  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2020年度後期)
  • 京都大学 国際高等教育院 ILASセミナー「音とAI」 (2020年度前期)
  • 京都大学 大学院情報学研究科 分野別演習 音声メディア分野 (2020年度前期)
  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2019年度後期)
  • 京都大学 大学院情報学研究科 分野別演習 音声メディア分野 (2019年度前期)
  • 京都大学 工学部情報学科 計算機科学実験及演習３ソフトウェア (2019年度前期)
  • 京都大学 工学部情報学科 計算機科学実験及演習４ (2018年度後期)
  • 久留米工業高等専門学校 技術哲学 (Dec. 2018)
  • 久留米工業高等専門学校 専攻科サマーレクチャー (Sep. 2018)

学会活動 (Society activities)

各種委員

  • 言語処理学会 編集委員（September 2024 - ）
  • 人工知能学会 学会誌・論文誌 編集委員（June 2020 - May 2024）
  • 日本音響学会関西支部 会計幹事（April 2021 - March 2023）
  • IEEE Kansai Section Young Professionals（January 2022 - , 2023はSecretary and Treasurer）
  • 人工知能学会 言語・音声理解と対話処理研究会（SIG-SLUD）幹事（April 2023 - March 2027）
  • 人工知能学会 言語・音声理解と対話処理研究会（SIG-SLUD）専門委員（April 2020 - March 2024）
  • 電子情報通信学会 ヴァーバル・ノンヴァーバル・コミュニケーション研究会（VNV）運営委員 (May 2020 - )
  • 情報処理学会全国大会 IPSJ-ONE 実行委員 (2020, 2021, 2022, 2022は幹事)
  • 対話システムシンポジウム 実行委員 (2019, 2020, 2021, 2022)
  • 人工知能学会 論文賞 選定委員（2021, 2022, 2023, 2024）
  • 言語処理学会 年次大会 大会賞審査員 (NLP 2021, 2022, 2023, 2024)
  • INTERSPEECH 2020 Session Co-Chairs (Spoken language Understanding II)
  • SIGDIAL 2020 Video Presentation Co-Chairs
  • SIGDIAL 2024 Local Arrangement Chair
  • YRRSDS 2024 Organizer
  • ムーンショット型研究開発事業 新たな目標検討に向けた目標検討チーム:人類の分断を克服し調和を実現するための科学技術に関する サブリーダー [JSTプレスリリース] [京都大学HP] [調査研究報告書] (Jan. 2021 - June 2021)

所属学会

競争的資金 (Research grants)

研究代表者

  • MaAI：マルチモーダル対話基盤モデルによる非言語翻訳 (科学技術振興機構 さきがけ 社会課題を解決する人間中心インタラクション, 2024年度-2027年度)
  • 対話の意味理解に基づく笑いの生成・説明 (科研費 若手研究, 2023-2025年度)
  • マルチモーダルなふるまいに基づく音声対話の人間目標型評価 (科学技術振興機構 ACT-X 数理・情報のフロンティア, 2021年度-2023年度)
  • 対話理解および発話生成と連動するターンテイキングシステム (科研費 若手研究, 2020-2022年度)
  • マルチモーダル処理による心的状態推定に基づいた音声対話システム (科研費 特別研究員奨励費, 2015-2017年度) [Link]

研究分担者

  • 音声会話に伴う身振りを対象としたマルチモーダル記号論の構築 (科研費 学術変革領域研究(B), 2023年度)
  • 人類の分断を克服し調和を実現するための科学技術に関する調和研究 (科学技術振興機構 ムーンショット型研究開発事業 新たな目標検討のためのビジョン策定, 2021年度)
  • End-to-Endモデルに基づく汎用的な音声理解・対話 (科研費 基盤研究（A）, 2020-2023年度)
  • 人間との対話継続及び関係構築のための対話知能システム (科研費 新学術領域研究 (研究領域提案型), 2019-2023年度)

査読歴 (Reviewer experiences)

学会誌 (Academic journals)

  • 人工知能学会論文誌 (2019, 2020, 2021, 2022, 2023)
  • 電子情報通信学会論文誌 A 基礎・境界ソサイエティ (2019, 2020, 2022)
  • 電子情報通信学会論文誌 D 情報・システム (2021, 2022, 2023)
  • 言語処理学会論文誌 (2020, 2023)
  • 日本感性工学会論文誌 (2021)
  • 情報と知能 (日本知能情報ファジィ学会) (2023)
  • ヒューマンインタフェース学会論文誌 (2023)
  • ACM Transactions on Asian and Low-Resource Language Information Processing (ACM-TALLIP) (2018)
  • Journal of Robotics and Mechatronics (2019)
  • International Journal of Social Robotics (2019, 2021, 2022)
  • Artificial Life and Robotics (2020, 2022)
  • Advanced Biomedical Engineering (2020)
  • Applied Acoustics (2021)
  • IEEE Access (2021)
  • IEICE Transactions on Information and Systems (2021, 2023, 2024)
  • IEEE Transactions on Affective Computing (2022)
  • Frontiers in Robotics and AI (2022)
  • Frontiers in Communication (2023)
  • Advanced Robotics (2023)

国際会議 (International conferences)

  • International Conference on Human-Robot Interaction (HRI) (2020, 2022, 2023, 2024, 2025)
  • APSIPA ASC (2019, 2020, 2021)
  • Annual meeting of the Special Interest Group on Discourse and Dialogue (SIGDIAL) (2019, 2020, 2021, 2022, 2023, 2024)
  • International Conference on Human-Agent Interaction (HAI) (2019, 2023)
  • International Conference on Multimodal Interaction (ICMI) (2019, 2020, 2021, 2022, 2023, 2024)
  • International Conference on Multimodal Interaction (ICMI) Late Breaking Result track (2023)
  • International Symposium on System Integration (SII) (2021)
  • International Conference on Acoustics, Speech, and Signal Processing (ICASSP) (2021, 2022, 2023, 2024)
  • Asia-Pacific Chapter of the Association for Computational Linguistics and International Joint Conference on Natural Language Processing (AACL-IJCNLP) (2021, 2022)
  • International Conference on Computational Linguistics (COLING) (2025)
  • Joint International Conference on Computational Linguistics, Language Resources and Evaluation (LREC-COLING) (2024)
  • INTERSPEECH (2021, 2022, 2023, 2024)
  • Empirical Methods in Natural Language Processing (EMNLP) (2021, 2023, 2024)
  • Anual Meeting of the Association for Computational Linguistics (ACL) (2023, 2024)
  • North American Chapter of the Association for Computational Linguistics (NAACL) (2025)
  • European Chapter of the Association for Computational Linguistics (EACL) (2022)
  • International Workshop on Spoken Dialogue Systems Technology (IWSDS) (2022, 2023, 2024)

ゲスト講義・イベント登壇 (Guest lecture, Event)

  • 久留米工業高等専門学校 専攻科設立30周年記念講演会 (3rd Nov. 2023)
  • 滋賀県立大学 人間文化セミナー 「人間関係の科学B：コミュニケーションを考える」 (25th Jan. 2022)
  • 日本工学アカデミー 九州支部 高等専門学校出張講演会（久留米工業高等専門学校）「ICT・AI技術の現状と将来の展望」 (19th Jan. 2022)
  • アジア太平洋研究所 AOYA会議 2021 (11-12th Nov. 2021)
  • 大阪産業局 京阪神スタートアップアカデミア・コアリション キックオフカンファレンス [link] (29th Sep. 2021)

インターンシップ経験 (Internship experiences)