Publications

2025

1. Analysing the Language of Neural Audio Codecs

   Joonyong Park ,  Shinnosuke Takamichi ,  David M. Chan ,  Shunsuke Kando ,  Yuki Saito ,  and  Hiroshi Saruwatari

   In IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU) , Dec 2025

   Bib

   @inproceedings{park25asru_analysis-neural-audio-codec,
     abbr_publisher = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     booktitle = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     title = {Analysing the Language of Neural Audio Codecs},
     author = {Park, Joonyong and Takamichi, Shinnosuke and Chan, David M. and Kando, Shunsuke and Saito, Yuki and Saruwatari, Hiroshi},
     year = {2025},
     month = dec
   }

2. Learning Marmoset Vocal Patterns with a Masked Autoencoder for Robust Call Segmentation, Classification, and Caller Identification

   Bin Wu ,  Shinnosuke Takamichi ,  Sakriani Sakti ,  and  Satoshi Nakamura

   In IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU) , Dec 2025

   Bib

   @inproceedings{wu25asru_marmoset-masked-autoencoder,
     abbr_publisher = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     booktitle = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     title = {Learning Marmoset Vocal Patterns with a Masked Autoencoder for Robust Call Segmentation, Classification, and Caller Identification},
     author = {Wu, Bin and Takamichi, Shinnosuke and Sakti, Sakriani and Nakamura, Satoshi},
     year = {2025},
     month = dec
   }

3. Do statistical patterns in neural audio codec tokens by synthesized speech reveal structure beyond speech quality?

   Joonyong Park ,  Shinnosuke Takamichi ,  David M. Chan ,  Shunsuke Kando ,  Yuki Saito ,  and  Hiroshi Saruwatari

   In Joint Meeting Acoustical Society of America and Acoustical Society of Japan , Dec 2025

   Bib

   @inproceedings{park25asj-asa_audio-codec-speech-quality,
     abbr_publisher = {Joint Meeting Acoustical Society of America and Acoustical Society of Japan},
     booktitle = {Joint Meeting Acoustical Society of America and Acoustical Society of Japan},
     title = {Do statistical patterns in neural audio codec tokens by synthesized speech reveal structure beyond speech quality?},
     author = {Park, Joonyong and Takamichi, Shinnosuke and Chan, David M. and Kando, Shunsuke and Saito, Yuki and Saruwatari, Hiroshi},
     year = {2025},
     month = dec
   }

4. Analysis of a Dataset for Evaluating Semantic Relevance Between Text and Audio

   Yusuke Kanamori ,  Yuki Okamoto ,  Shinnosuke Takamichi ,  Yuki Saito ,  and  Hiroshi Saruwatari

   In Joint Meeting Acoustical Society of America and Acoustical Society of Japan , Dec 2025

   Bib

   @inproceedings{kanamori25asj-asa_semantic-relevance-dataset-analysis,
     abbr_publisher = {Joint Meeting Acoustical Society of America and Acoustical Society of Japan},
     booktitle = {Joint Meeting Acoustical Society of America and Acoustical Society of Japan},
     title = {Analysis of a Dataset for Evaluating Semantic Relevance Between Text and Audio},
     author = {Kanamori, Yusuke and Okamoto, Yuki and Takamichi, Shinnosuke and Saito, Yuki and Saruwatari, Hiroshi},
     year = {2025},
     month = dec
   }

5. Developing learners’ communicative competence in English as an international language using non-native English variations with AI speech synthesis technology

   Tomoko Kasamaki ,  Shinnosuke Takamichi ,  Yuta Matsunaga ,  Shigeo Fujiwara ,  Yusuke Yoshikawa ,  Kikuko Yui ,  and  Takatoyo Umemoto

   In EUROCALL , Aug 2025

   Bib

   @inproceedings{kasamaki25euro_non-native-variations-AI,
     abbr_publisher = {EUROCALL},
     booktitle = {EUROCALL},
     title = {Developing learners’ communicative competence in English as an international language using non-native English variations with AI speech synthesis technology},
     author = {Kasamaki, Tomoko and Takamichi, Shinnosuke and Matsunaga, Yuta and Fujiwara, Shigeo and Yoshikawa, Yusuke and Yui, Kikuko and Umemoto, Takatoyo},
     year = {2025},
     month = aug
   }

6. 一般的・魅力的な男性の声質を用いた Voice Ownership Illusion による顕在的・潜在的自尊心の変化の検証

   國見 友亮 ,  木村 健太 ,  鳴海 拓志 ,  高道 慎之介 ,  and  持丸 正明

   In 日本バーチャルリアリティ学会 , Sep 2025

   Bib

   @inproceedings{kunimi25vrsj_voice-ownership-illusion,
     abbr_publisher = {日本バーチャルリアリティ学会},
     booktitle = {日本バーチャルリアリティ学会},
     title = {一般的・魅力的な男性の声質を用いた Voice Ownership Illusion による顕在的・潜在的自尊心の変化の検証},
     author = {友亮, 國見 and 健太, 木村 and 拓志, 鳴海 and 慎之介, 高道 and 正明, 持丸},
     year = {2025},
     month = sep
   }

7. 音楽基盤モデルは音高情報を螺旋構造に埋め込むか？

   八木 颯斗 ,  and  高道 慎之介

   In 情報処理学会 音楽情報科学研究会 , Aug 2025

   Bib

   @inproceedings{yagi25mus_music-model-spiral,
     abbr_publisher = {情報処理学会 音楽情報科学研究会},
     booktitle = {情報処理学会 音楽情報科学研究会},
     title = {音楽基盤モデルは音高情報を螺旋構造に埋め込むか？},
     author = {颯斗, 八木 and 慎之介, 高道},
     year = {2025},
     month = aug
   }

8. 記述言語学に基づく方言音声合成の評価枠組みの構築と宮古語池間西原方言への適用検討

   佐藤 なな子 ,  高道 慎之介 ,  中川 奈津子 ,  宮川 創 ,  and  坂井 美日

   In 言語処理学会 若手支援事業 , Sep 2025

   Bib

   @inproceedings{sato25yans_ikehara_eval,
     abbr_publisher = {言語処理学会 若手支援事業},
     booktitle = {言語処理学会 若手支援事業},
     title = {記述言語学に基づく方言音声合成の評価枠組みの構築と宮古語池間西原方言への適用検討},
     author = {なな子, 佐藤 and 慎之介, 高道 and 奈津子, 中川 and 創, 宮川 and 美日, 坂井},
     year = {2025},
     month = sep
   }

9. Common Crawl を用いた大規模音声音響データセットの構築

   淺井 航平 ,  杉浦 一瑳 ,  中田 亘 ,  栗田 修平 ,  高道 慎之介 ,  小川 哲司 ,  and  東中 竜一郎

   In 日本音響学会秋季研究発表会 , Sep 2025

   Bib PDF

   @inproceedings{asai25asja_commoncrawl-dataset,
     abbr_publisher = {日本音響学会秋季研究発表会},
     booktitle = {日本音響学会秋季研究発表会},
     title = {Common Crawl を用いた大規模音声音響データセットの構築},
     author = {航平, 淺井 and 一瑳, 杉浦 and 亘, 中田 and 修平, 栗田 and 慎之介, 高道 and 哲司, 小川 and 竜一郎, 東中},
     year = {2025},
     month = sep,
   }

10. パラ言語・非言語情報の記述文をクエリとした目的音声抽出

    関 健太郎 ,  伊藤 信貴 ,  山内 一輝 ,  岡本 悠希 ,  山岡 洸瑛 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib

    @inproceedings{seki25asja_paralinguistic-query,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {パラ言語・非言語情報の記述文をクエリとした目的音声抽出},
      author = {健太郎, 関 and 信貴, 伊藤 and 一輝, 山内 and 悠希, 岡本 and 洸瑛, 山岡 and 佑樹, 齋藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2025},
      month = sep
    }

11. 空間情報を伴う音響言語モデルの検討

    関 健太郎 ,  岡本 悠希 ,  山岡 洸瑛 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib

    @inproceedings{seki25asja_acoustic-llm,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {空間情報を伴う音響言語モデルの検討},
      author = {健太郎, 関 and 悠希, 岡本 and 洸瑛, 山岡 and 佑樹, 齋藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2025},
      month = sep
    }

12. なりすまし音声検出に対する録音再生攻撃の収録条件に関する影響分析

    堀江 涼花 ,  高道 慎之介 ,  and  塩田 さやか

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib PDF

    @inproceedings{horie25asja_replay-attack,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {なりすまし音声検出に対する録音再生攻撃の収録条件に関する影響分析},
      author = {涼花, 堀江 and 慎之介, 高道 and さやか, 塩田},
      year = {2025},
      month = sep,
    }

13. なりすまし音声検出に対する話者適応を用いた音声合成攻撃

    古林 嵯羽仁 ,  高道 慎之介 ,  and  塩田 さやか

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib PDF

    @inproceedings{furubayashi25asja_tts-attack,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {なりすまし音声検出に対する話者適応を用いた音声合成攻撃},
      author = {嵯羽仁, 古林 and 慎之介, 高道 and さやか, 塩田},
      year = {2025},
      month = sep,
    }

14. 大規模音声自己教師あり学習モデルにもとづく音声好感度予測

    須田 仁志 ,  高道 慎之介 ,  and  深山 覚

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib PDF

    @inproceedings{suda25asja_likeability-prediction,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {大規模音声自己教師あり学習モデルにもとづく音声好感度予測},
      author = {仁志, 須田 and 慎之介, 高道 and 覚, 深山},
      year = {2025},
      month = sep,
    }

15. Audio Captioning モデルの発達的カリキュラム学習

    稲垣 賢斗 ,  and  高道 慎之介

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib PDF

    @inproceedings{inagaki25asja_audio-captioning,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {Audio Captioning モデルの発達的カリキュラム学習},
      author = {賢斗, 稲垣 and 慎之介, 高道},
      year = {2025},
      month = sep,
    }

16. どのような音声離散表現が音声の再合成と継続に適するか？

    神藤 駿介 ,  高道 慎之介 ,  and  宮尾 祐介

    In 日本音響学会秋季研究発表会 , Sep 2025

    Bib PDF

    @inproceedings{kando25asja_speech-repr,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {どのような音声離散表現が音声の再合成と継続に適するか？},
      author = {駿介, 神藤 and 慎之介, 高道 and 祐介, 宮尾},
      year = {2025},
      month = sep,
    }

17. 漫画画像理解性能が漫画音声合成の品質に与える影響の調査

    越野 颯太 ,  上治 正太郎 ,  高道 慎之介 ,  and  中村 友彦

    In 電子情報通信学会ヒューマンコミュニケーショングループ・コミック工学研究会 , Jul 2025

    Bib PDF

    @inproceedings{koshino25comic_maga2voice-eval,
      abbr_publisher = {電子情報通信学会ヒューマンコミュニケーショングループ・コミック工学研究会},
      booktitle = {電子情報通信学会ヒューマンコミュニケーショングループ・コミック工学研究会},
      title = {漫画画像理解性能が漫画音声合成の品質に与える影響の調査},
      author = {颯太, 越野 and 正太郎, 上治 and 慎之介, 高道 and 友彦, 中村},
      year = {2025},
      month = jul,
    }

18. Measuring Time Delay Tolerance in Third-Person Live Commentary for Super Smash Bros. Ultimate

    Ryosuke Matsushita ,  Ryosuke Sakai ,  Koki Fukuda ,  Shinnosuke Takamichi ,  Kota Iura ,  Yuki Saito ,  Graham Neubig ,  Katsuhito Sudoh ,  Hiroya Takamura ,  and  Tatsuya Ishigaki

    In IEEE Conference on Games , Aug 2025

    Bib PDF

    @inproceedings{matsushita25cog_time-delay-tolerance,
      abbr_publisher = {IEEE Conference on Games},
      booktitle = {IEEE Conference on Games},
      title = {Measuring Time Delay Tolerance in Third-Person Live Commentary for Super Smash Bros. Ultimate},
      author = {Matsushita, Ryosuke and Sakai, Ryosuke and Fukuda, Koki and Takamichi, Shinnosuke and Iura, Kota and Saito, Yuki and Neubig, Graham and Sudoh, Katsuhito and Takamura, Hiroya and Ishigaki, Tatsuya},
      month = aug,
      year = {2025},
    }

19. Language-queried target speech extraction using para-linguistic and non-linguistic prompts

    関 健太郎 ,  伊藤 信孝 ,  山内 一樹 ,  岡本 悠希 ,  山岡 幸英 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

    Acoustical Science and Technology, Jun 2025

    Bib PDF

    @article{seki25ast_language-queried,
      abbr_publisher = {IEEE Open Journal of Signal Processing},
      title = {Language-queried target speech extraction using para-linguistic and non-linguistic prompts},
      author = {健太郎, 関 and 信孝, 伊藤 and 一樹, 山内 and 悠希, 岡本 and 幸英, 山岡 and 佑樹, 齋藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2025},
      month = jun,
      journal = {Acoustical Science and Technology},
    }

20. コーパス

    MangaVox：ボイスコミックの計算機理解に向けたマルチモーダル演技音声データセット

    高道 慎之介 ,  中村 友彦 ,  須田 仁志 ,  深山 覚 ,  and  緒方 淳

    In 電子情報通信学会パターン認識・メディア理解研究専門委員会 , Jul 2025

    Bib PDF

    @inproceedings{takamichi25miru_manga-vox,
      abbr_publisher = {電子情報通信学会パターン認識・メディア理解研究専門委員会},
      booktitle = {電子情報通信学会パターン認識・メディア理解研究専門委員会},
      title = {MangaVox：ボイスコミックの計算機理解に向けたマルチモーダル演技音声データセット},
      author = {慎之介, 高道 and 友彦, 中村 and 仁志, 須田 and 覚, 深山 and 淳, 緒方},
      year = {2025},
      month = jul
    }

21. Sign-to-Speech Prosody Transfer

    Toranosuke Manabe ,  Yuto Shibata ,  Shinnosuke Takamichi ,  and  Yoshimitsu Aoki

    In 電子情報通信学会パターン認識・メディア理解研究専門委員会 , Jul 2025

    Bib

    @inproceedings{manabe25miru_sign-to-speech,
      abbr_publisher = {電子情報通信学会パターン認識・メディア理解研究専門委員会},
      booktitle = {電子情報通信学会パターン認識・メディア理解研究専門委員会},
      title = {Sign-to-Speech Prosody Transfer},
      author = {Manabe, Toranosuke and Shibata, Yuto and Takamichi, Shinnosuke and Aoki, Yoshimitsu},
      year = {2025},
      month = jul
    }

22. Exploring the Effect of Segmentation and Vocabulary Size on Speech Tokenization for Speech Language Models

    Shunsuke Kando ,  Yusuke Miyao ,  and  Shinnosuke Takamichi

    In Proceedings of Interspeech , Aug 2025

    Bib PDF

    @inproceedings{kando25interspeech_speech-tokenization,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Exploring the Effect of Segmentation and Vocabulary Size on Speech Tokenization for Speech Language Models},
      author = {Kando, Shunsuke and Miyao, Yusuke and Takamichi, Shinnosuke},
      year = {2025},
      month = aug,
    }

23. Voice Conversion for Likability Control via Automated Rating of Speech Synthesis Corpora

    Hitoshi Suda ,  Shinnosuke Takamichi ,  and  Satoru Fukayama

    In Proceedings of Interspeech , Aug 2025

    Bib PDF

    @inproceedings{suda25interspeech_likability-control,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Voice Conversion for Likability Control via Automated Rating of Speech Synthesis Corpora},
      author = {Suda, Hitoshi and Takamichi, Shinnosuke and Fukayama, Satoru},
      year = {2025},
      month = aug,
    }

24. Japanese speaker verification and spoofing attacks recorded in-the-wild dataset

    Sayaka Shiota ,  Suzuka Horie ,  Kouta Kanno ,  and  Shinnosuke Takamichi

    In Proceedings of Interspeech , Aug 2025

    Bib PDF

    @inproceedings{shiota25interspeech_japanese-spoofing,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Japanese speaker verification and spoofing attacks recorded in-the-wild dataset},
      author = {Shiota, Sayaka and Horie, Suzuka and Kanno, Kouta and Takamichi, Shinnosuke},
      year = {2025},
      month = aug,
    }

25. RELATE: Subjective evaluation dataset for automatic evaluation of relevance between text and audio

    Yusuke Kanamori ,  Yuki Okamoto ,  Taisei Takano ,  Shinnosuke Takamichi ,  Yuki Saito ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Aug 2025

    Bib PDF

    @inproceedings{kanamori25interspeech_relate,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {RELATE: Subjective evaluation dataset for automatic evaluation of relevance between text and audio},
      author = {Kanamori, Yusuke and Okamoto, Yuki and Takano, Taisei and Takamichi, Shinnosuke and Saito, Yuki and Saruwatari, Hiroshi},
      year = {2025},
      month = aug,
    }

26. The text-to-speech in the wild (TITW) dataset

    Jee-weon Jung ,  Wangyou Zhang ,  Soumi Maiti ,  Yihan Wu ,  Xin Wang ,  Ji-Hoon Kim ,  Yuta Matsunaga ,  Seyun Um ,  Jinchuan Tian ,  Hye-jin Shim , and 4 more authors

    In Proceedings of Interspeech , Aug 2025

    Bib PDF

    @inproceedings{jung25interspeech_titw,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {The text-to-speech in the wild (TITW) dataset},
      author = {Jung, Jee-weon and Zhang, Wangyou and Maiti, Soumi and Wu, Yihan and Wang, Xin and Kim, Ji-Hoon and Matsunaga, Yuta and Um, Seyun and Tian, Jinchuan and Shim, Hye-jin and Evans, Nicholas and Chung, Joon Son and Takamichi, Shinnosuke and Watanabe, Shinji},
      year = {2025},
      month = aug,
    }

27. 環境音と説明文の意味的関連性の自動評価に向けたデータセット構築と基本性能評価

    岡本 悠希 ,  金森 勇介 ,  高野 大成 ,  高道 慎之介 ,  齋藤 佑樹 ,  永瀬 亮太郎 ,  and  猿渡 洋

    In 電子情報通信学会 応用音響研究会 , May 2025

    Bib PDF

    @inproceedings{okamoto25ea_soundtext-dataset,
      abbr_publisher = {電子情報通信学会 応用音響研究会},
      booktitle = {電子情報通信学会 応用音響研究会},
      title = {環境音と説明文の意味的関連性の自動評価に向けたデータセット構築と基本性能評価},
      author = {悠希, 岡本 and 勇介, 金森 and 大成, 高野 and 慎之介, 高道 and 佑樹, 齋藤 and 亮太郎, 永瀬 and 洋, 猿渡},
      year = {2025},
      month = may,
    }

28. 音声トークンの言語に関する分析

    朴 浚鎔 ,  高道 慎之介 ,  David M. Chan ,  神藤 駿介 ,  齋藤 佑樹 ,  and  猿渡 洋

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib PDF

    @inproceedings{park25speasip_language-token,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {音声トークンの言語に関する分析},
      author = {浚鎔, 朴 and 慎之介, 高道 and Chan, David M. and 駿介, 神藤 and 佑樹, 齋藤 and 洋, 猿渡},
      year = {2025},
      month = jun
    }

29. Spoken Language Technologies for Historical Speech and Audio

    高道 慎之介

    国立民族学博物館, Apr 2025

    (Invited talk / 招待講演)

    Bib PDF

    @article{takamichi25minpaku_invited-talk,
      abbr_publisher = {音声復元},
      title = {Spoken Language Technologies for Historical Speech and Audio},
      author = {慎之介, 高道},
      year = {2025},
      month = apr,
      journal = {国立民族学博物館},
      note = {(Invited talk / 招待講演)},
    }

30. 環境音埋め込みベクトル系列の類似度に基づく環境音生成の自動評価

    岸 秀 ,  阪井 瞭介 ,  高道 慎之介 ,  金森 勇介 ,  and  岡本 悠希

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib PDF

    @inproceedings{kishi25muslp_envsound-generation-eval,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {環境音埋め込みベクトル系列の類似度に基づく環境音生成の自動評価},
      author = {秀, 岸 and 瞭介, 阪井 and 慎之介, 高道 and 勇介, 金森 and 悠希, 岡本},
      year = {2025},
      month = jun,
    }

31. コーパス

    音環境に適応する音声合成能力を搭載した音声対話システムの構築と実証実験に基づく検討

    武 伯寒 ,  高道 慎之介 ,  関 健太郎 ,  and  猿渡 洋

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib PDF

    @inproceedings{take25speasip_egotts-dialogue,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {音環境に適応する音声合成能力を搭載した音声対話システムの構築と実証実験に基づく検討},
      author = {伯寒, 武 and 慎之介, 高道 and 健太郎, 関 and 洋, 猿渡},
      year = {2025},
    }

32. 三人称ゲーム実況音声に対する時間遅延許容量の測定

    松下 嶺佑 ,  阪井 瞭介 ,  福田 航希 ,  高道 慎之介 ,  井浦 昂太 ,  齋藤 佑樹 ,  ニュービッグ グラム ,  須藤 克仁 ,  高村 大也 ,  and  石垣 達也

    In 電子情報通信学会 音声研究会 , Jun 2025

    Bib PDF Slides

    @inproceedings{matsushita25speasip_delay-tolerance,
      abbr_publisher = {電子情報通信学会 音声研究会},
      booktitle = {電子情報通信学会 音声研究会},
      title = {三人称ゲーム実況音声に対する時間遅延許容量の測定},
      author = {嶺佑, 松下 and 瞭介, 阪井 and 航希, 福田 and 慎之介, 高道 and 昂太, 井浦 and 佑樹, 齋藤 and グラム, ニュービッグ and 克仁, 須藤 and 大也, 高村 and 達也, 石垣},
      year = {2025},
    }

33. 好感度自動推定モデルを利用した任意話者音声の好感度を制御可能な声質変換

    須田 仁志 ,  and  高道 慎之介

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib PDF

    @inproceedings{suda25speasip_voice-likeability,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {好感度自動推定モデルを利用した任意話者音声の好感度を制御可能な声質変換},
      author = {仁志, 須田 and 慎之介, 高道},
      year = {2025},
    }

34. Text-to-audioにおける入出力関連性の自動評価に向けた主観評価データセット構築

    金森 勇介 ,  岡本 悠希 ,  高野 大成 ,  高道 慎之介 ,  齋藤 佑樹 ,  and  猿渡 洋

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib

    @inproceedings{kanamori25speasip_text-to-audio,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {Text-to-audioにおける入出力関連性の自動評価に向けた主観評価データセット構築},
      author = {勇介, 金森 and 悠希, 岡本 and 大成, 高野 and 慎之介, 高道 and 佑樹, 齋藤 and 洋, 猿渡},
      year = {2025}
    }

35. 盛り上がり制御可能な対戦ゲーム実況解説音声合成モデルの検討

    井浦 昂太 ,  齋藤 佑樹 ,  高道 慎之介 ,  ニュービッグ グラム ,  須藤 克仁 ,  猿渡 洋 ,  高村 大也 ,  and  石垣 達也

    In 情報処理学会 音声言語処理研究会 , Jun 2025

    Bib PDF

    @inproceedings{iura25speasip_game-commentary,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {盛り上がり制御可能な対戦ゲーム実況解説音声合成モデルの検討},
      author = {昂太, 井浦 and 佑樹, 齋藤 and 慎之介, 高道 and グラム, ニュービッグ and 克仁, 須藤 and 洋, 猿渡 and 大也, 高村 and 達也, 石垣},
      year = {2025},
    }

36. YouTube上の対話動画に基づく音声対話データセットの構築

    佐藤 友紀 ,  高道 慎之介 ,  and  東中 竜一郎

    In 日本音響学会春季研究発表会 , Jun 2025

    Bib

    @inproceedings{sato25asjs_youtube-dialogue,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {YouTube上の対話動画に基づく音声対話データセットの構築},
      author = {友紀, 佐藤 and 慎之介, 高道 and 竜一郎, 東中},
      year = {2025}
    }

37. データ単位前処理自動選択による音声合成コーパスのデータクレンジング

    関 健太郎 ,  高道 慎之介 ,  佐伯 高明 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2025

    Bib PDF

    @inproceedings{seki25asjs_tts-ops,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {データ単位前処理自動選択による音声合成コーパスのデータクレンジング},
      author = {健太郎, 関 and 慎之介, 高道 and 高明, 佐伯 and 洋, 猿渡},
      year = {2025},
    }

38. 音声・音響・音楽を扱うオープン基盤モデルの構築に向けたデータセット策定

    高道 慎之介 ,  和田 仰 ,  小川 諒 ,  山岡 洸瑛 ,  中田 亘 ,  淺井 航平 ,  関 健太郎 ,  岡本 悠希 ,  齋藤 佑樹 ,  小川 哲司 , and 3 more authors

    In 言語処理学会 全国大会 , Jun 2025

    Bib PDF

    @inproceedings{takamichi25nlp_foundation,
      abbr_publisher = {言語処理学会 全国大会},
      booktitle = {言語処理学会 全国大会},
      title = {音声・音響・音楽を扱うオープン基盤モデルの構築に向けたデータセット策定},
      author = {慎之介, 高道 and 仰, 和田 and 諒, 小川 and 洸瑛, 山岡 and 亘, 中田 and 航平, 淺井 and 健太郎, 関 and 悠希, 岡本 and 佑樹, 齋藤 and 哲司, 小川 and 洋, 猿渡 and 友彦, 中村 and 覚, 深山},
      year = {2025},
    }

39. 音声トークナイズが音声言語モデルの性能に与える影響の調査

    神藤 駿介 ,  宮尾 祐介 ,  and  高道 慎之介

    In 言語処理学会 全国大会 , Jun 2025

    Bib PDF

    @inproceedings{kando25nlp_speech-tokenization,
      abbr_publisher = {言語処理学会 全国大会},
      booktitle = {言語処理学会 全国大会},
      title = {音声トークナイズが音声言語モデルの性能に与える影響の調査},
      author = {駿介, 神藤 and 祐介, 宮尾 and 慎之介, 高道},
      year = {2025},
    }

40. Open-source Human Evaluation Framework for Video-to-Text and Video-to-Audio Systems

    Goran Topic ,  Graham Neubig ,  Katsuhito Sudoh ,  Yuki Saito ,  Shinnosuke Takamichi ,  Ryosuke Matsushita ,  Kota Iura ,  Hiroya Takamura ,  and  Tatsuya Ishigaki

    In 言語処理学会 全国大会 , Jun 2025

    Bib PDF

    @inproceedings{topic25nlp_video-evaluation,
      abbr_publisher = {言語処理学会 全国大会},
      booktitle = {言語処理学会 全国大会},
      title = {Open-source Human Evaluation Framework for Video-to-Text and Video-to-Audio Systems},
      author = {Topic, Goran and Neubig, Graham and Sudoh, Katsuhito and Saito, Yuki and Takamichi, Shinnosuke and Matsushita, Ryosuke and Iura, Kota and Takamura, Hiroya and Ishigaki, Tatsuya},
      year = {2025},
    }

41. 変分オートエンコーダによるドラムからボーカルパーカッションへの楽器音変換と評価

    信川 凜佳 ,  北村 優輝士 ,  中村 友彦 ,  高道 慎之介 ,  and  猿渡 洋

    In 情報処理学会 音楽情報科学研究会 , Jun 2025

    Bib PDF

    @inproceedings{nobukawa25mus_drum-to-vocal,
      abbr_publisher = {情報処理学会 音楽情報科学研究会},
      booktitle = {情報処理学会 音楽情報科学研究会},
      title = {変分オートエンコーダによるドラムからボーカルパーカッションへの楽器音変換と評価},
      author = {凜佳, 信川 and 優輝士, 北村 and 友彦, 中村 and 慎之介, 高道 and 洋, 猿渡},
      year = {2025},
    }

42. 知覚感情の不整合：人間が作曲した音楽，音楽を記述したテキスト，テキスト楽音合成による音楽の比較

    阪井 瞭介 ,  福田 航希 ,  松下 嶺佑 ,  高道 慎之介 ,  and  植村 あい子

    In 情報処理学会 音楽情報科学研究会 , Jun 2025

    Bib PDF Slides

    @inproceedings{sakai25mus_perceptual-inconsistency,
      abbr_publisher = {情報処理学会 音楽情報科学研究会},
      booktitle = {情報処理学会 音楽情報科学研究会},
      title = {知覚感情の不整合：人間が作曲した音楽，音楽を記述したテキスト，テキスト楽音合成による音楽の比較},
      author = {瞭介, 阪井 and 航希, 福田 and 嶺佑, 松下 and 慎之介, 高道 and あい子, 植村},
      year = {2025},
    }

43. ELEVATE：学習者自身の自己聴取音声で聴く講義システム

    福田 航希 ,  阪井 瞭介 ,  松下 嶺佑 ,  國見 友亮 ,  and  高道 慎之介

    In 情報処理学会 インタラクション , Jun 2025

    Bib PDF Slides

    @inproceedings{fukuda25interaction_elevate,
      abbr_publisher = {情報処理学会 インタラクション},
      booktitle = {情報処理学会 インタラクション},
      title = {ELEVATE：学習者自身の自己聴取音声で聴く講義システム},
      author = {航希, 福田 and 瞭介, 阪井 and 嶺佑, 松下 and 友亮, 國見 and 慎之介, 高道},
      year = {2025},
    }

44. なりすまし音声検出システムに対する音声合成攻撃手法の検討

    古林 嵯羽仁 ,  高道 慎之介 ,  and  塩田 さやか

    In 電子情報通信学会 総合大会 , Jun 2025

    Bib

    @inproceedings{furubayashi25impersonation_speech_detection,
      abbr_publisher = {電子情報通信学会 総合大会},
      booktitle = {電子情報通信学会 総合大会},
      title = {なりすまし音声検出システムに対する音声合成攻撃手法の検討},
      author = {嵯羽仁, 古林 and 慎之介, 高道 and さやか, 塩田},
      year = {2025}
    }

45. SpoofCeleb: Speech Deepfake Detection and SASV In The Wild

    Jee-weon Jung ,  Yihan Wu ,  Xin Wang ,  Ji-Hoon Kim ,  Soumi Maiti ,  Yuta Matsunaga ,  Hye-jin Shim ,  Jinchuan Tian ,  Nicholas Evans ,  Joon Son Chung , and 4 more authors

    Jun 2025

    Bib Website

    @article{jung25ojsp_spoofceleb,
      abbr_publisher = {コーパス},
      booktitle = {IEEE Open Journal of Signal Processing},
      title = {SpoofCeleb: Speech Deepfake Detection and SASV In The Wild},
      author = {Jung, Jee-weon and Wu, Yihan and Wang, Xin and Kim, Ji-Hoon and Maiti, Soumi and Matsunaga, Yuta and Shim, Hye-jin and Tian, Jinchuan and Evans, Nicholas and Chung, Joon Son and Zhang, Wangyou and Um, Seyun and Takamichi, Shinnosuke and Watanabe, Shinji},
      year = {2025}
    }

2024

1. Emerging Topics for Speech Synthesis: Versatility and Efficiency (Tutorial)

   Yuki Saito ,  Shinnosuke Takamichi ,  and  Wataru Nakata

   In APSIPA , Jun 2024

   Bib Slides

   @inproceedings{saito24apsipa_tutorial,
     abbr_publisher = {Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)},
     booktitle = {APSIPA},
     title = {Emerging Topics for Speech Synthesis: Versatility and Efficiency (Tutorial)},
     author = {Saito, Yuki and Takamichi, Shinnosuke and Nakata, Wataru},
     year = {2024}
   }

2. Character-Voice Embodiment Impacts on the Cognitive Task Performance with the Voice Ownership Illusion

   Kunimi Yusuke ,  Kenta Kimura ,  Keigo Matsumoto ,  Shinnosuke Takamichi ,  Takuji Narumi ,  and  Masaaki Mochimaru

   In Proceedings of International Conference on Artificial Reality and Telexistence & the Eurographics Symposium on Virtual Environments (ICAT-EGVE) , Jun 2024

   Bib PDF

   @inproceedings{kunimi24icategve_voice-embodiment,
     abbr_publisher = {Proceedings of International Conference on Artificial Reality and Telexistence & the Eurographics Symposium on Virtual Environments (ICAT-EGVE)},
     booktitle = {Proceedings of International Conference on Artificial Reality and Telexistence & the Eurographics Symposium on Virtual Environments (ICAT-EGVE)},
     title = {Character-Voice Embodiment Impacts on the Cognitive Task Performance with the Voice Ownership Illusion},
     author = {Yusuke, Kunimi and Kimura, Kenta and Matsumoto, Keigo and Takamichi, Shinnosuke and Narumi, Takuji and Mochimaru, Masaaki},
     year = {2024}
   }

3. A Transformer Model for Segmentation, Classification, and Caller Identification of Marmoset Vocalization

   Bin Wu ,  Shinnosuke Takamichi ,  Sakriani Sakti ,  and  Satoshi Nakamura

   In Proceedings of IEEE Spoken Language Technology Workshop (SLT) , Jun 2024

   arXiv Bib

   @inproceedings{wu24slt_marmoset-transformer,
     abbr_publisher = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
     booktitle = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
     title = {A Transformer Model for Segmentation, Classification, and Caller Identification of Marmoset Vocalization},
     author = {Wu, Bin and Takamichi, Shinnosuke and Sakti, Sakriani and Nakamura, Satoshi},
     year = {2024}
   }

4. Real-Time Noise Estimation for Lombard-Effect Speech Synthesis in Human–Avatar Dialogue Systems

   Yuto Ishikawa ,  Osamu Take ,  Tomohiko Nakamura ,  Norihiro Takamune ,  Yuki Saito ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

   In Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC) , Jun 2024

   Bib PDF

   @inproceedings{ishikawa24apsipa_lombard,
     abbr_publisher = {Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)},
     booktitle = {Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)},
     title = {Real-Time Noise Estimation for Lombard-Effect Speech Synthesis in Human–Avatar Dialogue Systems},
     author = {Ishikawa, Yuto and Take, Osamu and Nakamura, Tomohiko and Takamune, Norihiro and Saito, Yuki and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
     year = {2024}
   }

5. NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codec

   Wataru Nakata ,  Takaaki Saeki ,  Yuki Saito ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

   In Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC) , Jun 2024

   Bib PDF

   @inproceedings{wataru24apsipa_necobert,
     abbr_publisher = {Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)},
     booktitle = {Asia Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)},
     title = {NecoBERT: Self-Supervised Learning Model Trained by Masked Language Modeling on Rich Acoustic Features Derived from Neural Audio Codec},
     author = {Nakata, Wataru and Saeki, Takaaki and Saito, Yuki and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
     year = {2024}
   }

6. DNN-based ensemble singing voice synthesis with interactions between singers

   Hiroaki Hyodo ,  Shinnosuke Takamichi ,  Tomohiro Nakamura ,  Junya Koguchi ,  and  Hiroshi Saruwatari

   In Proceedings of IEEE Spoken Language Technology Workshop (SLT) , Jun 2024

   arXiv Bib

   @inproceedings{hyodo24slt_chorus,
     abbr_publisher = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
     booktitle = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
     title = {DNN-based ensemble singing voice synthesis with interactions between singers},
     author = {Hyodo, Hiroaki and Takamichi, Shinnosuke and Nakamura, Tomohiro and Koguchi, Junya and Saruwatari, Hiroshi},
     year = {2024}
   }

7. 基盤モデル時代に言語で音声を処理したい

   高道 慎之介

   In 情報処理学会 自然言語処理研究会 , Jun 2024

   (Invited talk / 招待講演)

   Bib PDF

   @inproceedings{takamichi24nl_foundation-model,
     abbr_publisher = {情報処理学会 自然言語処理研究会},
     booktitle = {情報処理学会 自然言語処理研究会},
     title = {基盤モデル時代に言語で音声を処理したい},
     author = {慎之介, 高道},
     year = {2024},
     note = {(Invited talk / 招待講演)}
   }

8. 発話内容書き起こしを越えて音声と言語を結びつけたい

   高道 慎之介

   In 言語処理学会 若手支援事業 , Jun 2024

   (Invited talk / 招待講演)

   Bib PDF

   @inproceedings{takamichi24yans_speech-language,
     abbr_publisher = {言語処理学会 若手支援事業},
     booktitle = {言語処理学会 若手支援事業},
     title = {発話内容書き起こしを越えて音声と言語を結びつけたい},
     author = {慎之介, 高道},
     year = {2024},
     note = {(Invited talk / 招待講演)}
   }

9. J-CHAT: 音声言語モデルのための大規模日本語対話音声コーパス

   中田 亘 ,  関 健太郎 ,  谷中 瞳 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

   In 日本音響学会秋季研究発表会 , Jun 2024

   Bib PDF

   @inproceedings{nakata24asja_j-chat,
     abbr_publisher = {日本音響学会秋季研究発表会},
     booktitle = {日本音響学会秋季研究発表会},
     title = {J-CHAT: 音声言語モデルのための大規模日本語対話音声コーパス},
     author = {亘, 中田 and 健太郎, 関 and 瞳, 谷中 and 佑樹, 齋藤 and 慎之介, 高道 and 洋, 猿渡},
     year = {2024}
   }

10. 二重唱の歌い出しタイミングに対する同時性知覚の刺激閾調査

    兵藤 弘明 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{hyodo24asja_duet-timing,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {二重唱の歌い出しタイミングに対する同時性知覚の刺激閾調査},
      author = {弘明, 兵藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2024}
    }

11. 人間とアバターとの対話システムにおける拡散性雑音下リアルタイム推定雑音を用いたLombard効果模擬音声合成のための検討

    石川 悠人 ,  武 伯寒 ,  中村 友彦 ,  高宗 典玄 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{ishikawa24asja_lombard,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {人間とアバターとの対話システムにおける拡散性雑音下リアルタイム推定雑音を用いたLombard効果模擬音声合成のための検討},
      author = {悠人, 石川 and 伯寒, 武 and 友彦, 中村 and 典玄, 高宗 and 佑樹, 齋藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2024}
    }

12. コーパス

    最先端の予測性能を持つ合成音声品質の自動評価システム UTMOS について

    佐伯 高明 ,  and  高道 慎之介

    日本音響学会誌, Jun 2024

    (Invited article / 招待記事)

    Bib PDF

    @article{saeki24asj-kaisetsu_utmos,
      title = {最先端の予測性能を持つ合成音声品質の自動評価システム UTMOS について},
      author = {高明, 佐伯 and 慎之介, 高道},
      year = {2024},
      journal = {日本音響学会誌},
      note = {(Invited article / 招待記事)},
      memo = {本研究は科研費 21H04900，22H03639，23H03418，23K18474，JST創発的研究支援事業 JP23KJ0828，ムーンショット JPMJPS2011 の助成を受けた．本解説記事の執筆に際し，東京大学大学院の関健太郎氏の助言を受けた．}
    }

13. 音声分析

    Who Finds This Voice Attractive? A Large-Scale Experiment Using In-the-Wild Data

    Hitoshi Suda ,  Aya Watanabe ,  and  Shinnosuke Takamichi

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib Website

    @inproceedings{suda24interspeech_sukikirai,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Who Finds This Voice Attractive? A Large-Scale Experiment Using In-the-Wild Data},
      author = {Suda, Hitoshi and Watanabe, Aya and Takamichi, Shinnosuke},
      year = {2024},
      memo = {This work was supported by JSPS KAKENHI Grant Number 23K20017, 21H04900, 22H03639, and 23H03418, and JST FOREST JPMJFR226V. This paper is based on results obtained from a project, JPNP20006, commissioned by the New Energy and Industrial Technology Development Organization (NEDO).}
    }

14. コーパス

    SRC4VC: Smartphone-Recorded Corpus for Voice Conversion Benchmark

    Yuki Saito ,  Takuto Igarashi ,  Kentaro Seki ,  Shinnosuke Takamichi ,  Ryuichi Yamamoto ,  Kentaro Tachibana ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib Website

    @inproceedings{saito24interspeech_src4vc,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {SRC4VC: Smartphone-Recorded Corpus for Voice Conversion Benchmark},
      author = {Saito, Yuki and Igarashi, Takuto and Seki, Kentaro and Takamichi, Shinnosuke and Yamamoto, Ryuichi and Tachibana, Kentaro and Saruwatari, Hiroshi},
      year = {2024},
      memo = {This research was conducted as joint research between LY Corporation and Saruwatari-Takamichi Laboratory of The University of Tokyo, Japan. This work was supported by Research Grant S of the Tateishi Science and Technology Foundation.}
    }

15. Textless Dependency Parsing by Labeled Sequence Prediction

    Shunsuke Kando ,  Yusuke Miyao ,  Jason Naradowsky ,  and  Shinnosuke Takamichi

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib

    @inproceedings{kando24interspeech_textlessparsing,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Textless Dependency Parsing by Labeled Sequence Prediction},
      author = {Kando, Shunsuke and Miyao, Yusuke and Naradowsky, Jason and Takamichi, Shinnosuke},
      year = {2024},
      memo = {This work was supported by JST Moonshot JPMJMS2237 and JST FOREST JPMJFR226V.}
    }

16. 音声変換

    Noise-Robust Voice Conversion by Conditional Denoising Training Using Latent Variables of Recording Quality and Environment

    Takuto Igarashi ,  Yuki Saito ,  Kentaro Seki ,  Shinnosuke Takamichi ,  Ryuichi Yamamoto ,  and  Kentaro Tachibanaand Hiroshi Saruwatari

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib

    @inproceedings{igarashi24interspeech_noise-robust-vc,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Noise-Robust Voice Conversion by Conditional Denoising Training Using Latent Variables of Recording Quality and Environment},
      author = {Igarashi, Takuto and Saito, Yuki and Seki, Kentaro and Takamichi, Shinnosuke and Yamamoto, Ryuichi and Saruwatari, Kentaro Tachibanaand Hiroshi},
      year = {2024}
    }

17. 音声変換

    Spatial Voice Conversion: Voice Conversion Preserving Spatial Information and Non-target Signals

    Kentaro Seki ,  Shinnosuke Takamichi ,  Norihiro Takamune ,  Yuki Saito ,  Kanami Imamura ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib Code

    @inproceedings{seki24interspeech_spatial-voice-conversion,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Spatial Voice Conversion: Voice Conversion Preserving Spatial Information and Non-target Signals},
      author = {Seki, Kentaro and Takamichi, Shinnosuke and Takamune, Norihiro and Saito, Yuki and Imamura, Kanami and Saruwatari, Hiroshi},
      year = {2024},
      memo = {This work is supported by Research Grant S of the Tateishi Science and Technology Foundation.}
    }

18. speechevaluation

    SpeechBERTScore: Reference-Aware Automatic Evaluation of Speech Generation Leveraging NLP Evaluation Metrics

    Takaaki Saeki ,  Soumi Maiti ,  Shinnosuke Takamichi ,  Shinji Watanabe ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Jun 2024

    arXiv Bib Code

    @inproceedings{saeki24interspeech_speechbertscore,
      abbr = speechevaluation,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {SpeechBERTScore: Reference-Aware Automatic Evaluation of Speech Generation Leveraging NLP Evaluation Metrics},
      author = {Saeki, Takaaki and Maiti, Soumi and Takamichi, Shinnosuke and Watanabe, Shinji and Saruwatari, Hiroshi},
      year = {2024},
      memo = {JSPS 科 研 費 23H03418，23K18474，22H03639，21H05054，22KJ0838 ムーンショット研究開発費 JPMJPS2011，および JST FOREST JPMJFR226V によって支援された．}
    }

19. コーパス

    SaSLaW: Dialogue Speech Corpus with Audio-visual Egocentric Information Toward Environment-adaptive Dialogue Speech Synthesis

    Osamu Take ,  Shinnosuke Takamichi ,  Kentaro Seki ,  Yoshiaki Bando ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Jun 2024

    Bib

    @inproceedings{take24interspeech_saslaw,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {SaSLaW: Dialogue Speech Corpus with Audio-visual Egocentric Information Toward Environment-adaptive Dialogue Speech Synthesis},
      author = {Take, Osamu and Takamichi, Shinnosuke and Seki, Kentaro and Bando, Yoshiaki and Saruwatari, Hiroshi},
      year = {2024},
      memo = {Part of this work was supported by JSPS KAKENHI Grant Number 23H03418 and 22H03639, Moonshot R&D Grant Number JPMJPS2011, and JST FOREST JPMJFR226V. The authors also thank Aya Watanabe for her support in designing the figures for this paper.}
    }

20. 音響合成

    環境音の模倣音声を利用した環境音合成とデータセット構築

    岡本 悠希 ,  井本 桂右 ,  高道 慎之介 ,  永瀬 亮太郎 ,  福森 隆寛 ,  and  山下 洋一

    In 電子情報通信学会 応用音響研究会 , Jun 2024

    Bib PDF

    @inproceedings{okamoto24ea_voice-to-foley,
      abbr_publisher = {電子情報通信学会 応用音響研究会},
      booktitle = {電子情報通信学会 応用音響研究会},
      title = {環境音の模倣音声を利用した環境音合成とデータセット構築},
      author = {悠希, 岡本 and 桂右, 井本 and 慎之介, 高道 and 亮太郎, 永瀬 and 隆寛, 福森 and 洋一, 山下},
      year = {2024},
    }

21. コーパス

    音声の生成ＡＩが拓く未来

    高道 慎之介

    電気三学会関西支部専門講習会, Jun 2024

    (Invited talk / 招待講演)

    Bib

    @article{takamichi24denki_invited-talk,
      title = {音声の生成ＡＩが拓く未来},
      author = {慎之介, 高道},
      year = {2024},
      journal = {電気三学会関西支部専門講習会},
      note = {(Invited talk / 招待講演)}
    }

22. 楽音合成

    Audio Effect Chain Estimation and Dry Signal Recovery from Multi-Effect-Processed Musical Signals

    Osamu Take ,  Kento Watanabe ,  Takayuki Nakatsuka ,  Tian Cheng ,  Tomoyasu Nakano ,  Masataka Goto ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

    In Proceedings of International Conference on Digital Audio Effects (DAFx) , Jun 2024

    Bib PDF

    @inproceedings{take24dafx_effect-chain,
      abbr_publisher = {Proceedings of International Conference on Digital Audio Effects (DAFx)},
      booktitle = {Proceedings of International Conference on Digital Audio Effects (DAFx)},
      title = {Audio Effect Chain Estimation and Dry Signal Recovery from Multi-Effect-Processed Musical Signals},
      author = {Take, Osamu and Watanabe, Kento and Nakatsuka, Takayuki and Cheng, Tian and Nakano, Tomoyasu and Goto, Masataka and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
      memo = {This work is supported by JSPS KAKENHI 21H04900, 22H03639, and 23H03418, JST FOREST JPMJFR226V, and Moonshot R&D Grant Number JPMJPS2011.},
      year = {2024}
    }

23. コーパス

    JVNV: A Corpus of Japanese Emotional Speech with Verbal Content and Nonverbal Expressions

    Detai Xin ,  Junfeng Jiang ,  Shinnosuke Takamichi ,  Yuki Saito ,  Akiko Aizawa ,  and  Hiroshi Saruwatari

    IEEE Access, Jun 2024

    arXiv Bib Website

    @article{xin24access_jvnv-corpus,
      title = {{JVNV}: A Corpus of Japanese Emotional Speech with Verbal Content and Nonverbal Expressions},
      author = {Xin, Detai and Jiang, Junfeng and Takamichi, Shinnosuke and Saito, Yuki and Aizawa, Akiko and Saruwatari, Hiroshi},
      year = {2024},
      journal = {IEEE Access},
    }

24. コーパス

    JNV Corpus: A Corpus of Japanese Nonverbal Vocalizations with Diverse Phrases and Emotions

    Detai Xin ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

    Speech Communication, Jun 2024

    arXiv Bib Website

    @article{xin24specom_jnv-corpus,
      title = {{JNV} Corpus: A Corpus of Japanese Nonverbal Vocalizations with Diverse Phrases and Emotions},
      author = {Xin, Detai and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
      year = {2024},
      journal = {Speech Communication},
    }

25. 音声合成

    Text-Inductive Graphone-Based Language Adaptation for Low-Resource Speech Synthesis

    Takaaki Saeki ,  Soumi Maiti ,  Xinjian Li ,  Shinji Watanabe ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

    IEEE/ACM Transactions on Audio, Speech, and Language Processing, Jun 2024

    Bib Code

    @article{saeki24taslp_text-inductive-tts,
      title = {Text-Inductive Graphone-Based Language Adaptation for Low-Resource Speech Synthesis},
      author = {Saeki, Takaaki and Maiti, Soumi and Li, Xinjian and Watanabe, Shinji and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
      year = {2024},
      journal = {IEEE/ACM Transactions on Audio, Speech, and Language Processing}
    }

26. 音声復元

    SelfRemaster: Self-Supervised Speech Restoration for Historical Audio Resources

    Takaaki Saeki ,  Shinnosuke Takamichi ,  Tomohiko Nakamura ,  Naoko Tanji ,  and  Hiroshi Saruwatari

    IEEE Access, Jun 2024

    arXiv Bib HTML Code Website

    @article{saeki24access_selfremaster,
      title = {{SelfRemaster}: Self-Supervised Speech Restoration for Historical Audio Resources},
      author = {Saeki, Takaaki and Takamichi, Shinnosuke and Nakamura, Tomohiko and Tanji, Naoko and Saruwatari, Hiroshi},
      year = {2024},
      journal = {IEEE Access},
    }

27. 音声合成

    Emotion-controllable Speech Synthesis using Emotion Soft Label, Utterance-level Prosodic Factors, and Word-level Prominence

    Xuan Luo ,  Shinnosuke Takamichi ,  Yuki Saito ,  Tomoki Koriyama ,  and  Hiroshi Saruwatari

    APSIPA Transactions, Jun 2024

    Bib PDF

    @article{luo24apsipa-trans_emotion-synthesis,
      title = {Emotion-controllable Speech Synthesis using Emotion Soft Label, Utterance-level Prosodic Factors, and Word-level Prominence},
      author = {Luo, Xuan and Takamichi, Shinnosuke and Saito, Yuki and Koriyama, Tomoki and Saruwatari, Hiroshi},
      year = {2024},
      journal = {APSIPA Transactions},
    }

28. コーパス

    インターネット時代の音声コーパスの作成

    高道 慎之介

    日本音響学会誌, Jun 2024

    (Invited article / 招待記事)

    Bib PDF

    @article{takamichi24asj_invited-article-dark-data,
      title = {インターネット時代の音声コーパスの作成},
      author = {慎之介, 高道},
      year = {2024},
      journal = {日本音響学会誌},
      note = {(Invited article / 招待記事)},
      memo = {本研究は科研費 21H04900，22H03639，23H03418，23K18474，JST創発的研究支援事業 JP23KJ0828，ムーンショット JPMJPS2011 の助成を受けた．また，本稿の執筆にあたり東京大学 大学院情報理工学系研究科 修士課程 関 健太郎氏からの助言を受けた．}
    }

29. コーパス

    環境音に対する日本語自由記述文コーパスとベンチマーク分析

    岡本 悠希 ,  高道 慎之介 ,  森松 亜依 ,  渡邊 亞椰 ,  井本 桂右 ,  and  山下 洋一

    In 言語処理学会 全国大会 , Jun 2024

    Bib PDF

    @inproceedings{okamoto24nlp_multi-lingual-audiocaps,
      abbr_publisher = {言語処理学会 全国大会},
      booktitle = {言語処理学会 全国大会},
      title = {環境音に対する日本語自由記述文コーパスとベンチマーク分析},
      author = {悠希, 岡本 and 慎之介, 高道 and 亜依, 森松 and 亞椰, 渡邊 and 桂右, 井本 and 洋一, 山下},
      year = {2024},
      memo = {本研究は，ムーンショット JPMJPS2011，JST 創発的研 究支援事業 JP23KJ0828，科研費 21H05054，21H04900，22H0363， 23H03418，23K16908 の支援を受け実施した.}
    }

30. 歌声合成

    歌唱者間相互作用を再現するDNN重唱歌声合成の検討

    兵藤 弘明 ,  高道 慎之介 ,  中村 友彦 ,  小口 純矢 ,  and  猿渡 洋

    In 情報処理学会 音楽情報科学研究会 , Jun 2024

    Bib PDF

    @inproceedings{hyodo24mus_chorus-synthesis,
      abbr_publisher = {情報処理学会 音楽情報科学研究会},
      booktitle = {情報処理学会 音楽情報科学研究会},
      title = {歌唱者間相互作用を再現する{DNN}重唱歌声合成の検討},
      author = {弘明, 兵藤 and 慎之介, 高道 and 友彦, 中村 and 純矢, 小口 and 洋, 猿渡},
      year = {2024},
      memo = {アノテーションの方法について，西山陽子様から 多くの助言を受けた．本研究は JST 創発的研究支援事業 JPMJFR226V，JSPS 科研費 23H03418，23K18474 の助成を受けた．}
    }

31. 音声評価

    テキスト生成の自動評価尺度に基づく音声生成の自動評価

    佐伯 高明 ,  マイティ ソウミ ,  高道 慎之介 ,  渡部 晋治 ,  and  猿渡 洋

    In 電子情報通信学会 音声研究会 , Jun 2024

    Bib PDF

    @inproceedings{saeki24sp_speechevaluation,
      abbr_publisher = {電子情報通信学会 音声研究会},
      booktitle = {電子情報通信学会 音声研究会},
      title = {テキスト生成の自動評価尺度に基づく音声生成の自動評価},
      author = {高明, 佐伯 and ソウミ, マイティ and 慎之介, 高道 and 晋治, 渡部 and 洋, 猿渡},
      year = {2024},
      memo = {JSPS 科 研 費 23H03418，23K18474，22H03639，21H05054，22KJ0838 ムーンショット研究開発費 JPMJPS2011，および JST FOREST JPMJFR226V によって支援された．}
    }

32. コーパス

    SRC4VCデータセット：多話者音声変換モデルのベンチマークを目的とした実デバイス収録音声コーパス

    齋藤 佑樹 ,  五十嵐 琢斗 ,  関 健太郎 ,  高道 慎之介 ,  山本 龍一 ,  橘 健太郎 ,  and  猿渡 洋

    In 電子情報通信学会 音声研究会 , Jun 2024

    Bib

    @inproceedings{saito24sp_real-environment-vc,
      abbr_publisher = {電子情報通信学会 音声研究会},
      booktitle = {電子情報通信学会 音声研究会},
      title = {{SRC4VC}データセット：多話者音声変換モデルのベンチマークを目的とした実デバイス収録音声コーパス},
      author = {佑樹, 齋藤 and 琢斗, 五十嵐 and 健太郎, 関 and 慎之介, 高道 and 龍一, 山本 and 健太郎, 橘 and 洋, 猿渡},
      year = {2024},
      memo = {This research was conducted as joint research between LY Corporation and Saruwatari-Takamichi Laboratory of The University of Tokyo, Japan. This work was supported by Research Grant S of the Tateishi Science and Technology Foundation.}
    }

33. コーパス

    音環境に適応するテキスト音声合成のための一人称視点コーパス構築

    武 伯寒 ,  高道 慎之介 ,  関 健太郎 ,  坂東 宜昭 ,  and  猿渡 洋

    In 情報処理学会 音声言語処理研究会 , Jun 2024

    Bib PDF

    @inproceedings{take24slp_1st-person-tts,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {音環境に適応するテキスト音声合成のための一人称視点コーパス構築},
      author = {伯寒, 武 and 慎之介, 高道 and 健太郎, 関 and 宜昭, 坂東 and 洋, 猿渡},
      year = {2024},
      memo = {本研究の一部は，科研費 22H03639，23K18474， JST 創発的研究支援事業 JP23KJ0828，及び JST ムーンショット型研究開発事業 JPMJMS2011 の助成を受け実施 しました．また, 原稿の作成に際して, 渡邊 亞椰さんには 図の作成でご協力頂きました. この場を借りて感謝申し上げます}
    }

34. コーパス

    「キミは私の声、好きかな?」大規模主観評価による声質好感度コーパスの構築とその分析

    須田 仁志 ,  渡邊 亞椰 ,  and  高道 慎之介

    In 情報処理学会 音声言語処理研究会 , Jun 2024

    Bib PDF

    @inproceedings{suda24slp_voice-attractiveness,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {「キミは私の声、好きかな?」大規模主観評価による声質好感度コーパスの構築とその分析},
      author = {仁志, 須田 and 亞椰, 渡邊 and 慎之介, 高道},
      year = {2024},
      memo = {本研究は JSPS 科研費 23K20017，21H04900， 22H03639，23H03418，JST 創発的研究支援事業 JPMJFR226V の助成を受けたものです．この成果は，国立研 究開発法人新エネルギー・産業技術総合開発機構（NEDO） の委託業務（JPNP20006）の結果得られたものです．}
    }

35. コーパス

    J-SpAW:話者照合となりすまし検出のための日本語音声コーパス

    菅野 滉大 ,  高道 慎之介 ,  and  塩田 さやか

    In 情報処理学会 音声言語処理研究会 , Jun 2024

    Bib PDF

    @inproceedings{kanno24slp_j-spaw,
      abbr_publisher = {情報処理学会 音声言語処理研究会},
      booktitle = {情報処理学会 音声言語処理研究会},
      title = {{J-SpAW}:話者照合となりすまし検出のための日本語音声コーパス},
      author = {滉大, 菅野 and 慎之介, 高道 and さやか, 塩田},
      year = {2024},
      memo = {本研究は JSPS 科研費 JP24K14993, 22H03639 の助成を受けたものです．}
    }

36. 音声変換

    音声品質と音響環境の潜在変数で条件付けたDenoising Trainingによるノイズロバスト音声変換

    五十嵐 琢斗 ,  齋藤 佑樹 ,  関 健太郎 ,  高道 慎之介 ,  山本 龍一 ,  橘 健太郎 ,  and  猿渡 洋

    In 電子情報通信学会 音声研究会 , Jun 2024

    Bib PDF

    @inproceedings{igarashi24sp_denosing-training-vc,
      abbr_publisher = {電子情報通信学会 音声研究会},
      booktitle = {電子情報通信学会 音声研究会},
      title = {音声品質と音響環境の潜在変数で条件付けたDenoising Trainingによるノイズロバスト音声変換},
      author = {琢斗, 五十嵐 and 佑樹, 齋藤 and 健太郎, 関 and 慎之介, 高道 and 龍一, 山本 and 健太郎, 橘 and 洋, 猿渡},
      year = {2024},
    }

37. 音声合成

    大規模な日本語笑い声コーパスを用いたテキストレス笑い声合成

    辛 徳泰 ,  高道 慎之介 ,  森松 亜依 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{xin24asjs_laughter-synthesis,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {大規模な日本語笑い声コーパスを用いたテキストレス笑い声合成},
      author = {徳泰, 辛 and 慎之介, 高道 and 亜依, 森松 and 洋, 猿渡},
      year = {2024},
      memo = {本研究は，JST 次世代研究者挑戦的研究プログラム JPMJSP2108，JSPS 科研費 JP23KJ0828，JST 創発的研究支援事業 JPMJFR22 の支援を受けたものです。}
    }

38. 楽音合成

    複数のオーディオエフェクトが適用された楽音に対するエフェクトチェイン推定と原音復元

    武 伯寒 ,  渡邉 研斗 ,  中塚 貴之 ,  Tian Cheng ,  中野 倫靖 ,  後藤 真孝 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{take24asjs_audio-effect,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {複数のオーディオエフェクトが適用された楽音に対するエフェクトチェイン推定と原音復元},
      author = {伯寒, 武 and 研斗, 渡邉 and 貴之, 中塚 and Cheng, Tian and 倫靖, 中野 and 真孝, 後藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2024},
      memo = {本研究は科研費 21H04900, 22H03639，23H03418， JST 創発的研究支援事業 JP23KJ0828，ムーンショット JPMJPS2011 の助成を受けたものです}
    }

39. 音声合成

    日本語音声合成における対話行為情報の利用による韻律改善

    佐藤 匡紀 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{sato24asjs_dialogue-context,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {日本語音声合成における対話行為情報の利用による韻律改善},
      author = {匡紀, 佐藤 and 慎之介, 高道 and 洋, 猿渡},
      year = {2024},
      memo = {本研究の一部は，JSPS 科研費 21H04900 と 21H05054 の助成の委託を受け実施した．}
    }

40. 音声認識

    Cocktail Machine Speech Chain: 重複あり音声を用いた音声認識・音声合成モデルの統一的学習

    松永 裕太 ,  高道 慎之介 ,  上乃 聖 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{matsunaga24asjs_cocktail-speech-chain,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {Cocktail Machine Speech Chain: 重複あり音声を用いた音声認識・音声合成モデルの統一的学習 },
      author = {裕太, 松永 and 慎之介, 高道 and 聖, 上乃 and 洋, 猿渡},
      year = {2024},
      memo = {本研究は，JST 次世代研究者挑戦的研究プログラム JPMJSP2108，ムーンショット JPMJPS2011，JST 創発的研究支 援事業 JP23KJ0828，科研費 21H05054, 22H03639，23H03418 の支援と，東京大学の齋藤佑樹博士, 佐伯高明氏の協力を受け実施 したものです.}
    }

41. 音声合成

    対照学習モデルによる音声-声質表現文の埋め込み表現獲得

    渡邊 亞椰 ,  高道 慎之介 ,  齋藤 佑樹 ,  中田 亘 ,  辛 徳泰 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF

    @inproceedings{watanabe24asjs_coconut-embedding,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {対照学習モデルによる音声-声質表現文の埋め込み表現獲得},
      author = {亞椰, 渡邊 and 慎之介, 高道 and 佑樹, 齋藤 and 亘, 中田 and 徳泰, 辛 and 洋, 猿渡},
      year = {2024},
      memo = {本研究は科研費 21H04900, 22H03639，23H03418，JST 創発的研究支援事業 JP23KJ0828，ムーンショット JPMJPS2011 の助成を受けたものです.}
    }

42. 音声合成

    F0に基づいて伸縮された画像文字からの音声合成

    大中 緋慧 ,  宮崎 亮一 ,  and  高道 慎之介

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF Slides

    @inproceedings{ohnaka24asjs_vtts-width,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {{F0}に基づいて伸縮された画像文字からの音声合成},
      author = {緋慧, 大中 and 亮一, 宮崎 and 慎之介, 高道},
      year = {2024},
      memo = {本研究は，科研費 22H03639，21H04900 による補助を受けた}
    }

43. コーパス

    YODAS：YouTube 動画から構築される多言語大規模音声データセット

    Xinjian Li ,  高道 慎之介 ,  佐伯 高明 ,  William Chen ,  塩田さやか ,  and  渡部 晋治

    In 日本音響学会春季研究発表会 , Jun 2024

    Bib PDF Slides

    @inproceedings{li24asjs_yodas,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {{YODAS：YouTube} 動画から構築される多言語大規模音声データセット},
      author = {Li, Xinjian and 慎之介, 高道 and 高明, 佐伯 and Chen, William and 塩田さやか and 晋治, 渡部},
      year = {2024},
      memo = {本研究は，アメリカ国立科学財団資金番号 #2138259, #2138286, #2138307, #2137603, #2138296 により支援さ れた，PSC Bridges2 と NCSA Delta via ACCESS allocation CIS210014 を使用した．また本研究は科研費 21H04900, 22H03639，23H03418，JST 創発的研究支援事業 JP23KJ0828， ムーンショット JPMJPS2011 の助成を受けた．}
    }

44. 音声合成

    Diversity-based core-set selection for text-to-speech with linguistic and acoustic features

    Kentaro Seki ,  Shinnosuke Takamichi ,  Takaaki Saeki ,  and  Hiroshi Saruwatari

    In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Jun 2024

    arXiv Bib

    @inproceedings{seki24icassp_core-set-selection,
      abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      title = {Diversity-based core-set selection for text-to-speech with linguistic and acoustic features},
      author = {Seki, Kentaro and Takamichi, Shinnosuke and Saeki, Takaaki and Saruwatari, Hiroshi},
      year = {2024}
    }

45. 音声分析

    Do learned speech symbols follow Zipf’s law?

    Shinnosuke Takamichi ,  Hiroki Maeda ,  Joonyong Park ,  Daisuke Saito ,  and  Hiroshi Saruwatari

    In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Jun 2024

    arXiv Bib

    @inproceedings{meada24icassp_zipf-law,
      abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      title = {Do learned speech symbols follow {Z}ipf's law?},
      author = {Takamichi, Shinnosuke and Maeda, Hiroki and Park, Joonyong and Saito, Daisuke and Saruwatari, Hiroshi},
      year = {2024}
    }

46. 音響合成

    Environmental sound synthesis from vocal imitations and sound event labels

    Yuki Okamoto ,  Keisuke Imoto ,  Shinnosuke Takamichi ,  Ryotaro Nagase ,  Takahiro Fukumori ,  and  Yoichi Yamashita

    In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Jun 2024

    arXiv Bib

    @inproceedings{okamoto24icassp_enbironmental-synthesis,
      abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
      title = {Environmental sound synthesis from vocal imitations and sound event labels},
      author = {Okamoto, Yuki and Imoto, Keisuke and Takamichi, Shinnosuke and Nagase, Ryotaro and Fukumori, Takahiro and Yamashita, Yoichi},
      year = {2024}
    }

47. NecoBERT：音声合成のために事前学習された自己教師あり学習モデル

    中田 亘 ,  佐伯 高明 ,  齋藤 佑樹 ,  高道 慎之介 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Mar 2024

    PDF

2023

1. 歌声合成

   jaCappellaコーパスv2：重唱分離・合成のための日本語アカペラ重唱コーパスの拡張

   中村 友彦 ,  高道 慎之介 ,  丹治 尚子 ,  深山 覚 ,  and  猿渡 洋

   In 情報処理学会 音楽情報科学研究会 , Mar 2023

   Bib PDF

   @inproceedings{nakamura23mus_jacappella-v2,
     abbr_publisher = {情報処理学会 音楽情報科学研究会},
     booktitle = {情報処理学会 音楽情報科学研究会},
     title = {{jaCappella}コーパスv2：重唱分離・合成のための日本語アカペラ重唱コーパスの拡張},
     author = {友彦, 中村 and 慎之介, 高道 and 尚子, 丹治 and 覚, 深山 and 洋, 猿渡},
     year = {2023},
   }

2. コーパス

   jaCappella corpus: A Japanese a cappella vocal ensemble corpus

   Tomohiko Nakamura ,  Shinnosuke Takamichi ,  Naoko Tanji ,  Satoru Fukayama ,  and  Hiroshi Saruwatari

   In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Mar 2023

   arXiv Bib Website

   @inproceedings{nakamura23icassp_jacappella,
     abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     title = {{jaCappella} corpus: A Japanese a cappella vocal ensemble corpus},
     author = {Nakamura, Tomohiko and Takamichi, Shinnosuke and Tanji, Naoko and Fukayama, Satoru and Saruwatari, Hiroshi},
     year = {2023}
   }

3. 音声合成

   Mid-attribute Speaker Generation using Optimal-Transport-based Interpolation of Gaussian Mixture Models

   Aya Watanabea ,  Shinnosuke Takamichi ,  Yuki Saito ,  Detai Xin ,  and  Hiroshi Saruwatari

   In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Mar 2023

   arXiv Bib Code Website

   @inproceedings{watanabe23icassp_mid-attribute,
     abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     title = {Mid-attribute Speaker Generation using Optimal-Transport-based Interpolation of Gaussian Mixture Models},
     author = {Watanabea, Aya and Takamichi, Shinnosuke and Saito, Yuki and Xin, Detai and Saruwatari, Hiroshi},
     year = {2023}
   }

4. 音声分析

   How Generative Spoken Language Model Encodes Noisy Speech: Investigation from Phonetics to Syntactics

   Joonyong Park ,  Shinnosuke Takamichi ,  Tomohiko Nakamura ,  Kentaro Seki ,  Detai Xin ,  and  Hiroshi Saruwatari

   In Proceedings of Interspeech , Mar 2023

   arXiv Bib

   @inproceedings{park23interspeech_gslm,
     abbr_publisher = {Proceedings of Interspeech},
     booktitle = {Proceedings of Interspeech},
     title = {How Generative Spoken Language Model Encodes Noisy Speech: Investigation from Phonetics to Syntactics},
     author = {Park, Joonyong and Takamichi, Shinnosuke and Nakamura, Tomohiko and Seki, Kentaro and Xin, Detai and Saruwatari, Hiroshi},
     year = {2023}
   }

5. 音声合成

   Improving robustness of spontaneous speech synthesis with linguistic speech regularization and pseudo-filled-pause insertion

   Yuta Matsunaga ,  Takaaki Saeki ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

   In Proceedings of Speech Synthesis Workshop (SSW) , Mar 2023

   arXiv Bib Website

   @inproceedings{matsunaga23ssw_filler-synthesis,
     abbr_publisher = {Proceedings of Speech Synthesis Workshop (SSW)},
     booktitle = {Proceedings of Speech Synthesis Workshop (SSW)},
     title = {Improving robustness of spontaneous speech synthesis with linguistic speech regularization and pseudo-filled-pause insertion},
     author = {Matsunaga, Yuta and Saeki, Takaaki and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
     year = {2023}
   }

6. 音声合成

   Learning to Speak from Text: Zero-Shot Multilingual Text-to-Speech with Unsupervised Text Pretraining

   Takaaki Saeki ,  Soumi Maiti ,  Xinjian Li ,  Shinji Watanabe ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

   In Proceedings of the International Joint Conference on Artificial Intelligence (IJCAI) , Mar 2023

   arXiv Bib Code

   @inproceedings{saeki23ijcai_learning-to-speak,
     abbr_publisher = {Proceedings of the International Joint Conference on Artificial Intelligence (IJCAI)},
     booktitle = {Proceedings of the International Joint Conference on Artificial Intelligence (IJCAI)},
     title = {Learning to Speak from Text: Zero-Shot Multilingual Text-to-Speech with Unsupervised Text Pretraining},
     author = {Saeki, Takaaki and Maiti, Soumi and Li, Xinjian and Watanabe, Shinji and Takamichi, Shinnosuke and Saruwatari, Hiroshi},
     year = {2023}
   }

7. 音声合成

   Visual onoma-to-wave: environmental sound synthesis from visual onomatopoeias and sound-source images

   Hien Ohnaka ,  Shinnosuke Takamichi ,  Keisuke Imoto ,  Yuki Okamoto ,  Kazuki Fujii ,  and  Hiroshi Saruwatari

   In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Mar 2023

   arXiv Bib Website

   @inproceedings{ohnaka23icassp_visual-onoma-to-wave,
     abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     title = {Visual onoma-to-wave: environmental sound synthesis from visual onomatopoeias and sound-source images},
     author = {Ohnaka, Hien and Takamichi, Shinnosuke and Imoto, Keisuke and Okamoto, Yuki and Fujii, Kazuki and Saruwatari, Hiroshi},
     year = {2023}
   }

8. 音声合成

   Text-to-speech synthesis from dark data with evaluation-in-the-loop data selection

   Kentaro Seki ,  Shinnosuke Takamichi ,  Takaaki Saeki ,  and  Hiroshi Saruwatari

   In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Mar 2023

   arXiv Bib

   @inproceedings{seki23icassp_dark-data,
     abbr_publisher = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     booktitle = {Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)},
     title = {Text-to-speech synthesis from dark data with evaluation-in-the-loop data selection},
     author = {Seki, Kentaro and Takamichi, Shinnosuke and Saeki, Takaaki and Saruwatari, Hiroshi},
     year = {2023}
   }

9. 音声合成

   Coco-Nut: Corpus of Japanese Utterance and Voice Characteristics Description for Prompt-based Control

   Aya Watanabe ,  Shinnosuke Takamichi ,  Yuki Saito ,  Wataru Nakata ,  Detai Xin ,  and  Hiroshi Saruwatari

   In IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU) , Mar 2023

   arXiv Bib Website

   @inproceedings{watanabe23asru_coconut-corpus,
     abbr_publisher = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     booktitle = {IEEE Automatic Speech Recogiton and Understanding Workshop (ASRU)},
     title = {{Coco-Nut}: Corpus of {J}apanese Utterance and Voice Characteristics Description for Prompt-based Control},
     author = {Watanabe, Aya and Takamichi, Shinnosuke and Saito, Yuki and Nakata, Wataru and Xin, Detai and Saruwatari, Hiroshi},
     year = {2023}
   }

10. コーパス

    YODAS: Youtube-Oriented Dataset for Audio and Speech

    Xinjian Li ,  Shinnosuke Takamichi ,  Takaaki Saeki ,  William Chen ,  Sayaka Shiota ,  and  Shinji Watanabe

    In Proc. ASRU , Dec 2023

    PDF
11. Speaking Practice Using Text-to-speech Technology: Japanese EFL Learners’ Perceptions

    Yasushige Ishikawa ,  Shinnosuke Takamichi ,  Yuta Matsunaga ,  Yusuke Yoshikawa ,  and  Shigeo Fujiwara

    In WorldCALL , Nov 2023
12. コーパス

    CALLS: Japanese empathetic dialogue speech corpus of complaint handling and attentive listening in customer center

    Yuki Saito ,  Eiji Iimori ,  Shinnosuke Takamichi ,  Kentaro Tachibana ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Aug 2023

    PDF
13. 音声合成

    ChatGPT-EDSS: ChatGPT由来のContext Word Embeddingから学習される共感的対話音声合成モデル

    齋藤 佑樹 ,  高道 慎之介 ,  飯森 栄治 ,  橘 健太郎 ,  and  猿渡 洋

    In 音学シンポジウム , Jun 2023
14. 音声合成

    ChatGPT-EDSS: empathetic dialogue speech synthesis trained from ChatGPT-derived context word embeddings

    Yuki Saito ,  Shinnosuke Takamichi ,  Eiji Iimori ,  Kentaro Tachibana ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Aug 2023

    PDF
15. 音響合成

    Foley Sound Synthesis at the DCASE 2023 Challenge

    Keunwoo Choi ,  Jaekwon Im ,  Laurie Heller ,  Brian McFee ,  Keisuke Imoto ,  Yuki Okamoto ,  Mathieu Lagrange ,  and  Shinnosuke Takamichi

    In DCASE Challenge , May 2023

    arXiv
16. Effects of text-to-speech synthesized speech on learners’ presentation anxiety and self-efficacy: A comparison of two models

    Takatoyo Umemoto ,  Shinnosuke Takamichi ,  Yuta Matsunaga ,  Yusuke Yoshikawa ,  Kikuko Yui ,  Kishio Sakamoto ,  Shigeo Fujiwara ,  and  Yasushige Ishikawa

    In Proc. EUROCALL , Aug 2023
17. 音声合成

    Improving Speech Prosody of Audiobook Text-to-Speech Synthesis with Acoustic and Textual Contexts

    Detai Xin ,  Sharath Adavanne ,  Federico Ang ,  Ashish Kulkarni ,  Shinnosuke Takamichi ,  and  Hiroshi Saruwatari

    In Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) , Jun 2023

    PDF
18. TimToShape: Supporting Practice of Musical Instruments by Visualizing Timbre with 2D Shapes based on Crossmodal Correspondences

    Kota Arai ,  Yutaro Hirao ,  Takuji Narumi ,  Tomohiko Nakamura ,  Shinnosuke Takamichi ,  and  Shigeo Yoshida

    In Proc. IUI , Mar 2023

    PDF
19. 音声合成

    Laughter Synthesis using Pseudo Phonetic Tokens with a Large-scale In-the-wild Laughter Corpus

    Detai Xin ,  Shinnosuke Takamichi ,  Ai Morimatsu ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Mar 2023

    arXiv Bib Website

    @inproceedings{xin23interspeech_laughter-synthesis,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {Laughter Synthesis using Pseudo Phonetic Tokens with a Large-scale In-the-wild Laughter Corpus},
      author = {Xin, Detai and Takamichi, Shinnosuke and Morimatsu, Ai and Saruwatari, Hiroshi},
      memo = {This work was supported by JST SPRING, Grant Number JPMJSP2108, JSPS KAKENHI, Grant Number JP23KJ0828, and JST FOREST JPMJFR226V.},
      year = {2023}
    }

20. 音声合成

    HumanDiffusion: diffusion model using perceptual gradients

    Yota Ueda ,  Shinnosuke Takamichi ,  Yuki Saito ,  Norihiro Takamune ,  and  Hiroshi Saruwatari

    In Proceedings of Interspeech , Mar 2023

    arXiv Bib

    @inproceedings{ueda23interspeech_humandiffusion,
      abbr_publisher = {Proceedings of Interspeech},
      booktitle = {Proceedings of Interspeech},
      title = {HumanDiffusion: diffusion model using perceptual gradients},
      author = {Ueda, Yota and Takamichi, Shinnosuke and Saito, Yuki and Takamune, Norihiro and Saruwatari, Hiroshi},
      year = {2023}
    }

21. 音声合成

    vTTS: visual-text to speech

    Yoshifumi Nakano ,  Takaaki Saeki ,  Shinnosuke Takamichi ,  Katsuhito Sudoh ,  and  Hiroshi Saruwatari

    In Proceedings of IEEE Spoken Language Technology Workshop (SLT) , Mar 2023

    arXiv Bib Code Slides

    @inproceedings{nakano23slt_visual-text-to-speech,
      abbr_publisher = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
      booktitle = {Proceedings of IEEE Spoken Language Technology Workshop (SLT)},
      title = {{vTTS}: visual-text to speech},
      author = {Nakano, Yoshifumi and Saeki, Takaaki and Takamichi, Shinnosuke and Sudoh, Katsuhito and Saruwatari, Hiroshi},
      year = {2023}
    }

22. 音声合成

    Coco-Nut: 自由記述文による声質制御に向けた多話者音声・声質自由記述ペアデータセット

    渡邊 亞椰 ,  高道 慎之介 ,  齋藤 佑樹 ,  辛 徳泰 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Mar 2023

    Bib PDF Slides Website

    @inproceedings{watanabe23asja_coconut,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {Coco-Nut: 自由記述文による声質制御に向けた多話者音声・声質自由記述ペアデータセット},
      author = {亞椰, 渡邊 and 慎之介, 高道 and 佑樹, 齋藤 and 徳泰, 辛 and 洋, 猿渡},
      year = {2023}
    }

23. 音声合成

    深層学習で獲得される音声シンボルは自然言語シンボルと同様に Zipf 則に従うか？

    前田 紘希 ,  高道 慎之介 ,  朴 浚鎔 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Mar 2023

    Bib PDF Slides

    @inproceedings{maeda23asja_zipf,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {深層学習で獲得される音声シンボルは自然言語シンボルと同様に {Zipf} 則に従うか？},
      author = {紘希, 前田 and 慎之介, 高道 and 浚鎔, 朴 and 洋, 猿渡},
      year = {2023}
    }

24. 音声合成

    学習・評価ループを用いたデータ選択によるダークデータからの音声合成

    関 健太郎 ,  高道 慎之介 ,  佐伯 高明 ,  and  猿渡 洋

    In 日本音響学会春季研究発表会 , Mar 2023

    Bib PDF

    @inproceedings{seki23asjs_dark-data,
      abbr_publisher = {日本音響学会春季研究発表会},
      booktitle = {日本音響学会春季研究発表会},
      title = {学習・評価ループを用いたデータ選択によるダークデータからの音声合成},
      author = {健太郎, 関 and 慎之介, 高道 and 高明, 佐伯 and 洋, 猿渡},
      year = {2023}
    }

25. 音響合成

    Voice-to-foley: 環境音を模倣した音声を入力とする環境音合成

    岡本 悠希 ,  井本 桂右 ,  高道 慎之介 ,  永瀬 亮太郎 ,  福森 隆寛 ,  洋一 ,  and  山下

    In 日本音響学会秋季研究発表会 , Mar 2023

    Bib

    @inproceedings{okamoto23asja_voice-to-fokey,
      abbr_publisher = {日本音響学会秋季研究発表会},
      booktitle = {日本音響学会秋季研究発表会},
      title = {Voice-to-foley: 環境音を模倣した音声を入力とする環境音合成},
      author = {悠希, 岡本 and 桂右, 井本 and 慎之介, 高道 and 亮太郎, 永瀬 and 隆寛, 福森 and 洋一 and 山下},
      year = {2023}
    }

26. テキスト音声合成におけるデータサブセット選択のための指標検討

    関 健太郎 ,  高道 慎之介 ,  佐伯 高明 ,  and  猿渡 洋

    In 日本音響学会秋季研究発表会 , Sep 2023

    PDF
27. AI音声合成の技術動向

    高道 慎之介

    CEDEC 2023, Aug 2023

    (Invited talk / 招待講演)

    Bib Slides

    @article{takamichi23cedec_copyright,
      title = {AI音声合成の技術動向},
      author = {慎之介, 高道},
      year = {2023},
      journal = {CEDEC 2023},
      month = aug,
      note = {(Invited talk / 招待講演)},
    }

28. ここまで来た＆これから来る歌声合成・歌声変換技術

    高道 慎之介

    音楽情報科学研究会 夏のシンポジウム, Aug 2023

    (Invited talk / 招待講演)

    Bib Slides

    @article{takamichi23asj_keio-talk,
      title = {ここまで来た＆これから来る歌声合成・歌声変換技術},
      author = {慎之介, 高道},
      year = {2023},
      journal = {音楽情報科学研究会 夏のシンポジウム},
      month = aug,
      note = {(Invited talk / 招待講演)},
    }

29. 音声の基盤モデルが切り拓く未来

    高道 慎之介

    第24回慶應科学技術展, Dec 2023

    (Invited talk / 招待講演)

    Bib Slides

    @article{takamichi23keio_talk,
      title = {音声の基盤モデルが切り拓く未来},
      author = {慎之介, 高道},
      year = {2023},
      journal = 第24回慶應科学技術展,
      month = dec,
      note = {(Invited talk / 招待講演)},
    }

30. 機械学習を用いた波形モデリング 〜人間の音声の場合〜

    高道 慎之介

    日本地球惑星科学連合2023年大会, May 2023

    (Invited talk / 招待講演)

    Bib Slides

    @article{takamichi23asj_keio-tall,
      title = {機械学習を用いた波形モデリング 〜人間の音声の場合〜},
      author = {慎之介, 高道},
      year = {2023},
      journal = 日本地球惑星科学連合2023年大会,
      month = may,
      note = {(Invited talk / 招待講演)},
    }