Ayuto Tsutsumi 堤 歩斗
Master student in Shiota Lab, Tokyo Metropolitan University (TMU) / Research assistant in Bando Lab, AIST.
Web開発(Backend, Frontend)、NLP、音声処理(音声合成, 話者照合, DeepFake検知 etc...)、マルチモーダル言語モデルに興味があります。
ご連絡はメールまたはTwitterへ(Twitterの方が反応が早いです)。
News
- 2026/07産総研 覚醒プロジェクト 令和8年度 採択 — Speech LLMを応用した話者属性付き音声理解の研究
- 2026/06IPA 未踏アドバンスト事業 2026年度上期 採択 — キーボードを代替可能なエージェンティック音声入力の開発
- 2026/03FT-LLM 2026 コンペティション 自由形タスク部門 1位 優勝 — 第2回「大規模言語モデルのファインチューニング技術と評価」ワークショップ
- 2026/01ICASSP 2026 SP Grand Challenge (XACLE) 3rd Place — The first x-to-audio alignment challenge
- 2024/10
Publications
International conference
- Ayuto Tsutsumi, Ryosuke Kohita. Same Image, Different Meanings: Toward Retrieval of Context-Dependent Meanings, SIGIR 2026 (2026/7)[paper, ]
- Ayuto Tsutsumi, Akira Gotoh, Yuko Saito, Hiroki Matsuura, Sayaka Shiota. Domain Adaptation for Deepfake Audio Detection under Degraded Channel Conditions, Odyssey 2026 (2026/6)[paper]
- Ayuto Tsutsumi, Kohei Tanaka, Sayaka Shiota. The TMU System for the XACLE Challenge: Training Large Audio Language Models with CLAP Pseudo-Labels, ICASSP 2026 SP-GC-Challenge (2026/5)[paper, ]
- Ayuto Tsutsumi, Yuu Jinnai. Do Large Language Models Know Folktales? A Case Study of Yokai in Japanese Folktales, ACL 2025 Findings (2025/7)[paper]
Domestic conference
- 堤歩斗, 塩田さやか. 深層話者埋め込みのためのドメイン情報の除去による話者照合精度の分析, 音学シンポジウム2026(第146回MUS・第160回SLP合同研究発表会) (2026/6)[]
- 堤歩斗, 後藤晃, 斉藤裕子, 松浦廣樹, 塩田さやか. 劣環境下におけるDeepfake音声検出のためのドメイン適応, 第11回 音声・音響・信号処理ワークショップ(SPEASIP) (2026/3)[paper, ]
- 堤歩斗, 小比田涼介. 同じ画像,異なる意味:文脈依存画像検索タスクの提案, 言語処理学会第32回年次大会(NLP2026) (2026/3)[paper, ]
- 堤歩斗, 大城治城. 合成データを使用した日本語音声LLMの開発, 第2回「大規模言語モデルのファインチューニング技術と評価」ワークショップ(FT-LLM2026) (2026/3)[]
- 堤歩斗, 陣内佑. 多様性と一貫性の両立を目指したキャラクター対話生成, 第20回言語処理若手シンポジウム(YANS2025) (2025/9)[]
- 堤歩斗, 陣内佑. LLM は日本の民話を知っているか? 妖怪知識評価データセットの構築へ向けて, 言語処理学会第31回年次大会(NLP2025) (2025/3)[paper, ]
Others
- 堤歩斗. モダンフロントエンドフレームワークAstroで作る個人サイト開発, コミックマーケット105 (2024/12)
Funding
- 2026/07 – 2027/03産業技術総合研究所 覚醒プロジェクト 令和8年度 採択Speech LLMを応用した話者属性付き音声理解の研究23 selected (acceptance rate not disclosed) · Project funding: ¥3M
- 2026/06IPA 未踏アドバンスト事業 2026年度上期 採択キーボードを代替可能なエージェンティック音声入力の開発206 proposals → 17 selected (8.3%) · Project funding: ¥16M
Awards
- 2026/03自由形タスク部門 1位 優勝 — 第2回大規模言語モデルのファインチューニング技術と評価 (FT-LLM 2026) コンペティション
- 2026/013rd Place — ICASSP 2026 SP Grand Challenge The first x-to-audio alignment challenge
- 2024/10個人賞 — CyberAgent ACE 2024
- 2023/12最優秀賞&チームラボ賞 — Google Developer Solution Challenge Japan 2023
- 2023/10アシスト賞 — PG Battle 企業・大学対抗 プログラミングバトル 2023
- 2022/1253rd — ACM International Collegiate Programming Contest 2023 Yokohama Regional
Career
- 2026/07 – 2027/03AISTResearch Assistant
覚醒プロジェクト研究実施者として坂東研究室に所属
- 2026/04 – 東京都立大学大学院 システムデザイン研究科Master Student
塩田研究室にて音声処理の研究
- 2024/11 – 2026/07CyberAgent AI LabResearch Scientist Intern
言語生成AIの開発・実装
- 2024/10CyberAgent, Inc.Software Engineer Intern
開発型インターン ACE 2024
- 2024/08COLOPL, inc.Software Engineer Intern
ソーシャルゲームのサーバーサイド開発
- 2024/02 – 2024/09MonoxerSoftware Engineer Intern
iOS・Android・Web フロントエンド・バックエンドのフルスタック開発
- 2023/08 – 2023/09pixiv Inc.Software Engineer Intern
pixiv コミックのバックエンド開発
- 2022/04 – 2026/03東京都立大学 システムデザイン学部 情報科学科Undergraduate Student
コンピュータサイエンス専攻
Works
- 石池 | Ishiike — 都立大の情報共有サイト。MAU 5,000人超。個人で開発・運用。
- Qualtet — citruz.dev の4人チームで開発した Web アプリ。Google Developer Solution Challenge Japan 最優秀賞。
- THE DICE — 某ゲームをブラウザ上で再現した個人開発のゲーム。 [紹介ページ]
- kibaco-advance — 都立大の LMS 向けブラウザ拡張機能。学内の利用者の要望をもとに開発。
- 日本語音声復元モデル — Google の Miipher 2 をオープンソースモデルで再現した音声復元モデル。学習済みモデルとデモを Hugging Face で公開。 [学習コード]
- MADTOWN GTA タイムテーブル — MADTOWN 企画参加者の配信を全自動で時系列順にまとめ、再生できる Web アプリ。
Skills
- Languages
- PythonGoTypeScriptC++C#KotlinSwiftRubyPHPScala
- Frameworks
- ReactNext.jsAstroDjangoFlaskPyTorchLaravelRailsGASUnity
- Data & Infra
- MySQLPostgreSQLSQLiteNginxAWSGCPAzureHerokuCloudflareFirebase
- Tools
- DockerKubernetesGitVSCodeJetBrainsIDEVimeoSlackGitHubNotionJira