国立研究開発法人 産業技術総合研究所 人間情報インタラクション研究部門
メディアインタラクション研究グループ
Media Interaction Group,
Human Informatics and Interaction Research Institute (HIIRI),
National Institute of Advanced Industrial Science and Technology (AIST)

メディアインタラクション研究グループでは、さまざまなメディアコンテンツ(音楽、動画、テキスト、ユーザ活動など)を対象に、人々の生活の豊かさの向上に資するメディアインタラクション技術を研究開発しています。具体的には、コンテンツの創出と利活用を促進し、生産者と消費者をつないで社会の創造性を高めることを目的とし、生産者の知識・経験・技術を補いながらコンテンツの創出を容易にして価値創出を支援する技術と、消費者の鑑賞・検索・推薦・ブラウジングなどを多様化してコンテンツの価値向上を支援する技術を開発します。そのためのメディア処理技術やインタラクション技術などを研究開発し、音楽情報処理、歌声情報処理、自然言語処理、動画像処理、ヒューマンコンピューターインタラクション、ウェブサービス、信号処理、機械学習、検索・推薦、データマイニング、可視化、コンピューターグラフィックス、コミュニティー分析・支援などに関して、基礎研究から応用研究まで幅広く取り組みます。

The Media Interaction Group targets a variety of media content (music, video, text, user activities, etc.) and conducts research on media interaction technologies that can enrich people's life. In particular, our group aims to promote content creation and utilization and enhance the creativity of the society by bridging the gap between creators and consumers. Toward this goal, we develop value-creation support technologies that facilitate content creation by complementing knowledge, experience, and technique of creators. We also develop value-enhancement support technologies that provide consumers with various means of appreciation, retrieval, recommendation, and browsing. These media technologies and interaction technologies demand a broad range of basic and applied research. We conduct research on music information processing, singing information processing, natural language processing, image and video processing, human-computer interaction, web services, signal processing, machine learning, retrieval and recommendation, data mining, visualization, computer graphics, community analysis and support, etc.



お知らせ News

FY2026

FY2025

record_voice_over 雑誌『科学』 2026年4月号に掲載されました。 [2026/03/25]
後藤 真孝: 音楽情報処理が切り拓く音楽体験の未来
record_voice_over デジタルハリウッド大学大学院 公開セミナー AI Bricolage Session「音楽の未来の共鳴」にて招待講演を行いました。[2026/03/24]
後藤 真孝: 音楽情報処理が切り拓く音楽体験の未来
article INTERACTION 2026: 第30回 一般社団法人 情報処理学会シンポジウムに採択されて研究発表を行いました。[2026/03/03]
中野 倫靖、後藤 真孝: 項目反応理論と MCMC 法に基づく複数評価者による順序尺度データの統合的分析 open_in_new[最優秀論文賞] [最優秀発表賞]
record_voice_over 情報処理学会論文誌に論文が採択され、掲載されました。 [2026/02/15]
木下 裕一朗, 佃 洸摂, 渡邉 研斗, 中塚 貴之, 中野 倫靖, 後藤 真孝, 中村 聡史: 動画共有サービス上の時刻同期コメントを用いた音楽動画探索システムに関する検討open_in_new
record_voice_over Transactions of the International Society for Music Information Retrievalに論文が採択され、掲載されました。 [2025/02/13]
Stefan Balke, Johannes Zeitler, Vlora Arifi-Müller, Brian McFee, Tomoyasu Nakano, Masataka Goto, Meinard Müller: RWC Revisited: Towards a Community-Driven MIR Corpusopen_in_new
article The 32nd International Conference on Multimedia Modeling (MMM 2026)に採択されて研究発表を行いました。[2026/01/29]
Kosetsu Tsukuda, Keisuke Ishida, Takumi Takahashi, Masahiro Hamasaki, Masataka Goto: A Case Study of a Transparent and Controllable Music Recommender System with Multi-Relational Layers open_in_new
record_voice_over WISS 2025に採択されて研究発表を行いました。[2025/12/9-11]
- 石井 行, 加藤 淳, 福里 司: クリエイティブコーディングにおけるユーザの内面的利益を向上させるプログラミング環境 open_in_new (登壇発表)
- 中澤 一輝, 佃 洸摂, 中野 倫靖, 後藤 真孝: PrefTolerance: 歌声・伴奏・歌詞ごとの嗜好と許容度を考慮できる楽曲推薦インタフェース open_in_new (登壇発表)
- 橋本 麦, 加藤 淳: Tweeq: Parameter-Tuning GUI Widgets by/for Creative Professionals open_in_new (国際会議招待発表)
article The 17th International Symposium on Computer Music Multidisciplinary Research (CMMR 2025)に採択されて研究発表を行いました。[2025/11/04]
Arisa Okamura, Kento Watanabe, Takayuki Nakatsuka, Kosetsu Tsukuda, Cheng Tian, Tomoyasu Nakano and Masataka Goto: Euphrasis: An Interactive System for Music Preference Verbalization open_in_new [Honorable Mention Award]
article Lecture Notes in Computer Science (Music and Sound Generation in the AI Era)に論文が掲載されました。[2025/10/10]
Tomoyasu Nakano, Momoka Sasaki, Mayuko Kishi, Masahiro Hamasaki, Masataka Goto, Yoshinori Hijikata: A Music Exploration Interface Based on Vocal Timbre and Pitch in Popular Music open_in_new
article The 38th Annual ACM Symposium on User Interface Software and Technology (UIST 2025)に採択されて研究発表を行いました。[2025/09/29]
Baku Hashimoto, Jun Kato: Tweeq: Parameter-Tuning GUI Widgets by/for Creative Professionals open_in_new
record_voice_over UIST 2025 Workshop: Facilitating Longitudinal Interaction Studies of AI SystemsにてKeynoteを行いました。[2025/09/28]
Jun Kato: Untangling the myth of "generalizability": some notes from longitudinal systems research with/for creators open_in_new
stars 国際会議 ISMIR2025にてClassical Test-of-Time Awardを受賞しました。[2025/09/25]
Masataka Goto: AIST Annotation for the RWC Music Database open_in_new
article The 26th International Society for Music Information Retrieval (ISMIR 2025)に採択されて研究発表を行いました。[2025/09/22]
Takayuki Nakatsuka, Masahiro Hamasaki, Masataka Goto: Coloring Music: Bridging Music and Color Palettes for Graphic Design open_in_new
record_voice_over Visual Computing 2025にてチュートリアルを行いました。[2025/09/07]
加藤 淳: 絵コンテから始めるアニメ制作支援 open_in_new
article The 28th International Conference on Digital Audio Effects (DAFx25)に採択されて研究発表を行いました。[2025/09/05]
Tian Cheng, Tomoyasu Nakano and Masataka Goto: Improving lyrics-to-audio alignment using frame-wise phoneme labels with masked cross entropy loss open_in_new
record_voice_over 日本ソフトウェア科学会 第42回大会にて基調講演を行いました。[2025/09/04]
加藤 淳: 現場に根差したツール研究 プログラミング、IoT、音楽動画からアニメまで open_in_new
stars 情報処理学会 2025年度(令和7年度)山下記念研究賞を受賞しました。[2025/09/02]
佃 洸摂: 情報処理学会 2025年度(令和7年度)山下記念研究賞 open_in_new
stars 第144回音楽情報科学研究発表会において以下を受賞しました[2025/09/01]
- 佃 洸摂, 他 [ベストプレゼンテーション賞 Best New Direction部門]
- 中澤 一輝, 他 [ベストプレゼンテーション賞 Best Application部門]
article The 34th International Joint Conference on Artificial Intelligence (IJCAI 2025)に採択されて研究発表を行いました。[2025/08/01]
Koki Iwai, Yusuke Kumagae, Yuki Koyama, Masahiro Hamasaki, and Masataka Goto: Constrained Preferential Bayesian Optimization and Its Application in Banner Ad Design open_in_new
article Multimedia Tools and Applicationsに掲載されました。[2025/07/16]
Kosetsu Tsukuda, Keisuke Ishida, Kento Watanabe, Masahiro Hamasaki, Masataka Goto: Exploring the Effectiveness of User-Driven Intent-Based Recommendation Models Implemented in a Real-World Music Web Service open_in_new
record_voice_over 国際会議 SMC 2025に論文が採択されました。 [2025/7/10-11 発表]
Tomoyasu Nakano, Sayaka Tatsumi, Masataka Goto, Yoshinori Hijikata: Effects of Pitch Shift and Tempo Change on Listener Preferences for Popular Musicopen_in_new
Tian Cheng, Tomoyasu Nakano, Masataka Goto: CNN-based Segment Boundary Detection on Novel SSMs with Improved Intra-Class Similarity for Repetitionsopen_in_new
record_voice_over 文部科学省 科学技術・学術政策研究所 講演会(第2回)にて講演を行いました。[2025/07/08]
加藤 淳: 現場に根差すツール研究で人々の創造性を支える open_in_new
article IEICE TRANSACTIONS on Information and Systemsに論文が掲載されました。[2025/7/1]
Kosetsu TSUKUDA, Tomoyasu NAKANO, Masahiro HAMASAKI, and Masataka GOTO: Toward an Understanding of Musical Factors in Judging a Song on First Listen open_in_new
record_voice_over Transactions of the International Society for Music Information Retrieval (editorial)に論文が掲載されました。 [2025/06/19]
Meinard Müller, Stefan Balke, Masataka Goto: The Story Behind the RWC Music Database: An Interview with Masataka Gotoopen_in_new
record_voice_over 情報処理学会 第213回ヒューマンコンピュータインタラクション研究会にて下記の発表を行いました。 [2025/6/18]
- 本間 拓人, 横山 武昌, 木村 元洋, 佃 洸摂, 中塚 貴之, 渡邉 研斗, 中野 倫靖, 後藤 真孝: 「推し」の形成プロセスおよび決定要因のモデル化に関する検討open_in_new
record_voice_over 電子情報通信学会和文論文誌Dに論文が採択されました。 [2025/5/1 掲載]
- 三林 亮太, 佃 洸摂, 渡邉 研斗, 中野 倫靖, 後藤 真孝, 山本 岳洋, 大島 裕明: ラップバトルにおけるアンサーの類型化およびアンサーの有無と表現の自動分類open_in_new
record_voice_over 国際会議 ACM CHI 2025に論文が採択されました。 [2025/4/26-5/1 発表]
- Yuto Mandai, Katie Seaborn, Tomoyasu Nakano, Xin Sun, Yijia Wang, Jun Kato: Super Kawaii Vocalics: Amplifying the "Cute" Factor in Computer Voiceopen_in_new
- Takao Fujii, Katie Seaborn, Madeleine Steeds, Jun Kato: Inter(sectional) Alia(s): Ambiguity in Voice Agent Identity via Intersectional Japanese Self-Referentsopen_in_new
- Yuki Tatsukawa, I-Chao Shen, Mustafa Doga Dogan, Anran Qi, Yuki Koyama, Ariel Shamir, and Takeo Igarashi: FontCraft: Multimodal Font Design Using Interactive Bayesian Optimizationopen_in_new
record_voice_over 国際会議 NAACL2025に論文が採択されました。 [2025/4/30 研究発表]
- Kento Watanabe, Masataka Goto: A Data-Driven Method for Analyzing and Quantifying Lyrics-Dance Motion Relationshipsopen_in_new
record_voice_over 国際会議 ACM CHI 2025にSIGが採択されました。 [2025/4/28 発表]
- Jun Kato, Yuki Koyama, Akinobu Maejima, Ryotaro Mihara, Katie Seaborn: Anime SIG: Researching Japanese Animation From Technical, Cultural, and Industrial Perspectivesopen_in_new

過去のお知らせ / Past News


研究プロジェクト Research Projects

Songle
Songle(ソングル https://songle.jp)は、音楽をより深く理解しながら、能動的に音楽鑑賞が楽しめるサービスです。 詳しくは「Songleとは」およびプレスリリースをご覧下さい。
Songrium
Songrium (ソングリウム https://songrium.jp)は、音楽コンテンツ間の多様な関係性を意識しながら、 Web上で新たな音楽コンテンツに出会うことができる音楽視聴支援サービスです。詳しくは「Songriumとは」およびプレスリリースをご覧下さい。
TextAlive
TextAlive (https://textalive.jp)は、ウェブ上に公開されている音楽に合わせ歌詞が動く動画(歌詞アニメーション)をブラウザ上で作れる制作支援サービスです。簡単に自分好みの演出をつけることができます。詳しくは「TextAliveとは」およびプレスリリースをご覧下さい。


※後藤真孝 首席研究員(メディアインタラクション研究グループ兼務)による、
当グループの研究成果(一部)の紹介です。



プレスリリース Press Releases

public 毎回変わる10曲を次々とサビ再生して短時間で音楽発掘できる音楽チェックサービス「Kiite Check」を公開
-すきま時間にまだ聴いたことのないオススメ楽曲に出会える-
発表・掲載日:2025/11/17
関連URL:音楽チェックサービス「Kiite Check(キイテチェック)」
public 音楽推薦に基づくマップ上で好みの楽曲を共有できる音楽発掘サービス「Kiite World」を公開
-好みの100曲をお互いに公開してマップ上で一緒に聴きながら好みの楽曲を見つけ出せる-
発表・掲載日:2023/07/19
関連URL:音楽発掘サービス「Kiite World(キイテワールド)」
public 音楽印象分析・音楽推薦を駆使して楽曲と出会える音楽発掘サービス「Kiite」を公開
-視聴者の音楽への関心と音楽情報処理技術の力を結びつけて好みの楽曲を見つけ出せる-
発表・掲載日:2019/08/30
関連URL:音楽発掘サービス「Kiite(キイテ)」
public 音楽に合わせて多様なデバイスを制御できるプラットフォームを公開
-インターネットを介した大規模音楽連動制御を手軽に利用できる「Songle Sync」-
発表・掲載日:2017/08/02
関連URL:大規模音楽連動制御プラットフォーム「Songle Sync(ソングルシンク)」
public 歌詞のトピックに基づいてさまざまな歌詞に出会える新しい歌詞探索ツール「Lyric Jumper」を公開
-(株)シンクパワー「プチリリ」の大規模歌詞データを産総研の技術で自動解析して実現-
発表・掲載日:2017/02/21
関連URL:歌詞探索ツール「Lyric Jumper(リリック ジャンパー)」
public 音楽に合わせ歌詞が動く動画を容易に制作・共有できるサービスを公開
-誰でも好みの演出の歌詞アニメーションを作って楽しめる「TextAlive」-
発表・掲載日:2015/09/08
関連URL:歌詞アニメーション制作支援サービス「TextAlive(テキストアライブ)」
public ウェブ上の音楽コンテンツの関係性を可視化する音楽視聴支援システム
-誰でも利用できる音楽視聴支援サービス「Songrium」を一般公開-
発表・掲載日:2013/08/27
関連URL:音楽視聴支援サービス「Songrium(ソングリウム)」
public インターネット上の楽曲の中身を自動解析する音楽鑑賞システム
-誰でも利用できる能動的音楽鑑賞サービス「Songle」を一般公開-
発表・掲載日:2012/08/29
関連URL:能動的音楽鑑賞サービス「Songle(ソングル)」


メンバー Members



連絡先 Contact information

国立研究開発法人 産業技術総合研究所 人間情報インタラクション研究部門
メディアインタラクション研究グループ
〒305-8568 茨城県つくば市梅園1-1-1 中央事業所2群 2-10棟313号室

Media Interaction Group
Human Informatics and Interaction Research Institute (HIIRI),
National Institute of Advanced Industrial Science and Technology (AIST)
AIST Tsukuba Central 2, 1-1-1 Umezono, Tsukuba, Ibaraki 305-8568, Japan


問い合わせ先 / Contact
つくば事業所へのアクセス / Access