国立研究開発法人 産業技術総合研究所 人間情報インタラクション研究部門
メディアインタラクション研究グループ
Media Interaction Group,
Human Informatics and Interaction Research Institute (HIIRI),
National Institute of Advanced Industrial Science and Technology (AIST)

メディアインタラクション研究グループでは、さまざまなメディアコンテンツ(音楽、動画、テキスト、ユーザ活動、実世界デバイス等)を対象に、人々の生活の豊かさの向上に資するメディアインタラクション技術を研究開発しています。具体的には、コンテンツの創出と利活用を促進し、生産者と消費者をつないで社会の創造性を高めることを目的とし、生産者の知識・経験・技術を補いながらコンテンツの創出を容易にして価値創出を支援する技術と、消費者の鑑賞・検索・推薦・ブラウジング等を多様化してコンテンツの価値向上を支援する技術を開発します。そのためのメディア処理技術やインタラクション技術等を研究開発し、音楽情報処理、歌声情報処理、ヒューマンコンピュータインタラクション、ウェブサービス、信号処理、機械学習、検索・推薦、コンピュータグラフィックス・アニメーション、視覚化・聴覚化、クラウドソーシング、コミュニティ分析・支援、大規模データ処理等に関して、基礎研究から応用研究まで幅広く取り組みます。

The Media Interaction Group targets a variety of media content (music, video, text, user activities, physical devices, etc.) and conducts research on media interaction technologies that can enrich people's life. In particular, our group aims to promote content creation and utilization and enhance the creativity of the society by bridging the gap between creators and consumers. Toward this goal, we develop value-creation support technologies that facilitate content creation by complementing knowledge, experience, and technique of creators. We also develop value-enhancement support technologies that provide consumers with various means of appreciation, retrieval, recommendation, and browsing. These media technologies and interaction technologies demand a broad range of basic and applied research. We conduct research on music information processing, singing information processing, human-computer interaction, web services, signal processing, machine learning, retrieval and recommendation, computer graphics and animation, visualization and auralization, crowdsourcing, community analysis and support, large-scale data processing, etc.



お知らせ News

2020/05/15
国内雑誌 情報処理 Vol. 61 No. 5に下記記事が掲載されました。
assignment 2050年の情報処理:21. Post-Truth音楽情報処理
2020/05/01
国際論文誌 IEICE TRANSACTIONS on Information and Systemsに下記論文が採録されました。
assignment Modeling N-th Order Derivative Creation Based on Content Attractiveness and Time-Dependent Popularity
2020/04/01
国内論文誌 情報処理学会論文誌, 61巻4号に下記論文が採録されました。
assignment TransDrums: ドラムのフィルインとドラムパターン遷移確率に着目した2曲間のドラムパターン対応付け手法
assignment INSTRUDIVE: 楽器編成の自動認識に基づく楽曲探索システム
2020/04/01
メディアインタラクション研究グループは 人間情報インタラクション研究部門(佐藤洋 部門長) 所属になりました。

2020/03/23
国際会議 <Programming> 2020 併設ワークショップに下記論文が採択されました。
assignment Rethinking Programming "Environment" - Technical and Social Environment Design toward Convivial Computing
assignment Live Programming Support for Halide Scheduling Strategies
※COVID-19のため会議は延期になりました。
2020/03/17
国際会議 ACM IUI 2020 に下記論文が採択されました。
assignment Interactive Deep Singing-Voice Separation Based on Human-in-the-Loop Adaptation
※COVID-19のため会議は中止になりましたが、論文は公開されました。
2020/02/18
連携大学院生の星野将吾さんが、情報処理学会 音楽情報科学研究会 第126回研究発表会にて学生奨励賞を受賞しました。
2020/01/24
加藤淳 主任研究員が、RIEC International Symposium on Human-Computer Interaction にて招待講演を行いました。
2019/12/23
加藤淳 主任研究員が、電子情報通信学会データ工学研究会・情報処理学会データベースシステム研究会合同研究会 にて招待講演を行いました。
2020/11/18
深山覚​主任研究員が、情報処理学会 音楽情報科学研究会 第31回GMIワークショップ にて招待講演を行いました。
2019/11/09
連携大学院生の武田太一さんが、ARG 第15回Webインテリジェンスとインタラクション研究会(WI2)にて萌芽研究賞を受賞しました。
2019/11/06
土田修平 特別研究員(現在は神戸大学)らが、大規模ストリートダンス動画データセット AIST Dance Video Database を公開しました。
2019/11/04
国際会議 ISMIR 2019 に下記論文が採択されました。
assignment Query-by-Blending: A Music Exploration System Blending Latent Vector Representations of Lyric Word, Song Audio, and Artist
assignment AIST Dance Video Database: Multi-genre, Multi-dancer, and Multi-camera database for dance information processing
assignment Unmixer: An Interface for Extracting and Remixing Loops
assignment Intelligent User Interfaces for Music Discovery: The Past 20 Years and What's to Come​
2019/09/06
佃洸摂 主任研究員が、第12回 Webとデータベースに関するフォーラム (WebDB Forum 2019) にて招待講演を行いました。
2019/09/05
後藤真孝 首席研究員が、国際会議 DAFx 2019 にて基調講演を行いました。
2019/09/04
後藤真孝 首席研究員が、情報科学技術フォーラム FIT 2019 にて船井業績賞受賞記念講演を行いました。
2019/08/23
後藤真孝 首席研究員が、第19回​Kフォーラム にて講演を行いました。
2019/08
加藤淳 主任研究員らが、マジカルミライ 2019 にて「TextAlive講座」を開催しました。
2019/10/20
国際会議 IEEE WASPAA 2019 に下記論文が採択されました。
assignment Joint Singing Pitch Estimation and Voice Separation Based on a Neural Harmonic Structure Renderer
assignment End-to-End Melody Note Transcription Based on a Beat-Synchronous Attention Mechanism
2019/09/16
国際会議 ACM RecSys 2019 に下記論文が採択されました。
assignment DualDiv: Diversifying Items and Explanation Styles in Explainable Hybrid Recommendation
2019/09/04
後藤真孝 首席研究員が、FIT船井業績賞を受賞しました。
2019/08/30
佃洸摂 主任研究員らが、音楽発掘サービスKiiteについてプレスリリースを行いました。
2019/07/21
国際会議 ACM SIGIR 2019 に下記論文が採択されました。
assignment ABCPRec: Adaptively Bridging Consumer and Producer Roles for User-Generated Content Recommendation
2019/06/29
佃洸摂 主任研究員が、ARG 第14回Webインテリジェンスとインタラクション研究会(WI2)にて優秀研究賞と優秀ポスター発表賞を受賞しました。
2019/06/27
小山裕己 研究員が、第27回 Visual Computing (VC 2019) にて招待講演を行いました。
2019/06/29
小山裕己 研究員が、情報処理学会 コンピュータグラフィックスとビジュアル情報学研究会にて優秀研究発表賞(CGVI賞)を受賞しました。
2019/06/17
国際会議 CGI 2019 に下記論文が採択されました。
assignment Precomputed optimal one-hop motion transition for responsive character animation
2019/05/12
国際会議 IEEE ICASSP 2019 に下記論文が採択されました。
assignment Joint Transcription of Lead, Bass, and Rhythm Guitars Based on a Factorial Hidden Semi-Markov Model
assignment Automatic Singing Transcription Based on Encoder-decoder Recurrent Neural Networks with a Weakly-supervised Attention Mechanism
assignment Transdrums: A Drum Pattern Transfer System Preserving Global Pattern Structure
assignment Zero-mean Convolutional Network with Data Augmentation for Sound Level Invariant Singing Voice Separation
2019/04/17
後藤真孝 首席研究員が、Taiwanese MIR workshop にて基調講演を行いました。


採用情報 Recruit

2019/01/30~
次世代メディアコンテンツ生態系技術に関する研究開発に従事するポスドク(第一号職員)を募集しています。
2019/01/30~
次世代メディアコンテンツ生態系技術に関するエンジニアリング業務に従事するエンジニア(第ニ号職員)を募集しています。


研究プロジェクト Research Projects

Songle
Songle(ソングル https://songle.jp)は、音楽をより深く理解しながら、能動的に音楽鑑賞が楽しめるサービスです。 詳しくは「Songleとは」およびプレスリリースをご覧下さい。
Songrium
Songrium (ソングリウム https://songrium.jp)は、音楽コンテンツ間の多様な関係性を意識しながら、 Web上で新たな音楽コンテンツに出会うことができる音楽視聴支援サービスです。詳しくは「Songriumとは」およびプレスリリースをご覧下さい。
TextAlive
TextAlive (https://textalive.jp)は、ウェブ上に公開されている音楽に合わせ歌詞が動く動画(歌詞アニメーション)をブラウザ上で作れる制作支援サービスです。簡単に自分好みの演出をつけることができます。詳しくは「TextAliveとは」およびプレスリリースをご覧下さい。


メンバー Members

  • 研究グループ長 / Leader of the Media Interaction Group

  • 首席研究員 / Prime Senior Researcher

  • 主任研究員 / Senior Researcher

  • 研究員 / Researcher

  • 産総研特別研究員 / AIST Postdoctoral Researcher

  • 契約職員 (クリエイティブエンジニア) / Technical Staff (Creative Engineers)
    • 川崎 裕太 / Yuta Kawasaki
    • 石田 啓介 / Keisuke Ishida
    • 井上 隆広 / Takahiro Inoue
    • 高橋 卓見 / Takumi Takahashi (since 2019/04)

  • 契約職員 (OngaACCEL PM補佐) / Technical Staff (OngaACCEL PM Assistant)
    • 笠井 志麻 / Shima Kasai

  • 契約職員 (ミュージシャン) / Technical Staff (Musician)
    • 田中 一大 / Hitohiro Tanaka

  • 契約職員 (デザイナー) / Technical Staff (Designer)
    • 中村 美慧 / Misato Nakamura (since 2019/04)

  • 契約職員 (事務秘書) / Technical Staff (Secretary)
    • 佐藤 めぐみ / Megumi Sato (since 2015/04)

  • 連携大学院生・RA / Graduate Students and Research Assistants
    • 星野 将吾 / Shiyougo Hoshino (since 2018/04)
    • 矢倉 大夢 / Hiromu Yakura (since 2019/04)
    • 武田 太一 / Taichi Takeda (since 2019/04)

2017/09 撮影


連絡先 Contact information

国立研究開発法人 産業技術総合研究所 人間情報インタラクション研究部門
メディアインタラクション研究グループ
〒305-8568 茨城県つくば市梅園1-1-1 中央第二事業所 2-10棟313号室

Media Interaction Group
Human Informatics and Interaction Research Institute (HIIRI),
National Institute of Advanced Industrial Science and Technology (AIST)
AIST Tsukuba Central 2, 1-1-1 Umezono, Tsukuba, Ibaraki 305-8560, Japan


問い合わせ先 / Contact
つくば事業所へのアクセス / Access