概要

近年の画像認識の分野の発展に伴い，画像だけではなく他の形式の異なるデータとの併用で解析していく研究が盛んになり始めました．このような複数の異なるデータを元に機械学習をしていく学習の仕方をMultimodal学習と言います． 人間は五感をはじめとする様々な情報を取り入れることで外界の情報を処理しています．そのような学習の先駆けとして今回のセミナーではMultimodal学習に関する基本的な知識とその応用例などにも触れたサーベイの発表をします．

目的

  • Multimodal学習の大まかな仕組みとその応用例の理解．

発表日時

場所:  オンライン (Zoom)
日時: 2020年8月2日 10時-11時

参考資料

[1] M. Suzuki and Y. Matsuo. Multimodal Learning by Deep Generative Model. JSAI, 2016. [pdf]　
[2] Tutorial on Multimodal Machine Learning. Multimodal communication and Machine Learning Laboratory, CMU. [pdf]
[3] T. Baltrusˇaitis et al. Multimodal Machine Learning: A Survey and Taxonomy. NeurIPS, 2017. [arXiv]