MultiModal
2026年10月の再サーベイ： 研究史・重要文献・最近の進展を整理した新版を追加しました（2026年10月3日基準）。以下は従来のメモです。定義・適用条件の訂正は新版を参照してください。
Reference
サーベイ論文
- Multimodal Machine Learning: A Survey and Taxonomy https://arxiv.org/abs/1705.09406
- Multimodal Deep Learning https://icml.cc/2011/papers/399_icmlpaper.pdf
- Recent Advances and Trends in Multimodal Deep Learning: A Review https://arxiv.org/abs/2105.11087
パワポ
- Tutorial on Multimodal Machine Learning https://www.cs.cmu.edu/~morency/MMML-Tutorial-ACL2017.pdf
- マルチモーダル深層学習（旧URL:
https://must.c.u-tokyo.ac.jp/sigam/sigam20/sigam20sp01.pdf、2026-09-30時点で資料本文ではなくサイトトップへ転送）
生体情報系の Multimodal
日本語文献・サイト
-
統計数理学研究所 / 生体信号解析、モニタリング、予測、計測システムの開発 https://www.ism.ac.jp/ism_info_j/labo/project/141.html
-
統計数理学研究所 / マルチモーダル生体信号データの時空間解析プロジェク https://www.ism.ac.jp/rcmhds/project/project5/
論文（上にあるものほど Domain Specific / 下にあるものほど僕の研究領域に近い）
- Information content and analysis methods for Multi-Modal High-Throughput Biomedical Data (概観 / Nature) https://www.nature.com/articles/srep04411
- Multimodal deep learning for biomedical data fusion: a review（概観） https://academic.oup.com/bib/article/23/2/bbab569/6516346
- Multimodal deep learning models for early detection of Alzheimer’s disease stage (既存の ML モデルと DNN の比較の意味で参考になる / Nature) https://www.nature.com/articles/s41598-020-74399-w
- On the Benefits of Early Fusion in Multimodal Representation Learning( どのレイヤーでマルチモーダルするかの参考になる/ ICLR(この粒度ならまだ僕の研究分野に近い)) https://openreview.net/forum?id=cfqJY583gim
- Revisit Multimodal Meta-Learning through the Lens of Multi-Task Learning (NeurIPS) https://proceedings.neurips.cc/paper/2021/hash/7b3403f79b478699224bb449509694cf-Abstract.html