Attention

長沼大樹 / Hiroki Naganuma

2026年10月の再サーベイ： 研究史・重要文献・最近の進展を整理した新版を追加しました（2026年10月3日基準）。以下は従来のメモです。定義・適用条件の訂正は新版を参照してください。

Attention

動画

[GPT解説2 アテンションの仕組み (Attention, Transformer) Chapter6, 深層学習](https://www.youtube.com/watch?v=j3_VgCt18fA)

そんなにわかりやすくはない