English

Hiroki Naganuma / 長沼 大樹

経歴

NVIDIA (Redmond, WA) の Research Engineer として、Convergence for High-Efficiency Formulations (CHEF) チームに所属し、効率的な事前学習アルゴリズムと Nemotron モデルの事前学習に取り組んでいます.2026 年後半より 慶應義塾大学 の Visiting Assistant Professor も兼任します.2026 年 6 月に Université de Montréal コンピュータ科学専攻及び Mila - Quebec Artificial Intelligence Institute にて博士号 (Ph.D.) を取得しました (指導教官: Ioannis Mitliagkas 准教授).博士論文は Toward Efficient and Scalable Optimization: Theoretical Insights and Practical Challenges です. 2025年の夏は Meta Superintelligence Lab - Infra (Menlo Park) にて、Hao-Jun Michael Shi 博士と Parameswaran Raman 博士と共に、非ユークリッドな最適化手法における臨界バッチサイズに関する研究を行いました.以前は、Google DeepMind (Mountain View) で Student Researcher として Atish Agarwala 博士と George E. Dahl 博士と共に、学習率スケジューリングに関する研究を行いました.また、Microsoft Research (Redmond) で Philipp Witte 博士と Russell J. Hewett 博士と共に、大規模言語モデルの効率的な事前学習アルゴリズムに関する研究を行いました.

孫正義育英財団の第一期奨学生, RBC Borealis Fellowshipの Fellow として支援を受けました.博士課程以前は高性能計算を専門として, 2017 年に東京工業大学から B.Eng. (Dean's Award), 2019 年に同大学院で M.Eng. を取得し、修士課程を総代で修了しました(指導教官: 横田理央 教授).

CV (2026 年 10 月) / 学歴・研究経歴等

現職

Research Engineer, NVIDIA, Convergence for High-Efficiency Formulations (CHEF), 2026-08–present. Redmond, WA, United States.

2026 年後半からの兼任

Visiting Assistant Professor, 慶應義塾大学.

学位

主な受賞

研究分野

大規模最適化、分散深層学習、大規模言語モデルの効率的な学習

招待講演

  • — Japan Seattle AI Innovation Meetup
  • — 東京科学大学
  • — CYBERDYNE 株式会社
  • — ZOZO Research
  • — LinkedIn
  • — 京都大学 知能情報学コースコロキウム (IST Colloquium) — The Geometry of Efficient Training: Co-Designing Optimizers and Systems at Scale スライド · 案内
  • — McGill AI Lab
  • — 大阪大学 2025 年度 研究提案型利用 成果報告会
  • — SB Intuitions
  • — NVIDIA
  • — CUNY-JSPS Forum on Artificial Intelligence
  • — 第 10 回 数理最適化セミナー(明治大学)
  • — オタワ日本人研究者の会 Spring Seminar Series
  • — Japan Healthcare Innovation Hub 第 25 回 Lecture Series
  • — Montreal Academy Club Seminar Series
  • — Seattle Japanese Research Community 第 4 回 Lecture Series
  • — 第 8 回 数理最適化セミナー(明治大学)
  • — RICOS × ZOZO NeurIPS 2022 論文読み会 — Trends on Distribution Shift in NeurIPS 2022 スライド
  • — Montréal Machine Learning and Optimization
  • — 第 54 回 AI セミナー ABCI グランドチャレンジ — An Empirical Study on the Effect of Optimizers on OOD Generalization スライド · Web サイト
  • — 第 6 回 数理最適化セミナー(明治大学)
  • — 米国日本人大学院生会 (JGSAU) Summer Seminar Series — Towards CS PhD in Canada スライド
  • — 第 78 回 人工知能セミナー:AI Trend トップカンファレンス報告会 (NeurIPS 2019) — Trends in Deep Learning Theory at NeurIPS 2019 スライド

教育・指導

教育・委員

  • — 慶應義塾大学 Visiting Assistant Professor
  • — Mila 入試委員(2026 年秋入学の博士・修士課程)
  • — Kids Code Club ティーチングボランティア
  • — GTC Japan, Deep Learning Institute Workshop ティーチングアシスタント
  • — Life is Tech!(中高生向けプログラミングキャンプ)ティーチングアシスタント

指導した学生

  • — Nishant Sharma, Indian Institute of Technology Delhi → Mila 修士課程 (NeurIPS 2026 ワークショップ、査読中)
  • — Tatsuhiro Nakamori, 慶應義塾大学 博士課程 (ICML 2026 ワークショップ、査読中)
  • — Mahdi Ghaznavi, Université de Montréal 博士課程 (ICLR 2026 ワークショップ(口頭発表、Travel Grant))
  • — Youssef Briki, Université de Montréal 学部 (ICML 2026)
  • — Youssef Fadhloun, National Institute of Applied Science and Technology 学部 (TMLR 2026)
  • — Kacem Mathlouthi, National Institute of Applied Science and Technology 学部 (TMLR 2026)
  • — Ansh Tiwari, California Institute of Technology 学部 (ICML 2026 ワークショップ、査読中)
  • — Ganesh Talluri, BASIS Peoria (High School) → Arizona State University (TMLR 2026、ICML 2026 ワークショップ)
  • — Sora Nakai, 京都大学 学部 → University of Washington 訪問学生 (TMLR 2026)
  • — Laura Gomezjurado Gonzalez, Stanford University 学部 → Microsoft Research (Redmond) リサーチインターン (NeurIPS 2025 ワークショップ、ICLR 2026)
  • — Kotaro Yoshida, 東京工業大学 学部 → A*STAR Singapore・Sakana AI リサーチインターン (TMLR 2024・2025・2026、ICLR 2025・2026、情報処理学会 学生奨励賞 (2024))
  • — Takafumi Horie, 立命館大学 修士課程 → 京都大学 博士課程 (NeurIPS 2024 ワークショップ、ICLR 2025・2026)
  • — Haruka Kumagai, 東京大学 修士課程 → University of Trento 訪問研究員 (ACM MM 2023 ワークショップ、NEC C&C 財団 派遣助成)
  • — Keigo Tada, 立命館大学 修士課程 → ソニー リサーチサイエンティスト (IJCNN 2023、情報処理学会 学生奨励賞 (2023))

共著・指導学生の受賞・助成

  1. 丸文財団 国際交流助成 (2025 年 4 月)
  2. Travel Grant, 機械学習若手の会 (YAML2024) (2024 年 9 月)
  3. Travel Grant, NLP 若手の会 第 19 回シンポジウム (YANS2024) (2024 年 9 月)
  4. 学生奨励賞, 情報処理学会第 86 回全国大会 (IPSJ2024) (2024 年 3 月)
  5. NEC C&C 財団 国際会議等研究者派遣助成金 (2023 年 10 月)
  6. FIT 奨励賞, 第 22 回情報科学技術フォーラム (FIT2023) (2023 年 9 月)
  7. 情報科学国際財団 研究者海外派遣助成 (2023 年 7 月)
  8. 博報堂DYホールディングス賞, 言語処理学会第 29 回年次大会 (NLP2023) (2023 年 3 月)
  9. 学生奨励賞, 情報処理学会第 85 回全国大会 (IPSJ2023) (2023 年 3 月)

ブログ & プレゼン資料

最新CV(PDF)