Hiroki Naganuma

Schedule

直近の Schedule

[今月](https://hiroki11x.github.io/posts/diary/2023_11/) ``` - 直近の締め切り/予定 - ASAP IBM CoverLetter - 11/21 明治大学 - 11/22 NVIDIA 面接 - 11/22 ICLR Rebuttal End 面接 - 11/27 CVPR supplementary and Arxiv (Timm OOD) - 11/31 Arxiv (SAM-Focal) - 11/31 LinkedIn 返事 - 12/15 阪大 公募課題締め切り - 1/? ICML x4 (F2 Metric? / SAM-Focal / SAM x Auto-Tuning) - 1/? TMLR x1 (IRM Calibration) - 2/? KDD x1 (Calibration CTR) - 3/? TMLR x1 (TIC) ```

• 一時帰国関連

一日の流れ

• Cafe Meguro Base で作業
  • メールいくつか返した
  • Cyberdyne 関連
  • 明治大の準備
    • 確率的一次最適化アルゴリズムが Non-Convex な DNN 学習において有効であることについて、最適化の軌跡からの洞察
    • Sharpness Aware Minimization と Focal Loss の側面から見た、曲率・汎化・不確実性の較正の関係
    • Downstreaming Task における Pre-Trained Model 選択のDomain 汎化・不確実性の較正への影響について
• AWS で作業
  • NVIDIA 準備
    • 最初のラウンドは特に準備しなくて良さそうな気がする
      • For this 1st round it’ll be with the hiring manager and will be an overall general /culture fit/ aptitude call.
      • Subsequent rounds would be more technical/programming skills focused etc.
  • ICLR Rebuttal
    • Additional Exp
      • CIFAR10 on VGG　(優先じゃないかな)
      • MobileNet on ImageNet (v2 と　v3_small)
        • 実験
          • Narval / ハイパラサーチ、すぐには実行できてない
          • Rio / 2gpu しか使えないので遅そす、初期パラメータ　LR = 0.1 のみ
        • MobileNet と MobileNet-v2 の違いは?
          • MobileNet のモデル公開されてない、v2 の方が若干重くて、性能改善されてる
          • v3 は若干軽いのもある
  • 明治の準備
• Talk @明治大学
  • 自分の仕事紹介
    • Curvature for OOD Generalization and Calibration
    • Pre-Trained Model Selection
    • Optimization Trajectory
  • 聞いた話
    • Using Stochastic Gradient Descent to Smooth Nonconvex Functions: Analysis of Implicit Graduated Optimization with Optimal Noise Scheduling
• 眼科で検査
• 実家に帰る
  • 必要な move
    • 寿司食べた
    • チーズケーキ食べた
    • シャワー浴びた
    • ドンキに買い物に行った
  • 作業
    • ICLR Rebuttal のための実験
      • Narval / Beluga / Graham では全然動かない
    • CVPR のレポジトリ整理
      • https://github.com/Hiroki11x/Timm_OOD_Calibration
  • Meta NY 応募
    • twitter
    • 機械学習における解釈可能性 (Interpretability) と説明可能性 (Explainability) のニュアンスの違い
  • Misc

    所感

• 休めない

TODO

• CoverLetter
• 現状だと内容が甘い
• vomit draft をかく

IceBox

• マイルストーン設計
• それぞれを共著者に共有
  • Curvature
  • SAM AutoTune
• 阪大の申請書

• Cyberdyne TODO を Execute

• ICML / Curvature (w/ Lyle, Ioannis)
  • 相関をさっさと計算する
• Notion Research TODO

Reference

• TODO - 09/18
• Funding / その他応募締切 - 09/18
• 研究プロジェクト　Notion

Deadline

年間スケジュール

```
11月中旬 CVPR 締め切り x1 (Timm OOD)
[NeurIPS, New Orleans, 12/1-5?]
1月下旬　ICML 締め切り (F2 Metric? / TIC / SAM-Focal / SAM x Auto-Tuning)
2月上旬  KDD 締め切り (LogitNorm)
```