Hiroki Naganuma

Schedule

直近の Schedule

[今月](https://hiroki11x.github.io/posts/diary/2023_07/) ``` - 直近の締め切り/予定 - 9/24 ICLR x2 ( SAM-Focal / Calibration CTR) - 10/? AISTATS x3 (SAM x Auto-Tuning / TIC / RMHMC) - 11/? CVPR x2 (IRM Calibration / OOD Timm) - 1/? ICML x1 (F2 Metric? ) ```

Reference

今日の目標

LinkedIn の仕事で成果をまとめる

一日の流れ

朝から LinkedInきた
- B1で朝食
- Misc
  - Youtube
    - 【世界で戦う教育法】日本の「学歴」「偏差値」はもはや無価値。我が子をグローバル社会でキャリア形成させるには？【東京大学教授・鈴木寛×元ハーバード大学准教授・柳沢
    - 【次世代のエンタメ】2.6億回再生！超短尺ドラマの未来【ショート動画のバズらせ方】
  - その他
    - 　Awesome OOD を自分のサイトに追加
      - https://hiroki11x.github.io/posts/research_topics/OOD/
    - 機械学習における不均衡データへの対処法
    - 君には1時間でGitについて知ってもらう(with VSCode)
B1 / 2F で作業 LinkedIn
- WBCELN を試してみたけど、微妙そうだな、、
- 色々整理
- ZOZO 関連
昼
- ひろゆきAI漫才が面白かった
- Poke 食べた
- 色々返事したり
B1 / 2F で作業 CTR
- BCELN は思想的には良さそうだけど、Focal の方が良さそうな場面もある
  - ミスりまくってるのも、ミスってないのも一律の罰則にする
- CEPN は confidence レベル高そうでミスったやつを罰しながら、十分良さそうなやつを更新しないようにする Focal 的な振る舞いをする
  - ref
TODO
- CTR
  - TODO
    - Weight Sampling の問題を解決
      - BCELN が Weight Sampling をうまく適用できてない可能性
      - アルゴリズム的な改良が必要
        
        LN の数理理解
        
        Weight Sampling について
- SAM AutoTune / AISTATS
  - plot
  - 共有
  - IN1Kv2
- SAM Focal / ICLR
  - BS 実験
    - 投げきった
    - BS plot
  - 論文読み　Sharpness Minimization Algorithms Do Not Only Minimize Sharpness To Achieve Better Generalization
- その他の研究
  - SAM Focal
    - CameraReady
    - Poster
  - Timm OOD
    - Poster
    - ABCI GC 申請書

所感

TODO

Paper
- Understanding the robustness difference between stochastic gradient descent and adaptive gradient methods
for AISTATS
- CIFAR10_C とかの実験準備 ref
- ImageNet-V2 x AutoTune うまくいかない
- CIFAR10_C　モデル選択は　Val で行うので問題ないが、 test が問題あり
for ICLR / CTR
- SAM がなぜ聞いてないかを検証
- Logitnorm がなんでうまくいくかを説明 -> Weight Sampling な気がするな
for ICLR / SAM Focal
- tasks

Icebox

Calibration + OOD Generalization
- OOD Timm (CVPR 10月) / 幡谷さん
- SAM x FocalLoss (ICLR 10月) / 木村さん
- SAM x Auto-Tuning (AISTATS 10月) / Lyle
- LogitNorm (ICLR 9月) / LinkedIN
- IRM (CVPR 11月) / 吉田くん
- KFAC x Damping (???? 1月) / Single Author?
Others / コンテキストスイッチが必要
- TIC (AISTATS? 10月)
- RHHMC (AISTATS? 10月)
- SWARL (ICRA 9月)
Optimal Transport / Kilian とシュッとやらなきゃ
- F2 Metric (ICML 1月) / Kilian

Deadline

Spread Sheet

年間スケジュール



```
[LinkedIn, Sunnyvale, 6/18-9/10]
9月下旬 ICLR 締め切り x2 (LogitNorm, SAM-Focal)
[ICCV WS, Paris, 12/1-5?]
10月中旬 AISTATS 締め切り x3 (TIC, RMHMC, Auto Tune SAM)
[ACM MM, Ottawa, 10/29-11/3]
11月中旬 CVPR 締め切り
[NeurIPS, New Orleans, 12/1-5?]
1月下旬　ICML 締め切り (F2)
```