Hiroki Naganuma

Schedule

直近の Schedule

[今月](https://hiroki11x.github.io/posts/diary/2023_05/) - 直近の締め切り/予定 - 6/2 Velo Quebec - 6/6 夜はちゃんと休む - 6/9 MIRU Submission Deadline (w/ 熊谷+山木) - 6/10? ICONIP (SWARL) - 6/11 Ioannis Dinner - 6/12-18 共同研究 (w/ 幡谷さん) for AISTATS2024 - 6/19 FIT Paper Submission (IRM, SWARL) - 6/23 IJCNN Presentation (Corruption and Perturbation) - 9/? ICLR? (F2 Metric)?

Reference

• TODO - 05/22
• Funding 締切 - 05/30
• 研究プロジェクト

一日の流れ

• 久々に朝からミーティングがなくて、精神衛生が非常に良い
• 朝食を食べた
• UdeM にきた
• 図書館で作業
  • Misc
    • シアトル行きの航空券と宿を押さえた
    • その他学会等のスケジューリング
    • 読み物
      • 「この人の頼みならぜひ聞こう」と相手に思われる人が、会話の始まりに添える “たったひとこと”
        • 仕事においては、「この人の言うことはいちいちカチンとくるから、話を聞くのが嫌だな」と感じる相手もいれば、逆に「この人の言うことはなぜか素直に聞きたくなる」と思う相手もいるものです。後者のような印象を周囲からもってもらうには、どうすればいいでしょうか。
        • 自分の言葉が相手に響かないのは、相手のふたつの脳のうち、古い脳がつかさどる本能に警戒されてガードされているケースです。
        • コミュニケーションの入り口で古い脳のガードを突破し、新しい脳の理性に訴えかけ、「そういうことだったら、お願いを聞き入れよう」と相手に思わせる方法が有効となる
        • 【4つの枕詞】
          • 太陽メッセージ：ポジティブな言葉で切り出す
          • 相談モード：相手の力を借りる
          • 限定：「〜だけ」で重みをもたせる
            • 「『きみだから』、この作業もお願いしたい」と言われたらどうでしょう？　「周囲より自分が評価されている」と新しい脳の理性が判断し、「よし、だったらやってやるか！」という気持ちにもなってきますよね。
          • NOキャンセリング：想定される断り文句を打ち消す
            • 「お忙しいのは承知のうえでのお願いなのですが」といった言葉を枕詞にすることで、相手は忙しさを理由に断りにくくなります。
        • 「相手にちゃんと伝わってほしい」という純粋な思いをもち、相手にフィットしそうな言葉を選んで伝える
  • WACVに向けて
  • SAM (CIFAR10)
    • 有望なハイパラに対して(BS=1, FBそれぞれに) -> Mila + Narval に投げた
      • Seed で実験
      • SAM の　Rho =0 ->0.5 までハイパラ探索
      • Tr(H) と λmax(H) を計測
    • 有望なハイパラに対して(BS=256) -> Mila + Narval に投げた
      • Seed で実験
      • SAM の　Rho =0 ->0.5 までハイパラ探索
      • Tr(H) と λmax(H) を計測
    • そのうち、前半に SAM 適応せず後半適応させるみたいなことをやるか？
  • Focal Loss
    • 有望なハイパラに対して (BS=256?)
      • Seed で実験
      • gamma を変えてみる
• 帰宅してやること
  • LinkedIn の Paperwork (めっちゃ長い) / これは週末かな？
  • WACV に向けて
  • PP 関連
  • Damping Scheduling も Hessian いい感じに見れば、成仏できるかも？！

所感

TODO

• 今後の進め方を考える
  • TIC
• OOD work を拡張する
  • SAM
  • Sophie
    • https://github.com/kyegomez/Sophia/tree/e5

Icebox

• TIC (AISTATS?)
• RHHMC (AISTATS?)
• KFAC x Damping
• F2 Metric (NeurIPS->ICLR?)
• OT Empirical (TMLR?)
• LogitNorm (ICLR)
• SWARL (ICONIP)
• IRM (ICONIP)

• MultiModal (MIRU)

• Cyberdyne
  • Inflax DB

Deadline

Spread Sheet

年間スケジュール

```
6月下旬 WACV 締め切り x1 (SAM Calibration)
[LinkedIn, Sunnyvale, 6/18-9/10]
8月中旬 WACV 締め切り x2 (IRM, Damping)
9月下旬 ICLR 締め切り x3 (LogitNorm, SAM, F2)
10月中旬 AISTATS 締め切り x3 (TIC, RMHMC)
11月中旬 CVPR 締め切り
[NeurIPS, New Orleans, 12/1-5?]
[WACV, Hawaii, 1/3-5?]
```