Hiroki Naganuma

Schedule

直近の Schedule



#### 2月


一時帰国関連


- 2/8 Bach 歯列矯正、Ioannis と meeting、Feel Cycle
- 2/9 Ioannis Group Meeting 発表
- 2/10 アカデミー会

- 2/11 また日本に戻るか？？
- 2/13 博報堂

- 2/17 UAI (Pittsburg, US)　締切
- 2/17 NeurIPS2022 発表 @ZOZO勉強会

- 2/23 AISTATS CameraReady を投稿
- 2/28 Cyberdyne 中間報告

- 3/1 TMLR Submission / TIC 
- 3/6 CoLLAs (Montreal, CA) 締切 / F2
- 3/8 ICCV (Paris, FR) 締切 / F2
- 3/10? ECML-PKDD 締切

一日の流れ

TODO / 1123 / Update
夜中に色々考えなきゃいけないことがあって寝不足
7時にお腹空いて朝食簡単に食べて二度寝した
昼前に起きた
家事に逃げてしまった、さっさと雑タスク終わらせて自分のやるべきことに時間を割かないと
Ioannis と Meeting
- TMLR に向けてもう少し修正が必要そう
- Jasso の evaluation のお願いメール送った
その後なんとなくやる気が出ない、体調が良くない
McGill に来た
- TMLR の修正案を書いた（Ioannis にメールした）
- 2/7 の Cyberdyne
  - McGill からでは、そもそも VPN できない (eduroam の制約か？)
  - InfluxDB 関連がよくわからず
  - 櫻井さんに質問した
  - とりあえず見せられるもの作る
    - 時系列データの相互相関マップみたいなのを作る->作った
    - データアクセスできたら適応してみる
    - ここから、仮説色々立ててやるみたいなデータサイエンティストみたいなことする
  - あとはデータアクセスできてから取り組む
- 2/9 の Ioannis Group Meeting
  - 準備にかかる時間 = 10 時間は Minimum でも欲しい、でも Cyberdyne も ZOZO も AISTATS も TMLR もやらなきゃいけない、しんどすぎる、、
  - スケジュール的に日程変更不可、、、
  - 何を話すべきか？
    - NeurIPS まとめか？
    - AISTATS の話？ -> とりあえずこれを同時期に緊急性持ってやるからこれかな！？？
    - ICLR Workshop の話？
- 2/17 の NeurIPS まとめ発表
- 2/23 の AISTATS CameraDeady -> 2/12 くらいかな
  - 飯塚先生には週末からやると伝えた、申し訳ない
  - が、間に合わなそうなので、今週もやるしかない、けど、他の予定も削れないので、寝れない、
- 3/3 の ICCV
家に帰ってきた
- また鍋たべた
- Paperworks
  - 家
  - 帰国便
  - 今の家の sublet 関連
- Cyberdyne 家からならアクセスできた、
  - DEMOデータもらった
  - InfluxDB 結局やらなきゃいけない

所感

やることが無限にありすぎて、普通にメンタルが不調
結局全部自分でやったほうが早いみたいな気持ちになって周りを頼れない

2/7

Cyberdyne 進捗出す
- 2/7 まで、、、やばい
- 相互相関係数まで出す
  - ref

2/9

Ioannis Group Meeting で発表
SAM and Calibration の話 + NeurIPS サーベイ？

2/10

家の貸し出しに関して

2/17

NeurIPS まとめをする
- ZOZO 2/17
- Mila Ioannis Group 2/8?
- とかで使えるはず

2/23?

AISTATS の Camera Ready と Arxiv の更新
- Author Response 後の変更 (これは Review で指摘された点) -　Fig 2 のパラグラフと説明の移動 -　パラメータと [NK18] の引用、 -　細かい視覚的提案に従う
- 構成の変更
  - Main にある CIFAR10 の実験を抜いて SNGAN w/ ResNet 系の実験に差し替える
  - Diminishing Return の結果を table と Figure で載せる
    - それに伴い、 Diminishing うまくいかないみたいな話を Main から抜く
    - DCGAN w/ SN の実験結果は、 Diminishing をstep decay じゃなくて exp decay みたいにすると、LR 小さくなりすぎて学習がうまくいかないことを Appendix で載せる
  - Step Decay でも良いことの正当性を足す
- 体裁
  - 今の Overleaf のを Camera ready バージョンに変更する
    - github の url に差し替え
    - 公開する github の整理
  - Arxiv での公開 (update)
    - error 取り切らないと Arxiv にならないが、今の format だと難しいかもなので、元の Arxiv フォーマットの中身を入れ替える方法を取るかも

2/24

NeurIPS に向けて
- WIkitext-2
  - WIkiじゃなければ使えるのあるか？
  - Shuffle できないかをみる
  - Reading List
    - https://pytorch.org/docs/stable/generated/torch.nn.NLLLoss.html
    - https://pytorch.org/tutorials/beginner/text_sentiment_ngrams_tutorial.html
    - http://man.hubwiz.com/docset/torchtext.docset/Contents/Resources/Documents/experimental_datasets.html
    - https://github.com/urvashik/lm-context-analysis/blob/master/utils.py

3/3

ICCV に向けてF2 のバグとり

3/?

ZOZO の Update
- SAM が Calibration, OOD にどう影響するか解析的な点で参考になりそうな文献を読む
  - Flatness -> Calibration / Rethinking Confidence Calibration for Failure Prediction
  - Flatness -> OOD / SWAD: Domain Generalization by Seeking Flat Minima
  - Margin が Metric になるかも？
    - High Local Entropy -> Flat Minima / Wide flat minima and optimal generalization in classifying high-dimensional Gaussian mixtures
    - Flat Minima -> Classification Margin -> Generalization / On Flat Minima, Large Margins and Generalizability
    - Scalable Marginal Likelihood Estimation for Model Selection in Deep Learning
  - その他
    - Assessing Generalization of SGD via Disagreement
    - Escaping Saddle Points for Effective Generalization on Class-Imbalanced Data: アンバランスなデータセットでは鞍点に収束し、SAMはこれらの解から効果的に逃れる

IceBox

CAQ の申請と Study Permit をどうにかしないと
家のリースもどうにかしないと
日本に1ヶ月滞在どうするか

TODO

Thanh にメッセ返す
NeurIPS2022 まとめをやる
ZOZO の RA ref
- 論文読み1　The Calibration Generalization Gap
- 論文読み2　Towards an Empirically Guided Understanding of the Loss Landscape of Neural Networks - Research Collection
- スライド
TIC の話
- 野村さんに連絡
- TMLR のフォーマットに 12 月中に落とす
- その際に ICLR の Review をそこそこ反映する
- その後共著者に許可をもらう

TODO Icebox

読み物

Pending

しばらく使わなそうなものは、ここにまとめた
編集リンク

Deadline

Spread Sheet

年間スケジュール



```
2月上旬 SigKDD 締め切り
2月中旬 UAI 締め切り
3月上旬 CoLLAs 締め切り
3月上旬 ECCV 締め切り
3月上旬 ICCV 締め切り (F2 Project, Paris, 10/2-6, 2023)
3月下旬 TMLR (TIC)
4月上旬 ECML/PKDD 締め切り
4月中旬 ICANN 締め切り
[AISTATS, Valencia, 4/25-27]
4月下旬 RecSys 締め切り
5月上旬 CIKM 締め切り
5月中旬 NeurIPS 締め切り
6-8月 インターン
6月中旬 ICONIP 締め切り
8月中旬 WACV 締め切り
9月下旬 ICLR 締め切り
10月中旬 AISTATS 締め切り
11月中旬 CVPR 締め切り
```