timm + SyncBatchNorm
結論 timm モデルを用いて SyncBatchNorm を実現する場合は以下のユーティリティを利用する。 model = timm.layers.norm_act.convert_sync_...
1
0
Comment0
5 search resultsShowing 1~5 results
Stocked
You need to log-in
torchvision の Resize オプション
Resize オプション torchvision の resize には interpolation や antialias といったオプションが存在する. 通常あまり意識しないでも問題は生じな...
2
0
Comment0
PyTorchのAMPとSAMの併用
SAM(Sharpness-Aware Minimization) SAMについては下記などで詳しく紹介されているのでここでは説明を割愛. SAMは2回のforward-backwardを必要と...
3
3
Comment0
PyTorch on WindowsでDataLoaderの開始が遅い原因と対策
DataLoaderの挙動 Windows環境下でPyTorchを用いた機械学習を実行していると num_workers > 0のケースにおいて iteration 自体は速度が出ていても...
8
3
Comment0
PyTorch DataLoader で tarを展開せずに読込む
tarファイル Deep Learning で用いる公開データセットには tar 形式(tar.gzなど含む)のものが存在する. データ分析やデバッグなどを行うという観点では1枚1枚の画像が見え...
2
0
Comment0
5 search resultsShowing 1~5 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles