# resnet for svhn
python main.py --type cnn --arch resnet50 --data svhn \
       --lr 0.01 --lr_decay True \
       --lr_decay_epochs 40,60 --num_epochs 80 \
       --use_nesterov True --momentum 0.9 --weight_decay 1e-4\
       --batch_size 128 \
       --avg_model True  --lr_warmup True \
       --num_workers 2 --eval_freq 1  --reshuffle_per_epoch True \
       --lr_lars False --lr_scale True \
       --world_size 2 --device gpu --save_all_models True
