dabrown commited on
Commit
1e3c8b9
·
verified ·
1 Parent(s): 6800903

Training in progress, step 1500, checkpoint

Browse files
last-checkpoint/adapter_model.safetensors CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:7caf021ab5ce5ef92c1f4ac9b15ae4bcacc9f4b513262e801c521c45c291a067
3
  size 5752
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:8fb56987d914e2316ab92811e51001707b9fe27b63738c412b857bb157b0ec5a
3
  size 5752
last-checkpoint/optimizer.pt CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:1c9391a21d5e632a3223cb800afddc3ebee3a1de81bda49de077aa0e595d2187
3
  size 15814
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:65737fe32a4f76985d64028691498b39d3691aa7631d665716b03abafed71557
3
  size 15814
last-checkpoint/rng_state.pth CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:3e64c93c93cf359fc6ffc8129e112a611a39543f5a5b3d77a4638fbb4c71e084
3
  size 14244
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:0615d17afa1ce99e4206e837b1d18495819192ce3863586d38fcf03cb23affb0
3
  size 14244
last-checkpoint/scheduler.pt CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:966cc7c77768098c8af029c048689ac1de1ed0de938435a2a7a5601075335dbd
3
  size 1064
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:fe4e625cf5525cf235a8c7e4c6984ba05d1b5436f9e969799dcec0119a3a6c2a
3
  size 1064
last-checkpoint/trainer_state.json CHANGED
@@ -1,9 +1,9 @@
1
  {
2
  "best_metric": null,
3
  "best_model_checkpoint": null,
4
- "epoch": 0.18008283810552855,
5
  "eval_steps": 375,
6
- "global_step": 1125,
7
  "is_hyper_param_search": false,
8
  "is_local_process_zero": true,
9
  "is_world_process_zero": true,
@@ -7914,6 +7914,2639 @@
7914
  "eval_samples_per_second": 178.154,
7915
  "eval_steps_per_second": 89.077,
7916
  "step": 1125
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
7917
  }
7918
  ],
7919
  "logging_steps": 1,
@@ -7928,12 +10561,12 @@
7928
  "should_evaluate": false,
7929
  "should_log": false,
7930
  "should_save": true,
7931
- "should_training_stop": false
7932
  },
7933
  "attributes": {}
7934
  }
7935
  },
7936
- "total_flos": 179415482007552.0,
7937
  "train_batch_size": 2,
7938
  "trial_name": null,
7939
  "trial_params": null
 
1
  {
2
  "best_metric": null,
3
  "best_model_checkpoint": null,
4
+ "epoch": 0.2401104508073714,
5
  "eval_steps": 375,
6
+ "global_step": 1500,
7
  "is_hyper_param_search": false,
8
  "is_local_process_zero": true,
9
  "is_world_process_zero": true,
 
7914
  "eval_samples_per_second": 178.154,
7915
  "eval_steps_per_second": 89.077,
7916
  "step": 1125
7917
+ },
7918
+ {
7919
+ "epoch": 0.18024291173940013,
7920
+ "grad_norm": 0.005658532027155161,
7921
+ "learning_rate": 2.9513310198183065e-05,
7922
+ "loss": 11.5,
7923
+ "step": 1126
7924
+ },
7925
+ {
7926
+ "epoch": 0.1804029853732717,
7927
+ "grad_norm": 0.00252137565985322,
7928
+ "learning_rate": 2.936390617691097e-05,
7929
+ "loss": 11.5,
7930
+ "step": 1127
7931
+ },
7932
+ {
7933
+ "epoch": 0.18056305900714328,
7934
+ "grad_norm": 0.003056940156966448,
7935
+ "learning_rate": 2.9214816173045356e-05,
7936
+ "loss": 11.5,
7937
+ "step": 1128
7938
+ },
7939
+ {
7940
+ "epoch": 0.18072313264101486,
7941
+ "grad_norm": 0.004033989738672972,
7942
+ "learning_rate": 2.906604084937572e-05,
7943
+ "loss": 11.5,
7944
+ "step": 1129
7945
+ },
7946
+ {
7947
+ "epoch": 0.18088320627488644,
7948
+ "grad_norm": 0.003481508931145072,
7949
+ "learning_rate": 2.8917580867292526e-05,
7950
+ "loss": 11.5,
7951
+ "step": 1130
7952
+ },
7953
+ {
7954
+ "epoch": 0.18104327990875804,
7955
+ "grad_norm": 0.0026058063376694918,
7956
+ "learning_rate": 2.8769436886784408e-05,
7957
+ "loss": 11.5,
7958
+ "step": 1131
7959
+ },
7960
+ {
7961
+ "epoch": 0.18120335354262962,
7962
+ "grad_norm": 0.004511214327067137,
7963
+ "learning_rate": 2.862160956643517e-05,
7964
+ "loss": 11.5,
7965
+ "step": 1132
7966
+ },
7967
+ {
7968
+ "epoch": 0.1813634271765012,
7969
+ "grad_norm": 0.001757331076078117,
7970
+ "learning_rate": 2.847409956342092e-05,
7971
+ "loss": 11.5,
7972
+ "step": 1133
7973
+ },
7974
+ {
7975
+ "epoch": 0.18152350081037277,
7976
+ "grad_norm": 0.0030876228120177984,
7977
+ "learning_rate": 2.8326907533507074e-05,
7978
+ "loss": 11.5,
7979
+ "step": 1134
7980
+ },
7981
+ {
7982
+ "epoch": 0.18168357444424435,
7983
+ "grad_norm": 0.0035963074769824743,
7984
+ "learning_rate": 2.8180034131045464e-05,
7985
+ "loss": 11.5,
7986
+ "step": 1135
7987
+ },
7988
+ {
7989
+ "epoch": 0.18184364807811593,
7990
+ "grad_norm": 0.0022286765743047,
7991
+ "learning_rate": 2.8033480008971546e-05,
7992
+ "loss": 11.5,
7993
+ "step": 1136
7994
+ },
7995
+ {
7996
+ "epoch": 0.1820037217119875,
7997
+ "grad_norm": 0.003147304290905595,
7998
+ "learning_rate": 2.7887245818801277e-05,
7999
+ "loss": 11.5,
8000
+ "step": 1137
8001
+ },
8002
+ {
8003
+ "epoch": 0.1821637953458591,
8004
+ "grad_norm": 0.0016215078067034483,
8005
+ "learning_rate": 2.7741332210628345e-05,
8006
+ "loss": 11.5,
8007
+ "step": 1138
8008
+ },
8009
+ {
8010
+ "epoch": 0.18232386897973069,
8011
+ "grad_norm": 0.0019105322426185012,
8012
+ "learning_rate": 2.759573983312138e-05,
8013
+ "loss": 11.5,
8014
+ "step": 1139
8015
+ },
8016
+ {
8017
+ "epoch": 0.18248394261360226,
8018
+ "grad_norm": 0.0024289079010486603,
8019
+ "learning_rate": 2.7450469333520855e-05,
8020
+ "loss": 11.5,
8021
+ "step": 1140
8022
+ },
8023
+ {
8024
+ "epoch": 0.18264401624747384,
8025
+ "grad_norm": 0.0027825345750898123,
8026
+ "learning_rate": 2.730552135763632e-05,
8027
+ "loss": 11.5,
8028
+ "step": 1141
8029
+ },
8030
+ {
8031
+ "epoch": 0.18280408988134542,
8032
+ "grad_norm": 0.0023849569261074066,
8033
+ "learning_rate": 2.7160896549843562e-05,
8034
+ "loss": 11.5,
8035
+ "step": 1142
8036
+ },
8037
+ {
8038
+ "epoch": 0.182964163515217,
8039
+ "grad_norm": 0.00504154060035944,
8040
+ "learning_rate": 2.701659555308169e-05,
8041
+ "loss": 11.5,
8042
+ "step": 1143
8043
+ },
8044
+ {
8045
+ "epoch": 0.18312423714908857,
8046
+ "grad_norm": 0.01448983047157526,
8047
+ "learning_rate": 2.6872619008850274e-05,
8048
+ "loss": 11.5,
8049
+ "step": 1144
8050
+ },
8051
+ {
8052
+ "epoch": 0.18328431078296017,
8053
+ "grad_norm": 0.008898479864001274,
8054
+ "learning_rate": 2.672896755720654e-05,
8055
+ "loss": 11.5,
8056
+ "step": 1145
8057
+ },
8058
+ {
8059
+ "epoch": 0.18344438441683175,
8060
+ "grad_norm": 0.008333215489983559,
8061
+ "learning_rate": 2.6585641836762433e-05,
8062
+ "loss": 11.5,
8063
+ "step": 1146
8064
+ },
8065
+ {
8066
+ "epoch": 0.18360445805070333,
8067
+ "grad_norm": 0.007012536749243736,
8068
+ "learning_rate": 2.6442642484681944e-05,
8069
+ "loss": 11.5,
8070
+ "step": 1147
8071
+ },
8072
+ {
8073
+ "epoch": 0.1837645316845749,
8074
+ "grad_norm": 0.006049661431461573,
8075
+ "learning_rate": 2.6299970136678077e-05,
8076
+ "loss": 11.5,
8077
+ "step": 1148
8078
+ },
8079
+ {
8080
+ "epoch": 0.18392460531844648,
8081
+ "grad_norm": 0.007174614351242781,
8082
+ "learning_rate": 2.6157625427010156e-05,
8083
+ "loss": 11.5,
8084
+ "step": 1149
8085
+ },
8086
+ {
8087
+ "epoch": 0.18408467895231806,
8088
+ "grad_norm": 0.008941186591982841,
8089
+ "learning_rate": 2.6015608988480955e-05,
8090
+ "loss": 11.5,
8091
+ "step": 1150
8092
+ },
8093
+ {
8094
+ "epoch": 0.18424475258618964,
8095
+ "grad_norm": 0.007125054951757193,
8096
+ "learning_rate": 2.5873921452433915e-05,
8097
+ "loss": 11.5,
8098
+ "step": 1151
8099
+ },
8100
+ {
8101
+ "epoch": 0.18440482622006124,
8102
+ "grad_norm": 0.003278638469055295,
8103
+ "learning_rate": 2.57325634487503e-05,
8104
+ "loss": 11.5,
8105
+ "step": 1152
8106
+ },
8107
+ {
8108
+ "epoch": 0.18456489985393282,
8109
+ "grad_norm": 0.002455964218825102,
8110
+ "learning_rate": 2.5591535605846383e-05,
8111
+ "loss": 11.5,
8112
+ "step": 1153
8113
+ },
8114
+ {
8115
+ "epoch": 0.1847249734878044,
8116
+ "grad_norm": 0.0021103492472320795,
8117
+ "learning_rate": 2.5450838550670808e-05,
8118
+ "loss": 11.5,
8119
+ "step": 1154
8120
+ },
8121
+ {
8122
+ "epoch": 0.18488504712167597,
8123
+ "grad_norm": 0.0031680497340857983,
8124
+ "learning_rate": 2.5310472908701555e-05,
8125
+ "loss": 11.5,
8126
+ "step": 1155
8127
+ },
8128
+ {
8129
+ "epoch": 0.18504512075554755,
8130
+ "grad_norm": 0.002496772212907672,
8131
+ "learning_rate": 2.5170439303943294e-05,
8132
+ "loss": 11.5,
8133
+ "step": 1156
8134
+ },
8135
+ {
8136
+ "epoch": 0.18520519438941913,
8137
+ "grad_norm": 0.005319160409271717,
8138
+ "learning_rate": 2.503073835892471e-05,
8139
+ "loss": 11.5,
8140
+ "step": 1157
8141
+ },
8142
+ {
8143
+ "epoch": 0.1853652680232907,
8144
+ "grad_norm": 0.0033112477976828814,
8145
+ "learning_rate": 2.4891370694695517e-05,
8146
+ "loss": 11.5,
8147
+ "step": 1158
8148
+ },
8149
+ {
8150
+ "epoch": 0.1855253416571623,
8151
+ "grad_norm": 0.004564044065773487,
8152
+ "learning_rate": 2.4752336930823837e-05,
8153
+ "loss": 11.5,
8154
+ "step": 1159
8155
+ },
8156
+ {
8157
+ "epoch": 0.18568541529103388,
8158
+ "grad_norm": 0.0019350239308550954,
8159
+ "learning_rate": 2.4613637685393432e-05,
8160
+ "loss": 11.5,
8161
+ "step": 1160
8162
+ },
8163
+ {
8164
+ "epoch": 0.18584548892490546,
8165
+ "grad_norm": 0.0016299671260640025,
8166
+ "learning_rate": 2.4475273575000936e-05,
8167
+ "loss": 11.5,
8168
+ "step": 1161
8169
+ },
8170
+ {
8171
+ "epoch": 0.18600556255877704,
8172
+ "grad_norm": 0.007100170943886042,
8173
+ "learning_rate": 2.4337245214753103e-05,
8174
+ "loss": 11.5,
8175
+ "step": 1162
8176
+ },
8177
+ {
8178
+ "epoch": 0.18616563619264861,
8179
+ "grad_norm": 0.006092431955039501,
8180
+ "learning_rate": 2.4199553218264093e-05,
8181
+ "loss": 11.5,
8182
+ "step": 1163
8183
+ },
8184
+ {
8185
+ "epoch": 0.1863257098265202,
8186
+ "grad_norm": 0.005135354120284319,
8187
+ "learning_rate": 2.4062198197652752e-05,
8188
+ "loss": 11.5,
8189
+ "step": 1164
8190
+ },
8191
+ {
8192
+ "epoch": 0.18648578346039177,
8193
+ "grad_norm": 0.001947320532053709,
8194
+ "learning_rate": 2.3925180763539844e-05,
8195
+ "loss": 11.5,
8196
+ "step": 1165
8197
+ },
8198
+ {
8199
+ "epoch": 0.18664585709426337,
8200
+ "grad_norm": 0.006747918203473091,
8201
+ "learning_rate": 2.3788501525045438e-05,
8202
+ "loss": 11.5,
8203
+ "step": 1166
8204
+ },
8205
+ {
8206
+ "epoch": 0.18680593072813495,
8207
+ "grad_norm": 0.003693880746141076,
8208
+ "learning_rate": 2.3652161089786086e-05,
8209
+ "loss": 11.5,
8210
+ "step": 1167
8211
+ },
8212
+ {
8213
+ "epoch": 0.18696600436200653,
8214
+ "grad_norm": 0.003128764918074012,
8215
+ "learning_rate": 2.351616006387214e-05,
8216
+ "loss": 11.5,
8217
+ "step": 1168
8218
+ },
8219
+ {
8220
+ "epoch": 0.1871260779958781,
8221
+ "grad_norm": 0.0047349585220217705,
8222
+ "learning_rate": 2.3380499051905137e-05,
8223
+ "loss": 11.5,
8224
+ "step": 1169
8225
+ },
8226
+ {
8227
+ "epoch": 0.18728615162974968,
8228
+ "grad_norm": 0.0024411038029938936,
8229
+ "learning_rate": 2.324517865697501e-05,
8230
+ "loss": 11.5,
8231
+ "step": 1170
8232
+ },
8233
+ {
8234
+ "epoch": 0.18744622526362126,
8235
+ "grad_norm": 0.0044091069139540195,
8236
+ "learning_rate": 2.3110199480657525e-05,
8237
+ "loss": 11.5,
8238
+ "step": 1171
8239
+ },
8240
+ {
8241
+ "epoch": 0.18760629889749283,
8242
+ "grad_norm": 0.002249740995466709,
8243
+ "learning_rate": 2.2975562123011495e-05,
8244
+ "loss": 11.5,
8245
+ "step": 1172
8246
+ },
8247
+ {
8248
+ "epoch": 0.18776637253136444,
8249
+ "grad_norm": 0.00363954552449286,
8250
+ "learning_rate": 2.2841267182576143e-05,
8251
+ "loss": 11.5,
8252
+ "step": 1173
8253
+ },
8254
+ {
8255
+ "epoch": 0.18792644616523602,
8256
+ "grad_norm": 0.0034002477768808603,
8257
+ "learning_rate": 2.2707315256368433e-05,
8258
+ "loss": 11.5,
8259
+ "step": 1174
8260
+ },
8261
+ {
8262
+ "epoch": 0.1880865197991076,
8263
+ "grad_norm": 0.0022575787734240294,
8264
+ "learning_rate": 2.2573706939880555e-05,
8265
+ "loss": 11.5,
8266
+ "step": 1175
8267
+ },
8268
+ {
8269
+ "epoch": 0.18824659343297917,
8270
+ "grad_norm": 0.001263917307369411,
8271
+ "learning_rate": 2.2440442827077045e-05,
8272
+ "loss": 11.5,
8273
+ "step": 1176
8274
+ },
8275
+ {
8276
+ "epoch": 0.18840666706685075,
8277
+ "grad_norm": 0.0030521685257554054,
8278
+ "learning_rate": 2.230752351039228e-05,
8279
+ "loss": 11.5,
8280
+ "step": 1177
8281
+ },
8282
+ {
8283
+ "epoch": 0.18856674070072232,
8284
+ "grad_norm": 0.003970122896134853,
8285
+ "learning_rate": 2.2174949580727832e-05,
8286
+ "loss": 11.5,
8287
+ "step": 1178
8288
+ },
8289
+ {
8290
+ "epoch": 0.1887268143345939,
8291
+ "grad_norm": 0.0015181894414126873,
8292
+ "learning_rate": 2.2042721627449846e-05,
8293
+ "loss": 11.5,
8294
+ "step": 1179
8295
+ },
8296
+ {
8297
+ "epoch": 0.1888868879684655,
8298
+ "grad_norm": 0.0021002558059990406,
8299
+ "learning_rate": 2.1910840238386398e-05,
8300
+ "loss": 11.5,
8301
+ "step": 1180
8302
+ },
8303
+ {
8304
+ "epoch": 0.18904696160233708,
8305
+ "grad_norm": 0.005683374125510454,
8306
+ "learning_rate": 2.1779305999824884e-05,
8307
+ "loss": 11.5,
8308
+ "step": 1181
8309
+ },
8310
+ {
8311
+ "epoch": 0.18920703523620866,
8312
+ "grad_norm": 0.00221837917342782,
8313
+ "learning_rate": 2.164811949650942e-05,
8314
+ "loss": 11.5,
8315
+ "step": 1182
8316
+ },
8317
+ {
8318
+ "epoch": 0.18936710887008024,
8319
+ "grad_norm": 0.003727814182639122,
8320
+ "learning_rate": 2.1517281311638217e-05,
8321
+ "loss": 11.5,
8322
+ "step": 1183
8323
+ },
8324
+ {
8325
+ "epoch": 0.1895271825039518,
8326
+ "grad_norm": 0.0021374353673309088,
8327
+ "learning_rate": 2.1386792026861103e-05,
8328
+ "loss": 11.5,
8329
+ "step": 1184
8330
+ },
8331
+ {
8332
+ "epoch": 0.1896872561378234,
8333
+ "grad_norm": 0.004052836447954178,
8334
+ "learning_rate": 2.125665222227675e-05,
8335
+ "loss": 11.5,
8336
+ "step": 1185
8337
+ },
8338
+ {
8339
+ "epoch": 0.18984732977169497,
8340
+ "grad_norm": 0.003397738328203559,
8341
+ "learning_rate": 2.112686247643024e-05,
8342
+ "loss": 11.5,
8343
+ "step": 1186
8344
+ },
8345
+ {
8346
+ "epoch": 0.19000740340556657,
8347
+ "grad_norm": 0.006731340661644936,
8348
+ "learning_rate": 2.09974233663104e-05,
8349
+ "loss": 11.5,
8350
+ "step": 1187
8351
+ },
8352
+ {
8353
+ "epoch": 0.19016747703943815,
8354
+ "grad_norm": 0.002169186482205987,
8355
+ "learning_rate": 2.0868335467347366e-05,
8356
+ "loss": 11.5,
8357
+ "step": 1188
8358
+ },
8359
+ {
8360
+ "epoch": 0.19032755067330973,
8361
+ "grad_norm": 0.0017040061065927148,
8362
+ "learning_rate": 2.073959935340988e-05,
8363
+ "loss": 11.5,
8364
+ "step": 1189
8365
+ },
8366
+ {
8367
+ "epoch": 0.1904876243071813,
8368
+ "grad_norm": 0.0026962559204548597,
8369
+ "learning_rate": 2.06112155968028e-05,
8370
+ "loss": 11.5,
8371
+ "step": 1190
8372
+ },
8373
+ {
8374
+ "epoch": 0.19064769794105288,
8375
+ "grad_norm": 0.0027670180425047874,
8376
+ "learning_rate": 2.0483184768264596e-05,
8377
+ "loss": 11.5,
8378
+ "step": 1191
8379
+ },
8380
+ {
8381
+ "epoch": 0.19080777157492446,
8382
+ "grad_norm": 0.006315532140433788,
8383
+ "learning_rate": 2.035550743696468e-05,
8384
+ "loss": 11.5,
8385
+ "step": 1192
8386
+ },
8387
+ {
8388
+ "epoch": 0.19096784520879603,
8389
+ "grad_norm": 0.03239641711115837,
8390
+ "learning_rate": 2.022818417050113e-05,
8391
+ "loss": 11.5,
8392
+ "step": 1193
8393
+ },
8394
+ {
8395
+ "epoch": 0.19112791884266764,
8396
+ "grad_norm": 0.03733925521373749,
8397
+ "learning_rate": 2.0101215534897855e-05,
8398
+ "loss": 11.5,
8399
+ "step": 1194
8400
+ },
8401
+ {
8402
+ "epoch": 0.19128799247653921,
8403
+ "grad_norm": 0.007610844448208809,
8404
+ "learning_rate": 1.99746020946023e-05,
8405
+ "loss": 11.5,
8406
+ "step": 1195
8407
+ },
8408
+ {
8409
+ "epoch": 0.1914480661104108,
8410
+ "grad_norm": 0.007685669232159853,
8411
+ "learning_rate": 1.9848344412482854e-05,
8412
+ "loss": 11.5,
8413
+ "step": 1196
8414
+ },
8415
+ {
8416
+ "epoch": 0.19160813974428237,
8417
+ "grad_norm": 0.006268704775720835,
8418
+ "learning_rate": 1.9722443049826344e-05,
8419
+ "loss": 11.5,
8420
+ "step": 1197
8421
+ },
8422
+ {
8423
+ "epoch": 0.19176821337815395,
8424
+ "grad_norm": 0.010067098774015903,
8425
+ "learning_rate": 1.9596898566335576e-05,
8426
+ "loss": 11.5,
8427
+ "step": 1198
8428
+ },
8429
+ {
8430
+ "epoch": 0.19192828701202552,
8431
+ "grad_norm": 0.008086483925580978,
8432
+ "learning_rate": 1.9471711520126824e-05,
8433
+ "loss": 11.5,
8434
+ "step": 1199
8435
+ },
8436
+ {
8437
+ "epoch": 0.1920883606458971,
8438
+ "grad_norm": 0.005931831896305084,
8439
+ "learning_rate": 1.9346882467727325e-05,
8440
+ "loss": 11.5,
8441
+ "step": 1200
8442
+ },
8443
+ {
8444
+ "epoch": 0.1922484342797687,
8445
+ "grad_norm": 0.0045110140927135944,
8446
+ "learning_rate": 1.9222411964072884e-05,
8447
+ "loss": 11.5,
8448
+ "step": 1201
8449
+ },
8450
+ {
8451
+ "epoch": 0.19240850791364028,
8452
+ "grad_norm": 0.004013038240373135,
8453
+ "learning_rate": 1.9098300562505266e-05,
8454
+ "loss": 11.5,
8455
+ "step": 1202
8456
+ },
8457
+ {
8458
+ "epoch": 0.19256858154751186,
8459
+ "grad_norm": 0.0038493447937071323,
8460
+ "learning_rate": 1.8974548814769944e-05,
8461
+ "loss": 11.5,
8462
+ "step": 1203
8463
+ },
8464
+ {
8465
+ "epoch": 0.19272865518138343,
8466
+ "grad_norm": 0.0025400177109986544,
8467
+ "learning_rate": 1.8851157271013442e-05,
8468
+ "loss": 11.5,
8469
+ "step": 1204
8470
+ },
8471
+ {
8472
+ "epoch": 0.192888728815255,
8473
+ "grad_norm": 0.003950870595872402,
8474
+ "learning_rate": 1.872812647978095e-05,
8475
+ "loss": 11.5,
8476
+ "step": 1205
8477
+ },
8478
+ {
8479
+ "epoch": 0.1930488024491266,
8480
+ "grad_norm": 0.0026451449375599623,
8481
+ "learning_rate": 1.8605456988014015e-05,
8482
+ "loss": 11.5,
8483
+ "step": 1206
8484
+ },
8485
+ {
8486
+ "epoch": 0.19320887608299817,
8487
+ "grad_norm": 0.003675904357805848,
8488
+ "learning_rate": 1.8483149341047923e-05,
8489
+ "loss": 11.5,
8490
+ "step": 1207
8491
+ },
8492
+ {
8493
+ "epoch": 0.19336894971686977,
8494
+ "grad_norm": 0.0031217210926115513,
8495
+ "learning_rate": 1.8361204082609352e-05,
8496
+ "loss": 11.5,
8497
+ "step": 1208
8498
+ },
8499
+ {
8500
+ "epoch": 0.19352902335074135,
8501
+ "grad_norm": 0.006900711916387081,
8502
+ "learning_rate": 1.8239621754813995e-05,
8503
+ "loss": 11.5,
8504
+ "step": 1209
8505
+ },
8506
+ {
8507
+ "epoch": 0.19368909698461292,
8508
+ "grad_norm": 0.0030354110058397055,
8509
+ "learning_rate": 1.811840289816409e-05,
8510
+ "loss": 11.5,
8511
+ "step": 1210
8512
+ },
8513
+ {
8514
+ "epoch": 0.1938491706184845,
8515
+ "grad_norm": 0.007082383614033461,
8516
+ "learning_rate": 1.799754805154603e-05,
8517
+ "loss": 11.5,
8518
+ "step": 1211
8519
+ },
8520
+ {
8521
+ "epoch": 0.19400924425235608,
8522
+ "grad_norm": 0.00182642275467515,
8523
+ "learning_rate": 1.787705775222802e-05,
8524
+ "loss": 11.5,
8525
+ "step": 1212
8526
+ },
8527
+ {
8528
+ "epoch": 0.19416931788622765,
8529
+ "grad_norm": 0.006203912664204836,
8530
+ "learning_rate": 1.775693253585763e-05,
8531
+ "loss": 11.5,
8532
+ "step": 1213
8533
+ },
8534
+ {
8535
+ "epoch": 0.19432939152009926,
8536
+ "grad_norm": 0.006941215600818396,
8537
+ "learning_rate": 1.763717293645939e-05,
8538
+ "loss": 11.5,
8539
+ "step": 1214
8540
+ },
8541
+ {
8542
+ "epoch": 0.19448946515397084,
8543
+ "grad_norm": 0.0022211989853531122,
8544
+ "learning_rate": 1.7517779486432495e-05,
8545
+ "loss": 11.5,
8546
+ "step": 1215
8547
+ },
8548
+ {
8549
+ "epoch": 0.1946495387878424,
8550
+ "grad_norm": 0.002246611751616001,
8551
+ "learning_rate": 1.7398752716548395e-05,
8552
+ "loss": 11.5,
8553
+ "step": 1216
8554
+ },
8555
+ {
8556
+ "epoch": 0.194809612421714,
8557
+ "grad_norm": 0.004534405190497637,
8558
+ "learning_rate": 1.728009315594843e-05,
8559
+ "loss": 11.5,
8560
+ "step": 1217
8561
+ },
8562
+ {
8563
+ "epoch": 0.19496968605558557,
8564
+ "grad_norm": 0.0020383824594318867,
8565
+ "learning_rate": 1.716180133214149e-05,
8566
+ "loss": 11.5,
8567
+ "step": 1218
8568
+ },
8569
+ {
8570
+ "epoch": 0.19512975968945714,
8571
+ "grad_norm": 0.002337103709578514,
8572
+ "learning_rate": 1.704387777100165e-05,
8573
+ "loss": 11.5,
8574
+ "step": 1219
8575
+ },
8576
+ {
8577
+ "epoch": 0.19528983332332872,
8578
+ "grad_norm": 0.0020474609918892384,
8579
+ "learning_rate": 1.6926322996765897e-05,
8580
+ "loss": 11.5,
8581
+ "step": 1220
8582
+ },
8583
+ {
8584
+ "epoch": 0.19544990695720033,
8585
+ "grad_norm": 0.003318862058222294,
8586
+ "learning_rate": 1.6809137532031704e-05,
8587
+ "loss": 11.5,
8588
+ "step": 1221
8589
+ },
8590
+ {
8591
+ "epoch": 0.1956099805910719,
8592
+ "grad_norm": 0.0028475450817495584,
8593
+ "learning_rate": 1.6692321897754758e-05,
8594
+ "loss": 11.5,
8595
+ "step": 1222
8596
+ },
8597
+ {
8598
+ "epoch": 0.19577005422494348,
8599
+ "grad_norm": 0.0026161440182477236,
8600
+ "learning_rate": 1.65758766132467e-05,
8601
+ "loss": 11.5,
8602
+ "step": 1223
8603
+ },
8604
+ {
8605
+ "epoch": 0.19593012785881506,
8606
+ "grad_norm": 0.0018915985710918903,
8607
+ "learning_rate": 1.6459802196172668e-05,
8608
+ "loss": 11.5,
8609
+ "step": 1224
8610
+ },
8611
+ {
8612
+ "epoch": 0.19609020149268663,
8613
+ "grad_norm": 0.004110247828066349,
8614
+ "learning_rate": 1.634409916254914e-05,
8615
+ "loss": 11.5,
8616
+ "step": 1225
8617
+ },
8618
+ {
8619
+ "epoch": 0.1962502751265582,
8620
+ "grad_norm": 0.0049685207195580006,
8621
+ "learning_rate": 1.622876802674158e-05,
8622
+ "loss": 11.5,
8623
+ "step": 1226
8624
+ },
8625
+ {
8626
+ "epoch": 0.1964103487604298,
8627
+ "grad_norm": 0.006498860195279121,
8628
+ "learning_rate": 1.6113809301462125e-05,
8629
+ "loss": 11.5,
8630
+ "step": 1227
8631
+ },
8632
+ {
8633
+ "epoch": 0.1965704223943014,
8634
+ "grad_norm": 0.0023258759174495935,
8635
+ "learning_rate": 1.599922349776738e-05,
8636
+ "loss": 11.5,
8637
+ "step": 1228
8638
+ },
8639
+ {
8640
+ "epoch": 0.19673049602817297,
8641
+ "grad_norm": 0.0038611027412116528,
8642
+ "learning_rate": 1.5885011125056047e-05,
8643
+ "loss": 11.5,
8644
+ "step": 1229
8645
+ },
8646
+ {
8647
+ "epoch": 0.19689056966204455,
8648
+ "grad_norm": 0.0019651183392852545,
8649
+ "learning_rate": 1.5771172691066794e-05,
8650
+ "loss": 11.5,
8651
+ "step": 1230
8652
+ },
8653
+ {
8654
+ "epoch": 0.19705064329591612,
8655
+ "grad_norm": 0.0020572866778820753,
8656
+ "learning_rate": 1.565770870187585e-05,
8657
+ "loss": 11.5,
8658
+ "step": 1231
8659
+ },
8660
+ {
8661
+ "epoch": 0.1972107169297877,
8662
+ "grad_norm": 0.0029037913773208857,
8663
+ "learning_rate": 1.5544619661894864e-05,
8664
+ "loss": 11.5,
8665
+ "step": 1232
8666
+ },
8667
+ {
8668
+ "epoch": 0.19737079056365928,
8669
+ "grad_norm": 0.0018012108048424125,
8670
+ "learning_rate": 1.543190607386861e-05,
8671
+ "loss": 11.5,
8672
+ "step": 1233
8673
+ },
8674
+ {
8675
+ "epoch": 0.19753086419753085,
8676
+ "grad_norm": 0.00278186216019094,
8677
+ "learning_rate": 1.5319568438872745e-05,
8678
+ "loss": 11.5,
8679
+ "step": 1234
8680
+ },
8681
+ {
8682
+ "epoch": 0.19769093783140246,
8683
+ "grad_norm": 0.0022009124513715506,
8684
+ "learning_rate": 1.520760725631164e-05,
8685
+ "loss": 11.5,
8686
+ "step": 1235
8687
+ },
8688
+ {
8689
+ "epoch": 0.19785101146527403,
8690
+ "grad_norm": 0.003694578306749463,
8691
+ "learning_rate": 1.5096023023916094e-05,
8692
+ "loss": 11.5,
8693
+ "step": 1236
8694
+ },
8695
+ {
8696
+ "epoch": 0.1980110850991456,
8697
+ "grad_norm": 0.0024776288773864508,
8698
+ "learning_rate": 1.498481623774115e-05,
8699
+ "loss": 11.5,
8700
+ "step": 1237
8701
+ },
8702
+ {
8703
+ "epoch": 0.1981711587330172,
8704
+ "grad_norm": 0.002001419896259904,
8705
+ "learning_rate": 1.4873987392163947e-05,
8706
+ "loss": 11.5,
8707
+ "step": 1238
8708
+ },
8709
+ {
8710
+ "epoch": 0.19833123236688877,
8711
+ "grad_norm": 0.002676997799426317,
8712
+ "learning_rate": 1.4763536979881354e-05,
8713
+ "loss": 11.5,
8714
+ "step": 1239
8715
+ },
8716
+ {
8717
+ "epoch": 0.19849130600076034,
8718
+ "grad_norm": 0.001963255926966667,
8719
+ "learning_rate": 1.4653465491908003e-05,
8720
+ "loss": 11.5,
8721
+ "step": 1240
8722
+ },
8723
+ {
8724
+ "epoch": 0.19865137963463192,
8725
+ "grad_norm": 0.007502126041799784,
8726
+ "learning_rate": 1.4543773417573925e-05,
8727
+ "loss": 11.5,
8728
+ "step": 1241
8729
+ },
8730
+ {
8731
+ "epoch": 0.19881145326850352,
8732
+ "grad_norm": 0.002534693107008934,
8733
+ "learning_rate": 1.4434461244522458e-05,
8734
+ "loss": 11.5,
8735
+ "step": 1242
8736
+ },
8737
+ {
8738
+ "epoch": 0.1989715269023751,
8739
+ "grad_norm": 0.016475824639201164,
8740
+ "learning_rate": 1.4325529458708065e-05,
8741
+ "loss": 11.5,
8742
+ "step": 1243
8743
+ },
8744
+ {
8745
+ "epoch": 0.19913160053624668,
8746
+ "grad_norm": 0.021618835628032684,
8747
+ "learning_rate": 1.4216978544394177e-05,
8748
+ "loss": 11.5,
8749
+ "step": 1244
8750
+ },
8751
+ {
8752
+ "epoch": 0.19929167417011825,
8753
+ "grad_norm": 0.006856040563434362,
8754
+ "learning_rate": 1.4108808984151023e-05,
8755
+ "loss": 11.5,
8756
+ "step": 1245
8757
+ },
8758
+ {
8759
+ "epoch": 0.19945174780398983,
8760
+ "grad_norm": 0.007929130457341671,
8761
+ "learning_rate": 1.4001021258853509e-05,
8762
+ "loss": 11.5,
8763
+ "step": 1246
8764
+ },
8765
+ {
8766
+ "epoch": 0.1996118214378614,
8767
+ "grad_norm": 0.009471126832067966,
8768
+ "learning_rate": 1.3893615847679065e-05,
8769
+ "loss": 11.5,
8770
+ "step": 1247
8771
+ },
8772
+ {
8773
+ "epoch": 0.19977189507173299,
8774
+ "grad_norm": 0.009036310948431492,
8775
+ "learning_rate": 1.3786593228105494e-05,
8776
+ "loss": 11.5,
8777
+ "step": 1248
8778
+ },
8779
+ {
8780
+ "epoch": 0.1999319687056046,
8781
+ "grad_norm": 0.003158113220706582,
8782
+ "learning_rate": 1.3679953875908957e-05,
8783
+ "loss": 11.5,
8784
+ "step": 1249
8785
+ },
8786
+ {
8787
+ "epoch": 0.20009204233947617,
8788
+ "grad_norm": 0.003167160553857684,
8789
+ "learning_rate": 1.3573698265161683e-05,
8790
+ "loss": 11.5,
8791
+ "step": 1250
8792
+ },
8793
+ {
8794
+ "epoch": 0.20025211597334774,
8795
+ "grad_norm": 0.0021652011200785637,
8796
+ "learning_rate": 1.3467826868229994e-05,
8797
+ "loss": 11.5,
8798
+ "step": 1251
8799
+ },
8800
+ {
8801
+ "epoch": 0.20041218960721932,
8802
+ "grad_norm": 0.0020336401648819447,
8803
+ "learning_rate": 1.3362340155772146e-05,
8804
+ "loss": 11.5,
8805
+ "step": 1252
8806
+ },
8807
+ {
8808
+ "epoch": 0.2005722632410909,
8809
+ "grad_norm": 0.0040008570067584515,
8810
+ "learning_rate": 1.3257238596736266e-05,
8811
+ "loss": 11.5,
8812
+ "step": 1253
8813
+ },
8814
+ {
8815
+ "epoch": 0.20073233687496247,
8816
+ "grad_norm": 0.0027364951092749834,
8817
+ "learning_rate": 1.3152522658358245e-05,
8818
+ "loss": 11.5,
8819
+ "step": 1254
8820
+ },
8821
+ {
8822
+ "epoch": 0.20089241050883405,
8823
+ "grad_norm": 0.006214543711394072,
8824
+ "learning_rate": 1.3048192806159721e-05,
8825
+ "loss": 11.5,
8826
+ "step": 1255
8827
+ },
8828
+ {
8829
+ "epoch": 0.20105248414270566,
8830
+ "grad_norm": 0.003878774121403694,
8831
+ "learning_rate": 1.2944249503945894e-05,
8832
+ "loss": 11.5,
8833
+ "step": 1256
8834
+ },
8835
+ {
8836
+ "epoch": 0.20121255777657723,
8837
+ "grad_norm": 0.0018572742119431496,
8838
+ "learning_rate": 1.2840693213803545e-05,
8839
+ "loss": 11.5,
8840
+ "step": 1257
8841
+ },
8842
+ {
8843
+ "epoch": 0.2013726314104488,
8844
+ "grad_norm": 0.0018154243007302284,
8845
+ "learning_rate": 1.2737524396099032e-05,
8846
+ "loss": 11.5,
8847
+ "step": 1258
8848
+ },
8849
+ {
8850
+ "epoch": 0.2015327050443204,
8851
+ "grad_norm": 0.004351686220616102,
8852
+ "learning_rate": 1.2634743509476088e-05,
8853
+ "loss": 11.5,
8854
+ "step": 1259
8855
+ },
8856
+ {
8857
+ "epoch": 0.20169277867819196,
8858
+ "grad_norm": 0.0021896574180573225,
8859
+ "learning_rate": 1.2532351010853916e-05,
8860
+ "loss": 11.5,
8861
+ "step": 1260
8862
+ },
8863
+ {
8864
+ "epoch": 0.20185285231206354,
8865
+ "grad_norm": 0.0019422408659011126,
8866
+ "learning_rate": 1.243034735542512e-05,
8867
+ "loss": 11.5,
8868
+ "step": 1261
8869
+ },
8870
+ {
8871
+ "epoch": 0.20201292594593512,
8872
+ "grad_norm": 0.003049128921702504,
8873
+ "learning_rate": 1.2328732996653669e-05,
8874
+ "loss": 11.5,
8875
+ "step": 1262
8876
+ },
8877
+ {
8878
+ "epoch": 0.20217299957980672,
8879
+ "grad_norm": 0.0054011475294828415,
8880
+ "learning_rate": 1.2227508386272878e-05,
8881
+ "loss": 11.5,
8882
+ "step": 1263
8883
+ },
8884
+ {
8885
+ "epoch": 0.2023330732136783,
8886
+ "grad_norm": 0.0034021218307316303,
8887
+ "learning_rate": 1.212667397428342e-05,
8888
+ "loss": 11.5,
8889
+ "step": 1264
8890
+ },
8891
+ {
8892
+ "epoch": 0.20249314684754988,
8893
+ "grad_norm": 0.0020046860445290804,
8894
+ "learning_rate": 1.2026230208951306e-05,
8895
+ "loss": 11.5,
8896
+ "step": 1265
8897
+ },
8898
+ {
8899
+ "epoch": 0.20265322048142145,
8900
+ "grad_norm": 0.004417333286255598,
8901
+ "learning_rate": 1.1926177536805905e-05,
8902
+ "loss": 11.5,
8903
+ "step": 1266
8904
+ },
8905
+ {
8906
+ "epoch": 0.20281329411529303,
8907
+ "grad_norm": 0.00409281998872757,
8908
+ "learning_rate": 1.1826516402637989e-05,
8909
+ "loss": 11.5,
8910
+ "step": 1267
8911
+ },
8912
+ {
8913
+ "epoch": 0.2029733677491646,
8914
+ "grad_norm": 0.00307185435667634,
8915
+ "learning_rate": 1.1727247249497685e-05,
8916
+ "loss": 11.5,
8917
+ "step": 1268
8918
+ },
8919
+ {
8920
+ "epoch": 0.20313344138303618,
8921
+ "grad_norm": 0.0031310522463172674,
8922
+ "learning_rate": 1.1628370518692533e-05,
8923
+ "loss": 11.5,
8924
+ "step": 1269
8925
+ },
8926
+ {
8927
+ "epoch": 0.2032935150169078,
8928
+ "grad_norm": 0.002145033562555909,
8929
+ "learning_rate": 1.152988664978556e-05,
8930
+ "loss": 11.5,
8931
+ "step": 1270
8932
+ },
8933
+ {
8934
+ "epoch": 0.20345358865077937,
8935
+ "grad_norm": 0.0024463185109198093,
8936
+ "learning_rate": 1.1431796080593283e-05,
8937
+ "loss": 11.5,
8938
+ "step": 1271
8939
+ },
8940
+ {
8941
+ "epoch": 0.20361366228465094,
8942
+ "grad_norm": 0.0031195313204079866,
8943
+ "learning_rate": 1.1334099247183783e-05,
8944
+ "loss": 11.5,
8945
+ "step": 1272
8946
+ },
8947
+ {
8948
+ "epoch": 0.20377373591852252,
8949
+ "grad_norm": 0.002764628268778324,
8950
+ "learning_rate": 1.1236796583874787e-05,
8951
+ "loss": 11.5,
8952
+ "step": 1273
8953
+ },
8954
+ {
8955
+ "epoch": 0.2039338095523941,
8956
+ "grad_norm": 0.0031756593380123377,
8957
+ "learning_rate": 1.1139888523231678e-05,
8958
+ "loss": 11.5,
8959
+ "step": 1274
8960
+ },
8961
+ {
8962
+ "epoch": 0.20409388318626567,
8963
+ "grad_norm": 0.004369680769741535,
8964
+ "learning_rate": 1.1043375496065611e-05,
8965
+ "loss": 11.5,
8966
+ "step": 1275
8967
+ },
8968
+ {
8969
+ "epoch": 0.20425395682013725,
8970
+ "grad_norm": 0.002668399829417467,
8971
+ "learning_rate": 1.0947257931431642e-05,
8972
+ "loss": 11.5,
8973
+ "step": 1276
8974
+ },
8975
+ {
8976
+ "epoch": 0.20441403045400885,
8977
+ "grad_norm": 0.0035743105690926313,
8978
+ "learning_rate": 1.0851536256626705e-05,
8979
+ "loss": 11.5,
8980
+ "step": 1277
8981
+ },
8982
+ {
8983
+ "epoch": 0.20457410408788043,
8984
+ "grad_norm": 0.00246331631205976,
8985
+ "learning_rate": 1.0756210897187812e-05,
8986
+ "loss": 11.5,
8987
+ "step": 1278
8988
+ },
8989
+ {
8990
+ "epoch": 0.204734177721752,
8991
+ "grad_norm": 0.0032423525117337704,
8992
+ "learning_rate": 1.0661282276890127e-05,
8993
+ "loss": 11.5,
8994
+ "step": 1279
8995
+ },
8996
+ {
8997
+ "epoch": 0.20489425135562359,
8998
+ "grad_norm": 0.002488408237695694,
8999
+ "learning_rate": 1.0566750817745074e-05,
9000
+ "loss": 11.5,
9001
+ "step": 1280
9002
+ },
9003
+ {
9004
+ "epoch": 0.20505432498949516,
9005
+ "grad_norm": 0.0026047928258776665,
9006
+ "learning_rate": 1.0472616939998492e-05,
9007
+ "loss": 11.5,
9008
+ "step": 1281
9009
+ },
9010
+ {
9011
+ "epoch": 0.20521439862336674,
9012
+ "grad_norm": 0.0033032901119440794,
9013
+ "learning_rate": 1.0378881062128731e-05,
9014
+ "loss": 11.5,
9015
+ "step": 1282
9016
+ },
9017
+ {
9018
+ "epoch": 0.20537447225723832,
9019
+ "grad_norm": 0.001280674827285111,
9020
+ "learning_rate": 1.0285543600844804e-05,
9021
+ "loss": 11.5,
9022
+ "step": 1283
9023
+ },
9024
+ {
9025
+ "epoch": 0.20553454589110992,
9026
+ "grad_norm": 0.002876692684367299,
9027
+ "learning_rate": 1.019260497108453e-05,
9028
+ "loss": 11.5,
9029
+ "step": 1284
9030
+ },
9031
+ {
9032
+ "epoch": 0.2056946195249815,
9033
+ "grad_norm": 0.0041841669008135796,
9034
+ "learning_rate": 1.010006558601274e-05,
9035
+ "loss": 11.5,
9036
+ "step": 1285
9037
+ },
9038
+ {
9039
+ "epoch": 0.20585469315885307,
9040
+ "grad_norm": 0.0027890666387975216,
9041
+ "learning_rate": 1.000792585701934e-05,
9042
+ "loss": 11.5,
9043
+ "step": 1286
9044
+ },
9045
+ {
9046
+ "epoch": 0.20601476679272465,
9047
+ "grad_norm": 0.0034449852537363768,
9048
+ "learning_rate": 9.91618619371757e-06,
9049
+ "loss": 11.5,
9050
+ "step": 1287
9051
+ },
9052
+ {
9053
+ "epoch": 0.20617484042659623,
9054
+ "grad_norm": 0.002114606788381934,
9055
+ "learning_rate": 9.82484700394215e-06,
9056
+ "loss": 11.5,
9057
+ "step": 1288
9058
+ },
9059
+ {
9060
+ "epoch": 0.2063349140604678,
9061
+ "grad_norm": 0.0029558613896369934,
9062
+ "learning_rate": 9.73390869374743e-06,
9063
+ "loss": 11.5,
9064
+ "step": 1289
9065
+ },
9066
+ {
9067
+ "epoch": 0.20649498769433938,
9068
+ "grad_norm": 0.002221523318439722,
9069
+ "learning_rate": 9.643371667405698e-06,
9070
+ "loss": 11.5,
9071
+ "step": 1290
9072
+ },
9073
+ {
9074
+ "epoch": 0.206655061328211,
9075
+ "grad_norm": 0.0027887243777513504,
9076
+ "learning_rate": 9.553236327405246e-06,
9077
+ "loss": 11.5,
9078
+ "step": 1291
9079
+ },
9080
+ {
9081
+ "epoch": 0.20681513496208256,
9082
+ "grad_norm": 0.002874466124922037,
9083
+ "learning_rate": 9.463503074448677e-06,
9084
+ "loss": 11.5,
9085
+ "step": 1292
9086
+ },
9087
+ {
9088
+ "epoch": 0.20697520859595414,
9089
+ "grad_norm": 0.02173793874680996,
9090
+ "learning_rate": 9.374172307451068e-06,
9091
+ "loss": 11.5,
9092
+ "step": 1293
9093
+ },
9094
+ {
9095
+ "epoch": 0.20713528222982572,
9096
+ "grad_norm": 0.02837592177093029,
9097
+ "learning_rate": 9.285244423538197e-06,
9098
+ "loss": 11.5,
9099
+ "step": 1294
9100
+ },
9101
+ {
9102
+ "epoch": 0.2072953558636973,
9103
+ "grad_norm": 0.008146749809384346,
9104
+ "learning_rate": 9.196719818044886e-06,
9105
+ "loss": 11.5,
9106
+ "step": 1295
9107
+ },
9108
+ {
9109
+ "epoch": 0.20745542949756887,
9110
+ "grad_norm": 0.007599384989589453,
9111
+ "learning_rate": 9.108598884513053e-06,
9112
+ "loss": 11.5,
9113
+ "step": 1296
9114
+ },
9115
+ {
9116
+ "epoch": 0.20761550313144048,
9117
+ "grad_norm": 0.00396609166637063,
9118
+ "learning_rate": 9.020882014690136e-06,
9119
+ "loss": 11.5,
9120
+ "step": 1297
9121
+ },
9122
+ {
9123
+ "epoch": 0.20777557676531205,
9124
+ "grad_norm": 0.010361498221755028,
9125
+ "learning_rate": 8.933569598527247e-06,
9126
+ "loss": 11.5,
9127
+ "step": 1298
9128
+ },
9129
+ {
9130
+ "epoch": 0.20793565039918363,
9131
+ "grad_norm": 0.004484712146222591,
9132
+ "learning_rate": 8.846662024177477e-06,
9133
+ "loss": 11.5,
9134
+ "step": 1299
9135
+ },
9136
+ {
9137
+ "epoch": 0.2080957240330552,
9138
+ "grad_norm": 0.0075991349294781685,
9139
+ "learning_rate": 8.760159677994172e-06,
9140
+ "loss": 11.5,
9141
+ "step": 1300
9142
+ },
9143
+ {
9144
+ "epoch": 0.20825579766692678,
9145
+ "grad_norm": 0.005831120070070028,
9146
+ "learning_rate": 8.674062944529216e-06,
9147
+ "loss": 11.5,
9148
+ "step": 1301
9149
+ },
9150
+ {
9151
+ "epoch": 0.20841587130079836,
9152
+ "grad_norm": 0.004072224721312523,
9153
+ "learning_rate": 8.588372206531292e-06,
9154
+ "loss": 11.5,
9155
+ "step": 1302
9156
+ },
9157
+ {
9158
+ "epoch": 0.20857594493466994,
9159
+ "grad_norm": 0.007944183424115181,
9160
+ "learning_rate": 8.503087844944213e-06,
9161
+ "loss": 11.5,
9162
+ "step": 1303
9163
+ },
9164
+ {
9165
+ "epoch": 0.20873601856854154,
9166
+ "grad_norm": 0.0033783623948693275,
9167
+ "learning_rate": 8.418210238905256e-06,
9168
+ "loss": 11.5,
9169
+ "step": 1304
9170
+ },
9171
+ {
9172
+ "epoch": 0.20889609220241312,
9173
+ "grad_norm": 0.0015663927188143134,
9174
+ "learning_rate": 8.333739765743398e-06,
9175
+ "loss": 11.5,
9176
+ "step": 1305
9177
+ },
9178
+ {
9179
+ "epoch": 0.2090561658362847,
9180
+ "grad_norm": 0.002214925130829215,
9181
+ "learning_rate": 8.249676800977658e-06,
9182
+ "loss": 11.5,
9183
+ "step": 1306
9184
+ },
9185
+ {
9186
+ "epoch": 0.20921623947015627,
9187
+ "grad_norm": 0.005886987783014774,
9188
+ "learning_rate": 8.16602171831553e-06,
9189
+ "loss": 11.5,
9190
+ "step": 1307
9191
+ },
9192
+ {
9193
+ "epoch": 0.20937631310402785,
9194
+ "grad_norm": 0.002971059875562787,
9195
+ "learning_rate": 8.082774889651168e-06,
9196
+ "loss": 11.5,
9197
+ "step": 1308
9198
+ },
9199
+ {
9200
+ "epoch": 0.20953638673789943,
9201
+ "grad_norm": 0.006135622970759869,
9202
+ "learning_rate": 7.999936685063835e-06,
9203
+ "loss": 11.5,
9204
+ "step": 1309
9205
+ },
9206
+ {
9207
+ "epoch": 0.209696460371771,
9208
+ "grad_norm": 0.004374191164970398,
9209
+ "learning_rate": 7.91750747281621e-06,
9210
+ "loss": 11.5,
9211
+ "step": 1310
9212
+ },
9213
+ {
9214
+ "epoch": 0.2098565340056426,
9215
+ "grad_norm": 0.003110012039542198,
9216
+ "learning_rate": 7.835487619352811e-06,
9217
+ "loss": 11.5,
9218
+ "step": 1311
9219
+ },
9220
+ {
9221
+ "epoch": 0.21001660763951419,
9222
+ "grad_norm": 0.0021591773256659508,
9223
+ "learning_rate": 7.753877489298244e-06,
9224
+ "loss": 11.5,
9225
+ "step": 1312
9226
+ },
9227
+ {
9228
+ "epoch": 0.21017668127338576,
9229
+ "grad_norm": 0.0021113939583301544,
9230
+ "learning_rate": 7.67267744545579e-06,
9231
+ "loss": 11.5,
9232
+ "step": 1313
9233
+ },
9234
+ {
9235
+ "epoch": 0.21033675490725734,
9236
+ "grad_norm": 0.005725356284528971,
9237
+ "learning_rate": 7.591887848805545e-06,
9238
+ "loss": 11.5,
9239
+ "step": 1314
9240
+ },
9241
+ {
9242
+ "epoch": 0.21049682854112892,
9243
+ "grad_norm": 0.005279659293591976,
9244
+ "learning_rate": 7.5115090585029966e-06,
9245
+ "loss": 11.5,
9246
+ "step": 1315
9247
+ },
9248
+ {
9249
+ "epoch": 0.2106569021750005,
9250
+ "grad_norm": 0.0030834954231977463,
9251
+ "learning_rate": 7.431541431877342e-06,
9252
+ "loss": 11.5,
9253
+ "step": 1316
9254
+ },
9255
+ {
9256
+ "epoch": 0.21081697580887207,
9257
+ "grad_norm": 0.002347782487049699,
9258
+ "learning_rate": 7.351985324429933e-06,
9259
+ "loss": 11.5,
9260
+ "step": 1317
9261
+ },
9262
+ {
9263
+ "epoch": 0.21097704944274367,
9264
+ "grad_norm": 0.004431252367794514,
9265
+ "learning_rate": 7.272841089832694e-06,
9266
+ "loss": 11.5,
9267
+ "step": 1318
9268
+ },
9269
+ {
9270
+ "epoch": 0.21113712307661525,
9271
+ "grad_norm": 0.0027293700259178877,
9272
+ "learning_rate": 7.194109079926514e-06,
9273
+ "loss": 11.5,
9274
+ "step": 1319
9275
+ },
9276
+ {
9277
+ "epoch": 0.21129719671048683,
9278
+ "grad_norm": 0.004201219882816076,
9279
+ "learning_rate": 7.115789644719728e-06,
9280
+ "loss": 11.5,
9281
+ "step": 1320
9282
+ },
9283
+ {
9284
+ "epoch": 0.2114572703443584,
9285
+ "grad_norm": 0.0030196679290384054,
9286
+ "learning_rate": 7.037883132386547e-06,
9287
+ "loss": 11.5,
9288
+ "step": 1321
9289
+ },
9290
+ {
9291
+ "epoch": 0.21161734397822998,
9292
+ "grad_norm": 0.0053329793736338615,
9293
+ "learning_rate": 6.960389889265517e-06,
9294
+ "loss": 11.5,
9295
+ "step": 1322
9296
+ },
9297
+ {
9298
+ "epoch": 0.21177741761210156,
9299
+ "grad_norm": 0.003384033450856805,
9300
+ "learning_rate": 6.883310259857944e-06,
9301
+ "loss": 11.5,
9302
+ "step": 1323
9303
+ },
9304
+ {
9305
+ "epoch": 0.21193749124597314,
9306
+ "grad_norm": 0.006386162247508764,
9307
+ "learning_rate": 6.806644586826383e-06,
9308
+ "loss": 11.5,
9309
+ "step": 1324
9310
+ },
9311
+ {
9312
+ "epoch": 0.21209756487984474,
9313
+ "grad_norm": 0.0023678236175328493,
9314
+ "learning_rate": 6.730393210993147e-06,
9315
+ "loss": 11.5,
9316
+ "step": 1325
9317
+ },
9318
+ {
9319
+ "epoch": 0.21225763851371632,
9320
+ "grad_norm": 0.00347006693482399,
9321
+ "learning_rate": 6.654556471338746e-06,
9322
+ "loss": 11.5,
9323
+ "step": 1326
9324
+ },
9325
+ {
9326
+ "epoch": 0.2124177121475879,
9327
+ "grad_norm": 0.003324992023408413,
9328
+ "learning_rate": 6.579134705000412e-06,
9329
+ "loss": 11.5,
9330
+ "step": 1327
9331
+ },
9332
+ {
9333
+ "epoch": 0.21257778578145947,
9334
+ "grad_norm": 0.0045981016010046005,
9335
+ "learning_rate": 6.504128247270546e-06,
9336
+ "loss": 11.5,
9337
+ "step": 1328
9338
+ },
9339
+ {
9340
+ "epoch": 0.21273785941533105,
9341
+ "grad_norm": 0.007631343323737383,
9342
+ "learning_rate": 6.429537431595312e-06,
9343
+ "loss": 11.5,
9344
+ "step": 1329
9345
+ },
9346
+ {
9347
+ "epoch": 0.21289793304920263,
9348
+ "grad_norm": 0.0033836376387625933,
9349
+ "learning_rate": 6.355362589573077e-06,
9350
+ "loss": 11.5,
9351
+ "step": 1330
9352
+ },
9353
+ {
9354
+ "epoch": 0.2130580066830742,
9355
+ "grad_norm": 0.002158495131880045,
9356
+ "learning_rate": 6.2816040509530165e-06,
9357
+ "loss": 11.5,
9358
+ "step": 1331
9359
+ },
9360
+ {
9361
+ "epoch": 0.2132180803169458,
9362
+ "grad_norm": 0.00441649928689003,
9363
+ "learning_rate": 6.2082621436335475e-06,
9364
+ "loss": 11.5,
9365
+ "step": 1332
9366
+ },
9367
+ {
9368
+ "epoch": 0.21337815395081738,
9369
+ "grad_norm": 0.001920916954986751,
9370
+ "learning_rate": 6.135337193660962e-06,
9371
+ "loss": 11.5,
9372
+ "step": 1333
9373
+ },
9374
+ {
9375
+ "epoch": 0.21353822758468896,
9376
+ "grad_norm": 0.0026197098195552826,
9377
+ "learning_rate": 6.062829525227909e-06,
9378
+ "loss": 11.5,
9379
+ "step": 1334
9380
+ },
9381
+ {
9382
+ "epoch": 0.21369830121856054,
9383
+ "grad_norm": 0.004652595147490501,
9384
+ "learning_rate": 5.990739460672024e-06,
9385
+ "loss": 11.5,
9386
+ "step": 1335
9387
+ },
9388
+ {
9389
+ "epoch": 0.21385837485243211,
9390
+ "grad_norm": 0.002218803623691201,
9391
+ "learning_rate": 5.9190673204744255e-06,
9392
+ "loss": 11.5,
9393
+ "step": 1336
9394
+ },
9395
+ {
9396
+ "epoch": 0.2140184484863037,
9397
+ "grad_norm": 0.0023052345495671034,
9398
+ "learning_rate": 5.84781342325833e-06,
9399
+ "loss": 11.5,
9400
+ "step": 1337
9401
+ },
9402
+ {
9403
+ "epoch": 0.21417852212017527,
9404
+ "grad_norm": 0.003893439657986164,
9405
+ "learning_rate": 5.77697808578761e-06,
9406
+ "loss": 11.5,
9407
+ "step": 1338
9408
+ },
9409
+ {
9410
+ "epoch": 0.21433859575404687,
9411
+ "grad_norm": 0.0009984035277739167,
9412
+ "learning_rate": 5.706561622965467e-06,
9413
+ "loss": 11.5,
9414
+ "step": 1339
9415
+ },
9416
+ {
9417
+ "epoch": 0.21449866938791845,
9418
+ "grad_norm": 0.0017044260166585445,
9419
+ "learning_rate": 5.636564347832907e-06,
9420
+ "loss": 11.5,
9421
+ "step": 1340
9422
+ },
9423
+ {
9424
+ "epoch": 0.21465874302179003,
9425
+ "grad_norm": 0.010417683981359005,
9426
+ "learning_rate": 5.566986571567401e-06,
9427
+ "loss": 11.5,
9428
+ "step": 1341
9429
+ },
9430
+ {
9431
+ "epoch": 0.2148188166556616,
9432
+ "grad_norm": 0.01849612034857273,
9433
+ "learning_rate": 5.497828603481569e-06,
9434
+ "loss": 11.5,
9435
+ "step": 1342
9436
+ },
9437
+ {
9438
+ "epoch": 0.21497889028953318,
9439
+ "grad_norm": 0.02373194694519043,
9440
+ "learning_rate": 5.429090751021704e-06,
9441
+ "loss": 11.5,
9442
+ "step": 1343
9443
+ },
9444
+ {
9445
+ "epoch": 0.21513896392340476,
9446
+ "grad_norm": 0.011821235530078411,
9447
+ "learning_rate": 5.3607733197664436e-06,
9448
+ "loss": 11.5,
9449
+ "step": 1344
9450
+ },
9451
+ {
9452
+ "epoch": 0.21529903755727633,
9453
+ "grad_norm": 0.0074108256958425045,
9454
+ "learning_rate": 5.2928766134254345e-06,
9455
+ "loss": 11.5,
9456
+ "step": 1345
9457
+ },
9458
+ {
9459
+ "epoch": 0.21545911119114794,
9460
+ "grad_norm": 0.005540342070162296,
9461
+ "learning_rate": 5.225400933837954e-06,
9462
+ "loss": 11.5,
9463
+ "step": 1346
9464
+ },
9465
+ {
9466
+ "epoch": 0.21561918482501952,
9467
+ "grad_norm": 0.009911085478961468,
9468
+ "learning_rate": 5.158346580971573e-06,
9469
+ "loss": 11.5,
9470
+ "step": 1347
9471
+ },
9472
+ {
9473
+ "epoch": 0.2157792584588911,
9474
+ "grad_norm": 0.007390840910375118,
9475
+ "learning_rate": 5.091713852920854e-06,
9476
+ "loss": 11.5,
9477
+ "step": 1348
9478
+ },
9479
+ {
9480
+ "epoch": 0.21593933209276267,
9481
+ "grad_norm": 0.0036254727747291327,
9482
+ "learning_rate": 5.025503045905933e-06,
9483
+ "loss": 11.5,
9484
+ "step": 1349
9485
+ },
9486
+ {
9487
+ "epoch": 0.21609940572663425,
9488
+ "grad_norm": 0.00854894146323204,
9489
+ "learning_rate": 4.959714454271369e-06,
9490
+ "loss": 11.5,
9491
+ "step": 1350
9492
+ },
9493
+ {
9494
+ "epoch": 0.21625947936050582,
9495
+ "grad_norm": 0.0033870558254420757,
9496
+ "learning_rate": 4.8943483704846475e-06,
9497
+ "loss": 11.5,
9498
+ "step": 1351
9499
+ },
9500
+ {
9501
+ "epoch": 0.2164195529943774,
9502
+ "grad_norm": 0.005913980770856142,
9503
+ "learning_rate": 4.829405085134997e-06,
9504
+ "loss": 11.5,
9505
+ "step": 1352
9506
+ },
9507
+ {
9508
+ "epoch": 0.216579626628249,
9509
+ "grad_norm": 0.007272148970514536,
9510
+ "learning_rate": 4.764884886932086e-06,
9511
+ "loss": 11.5,
9512
+ "step": 1353
9513
+ },
9514
+ {
9515
+ "epoch": 0.21673970026212058,
9516
+ "grad_norm": 0.0030211645644158125,
9517
+ "learning_rate": 4.700788062704687e-06,
9518
+ "loss": 11.5,
9519
+ "step": 1354
9520
+ },
9521
+ {
9522
+ "epoch": 0.21689977389599216,
9523
+ "grad_norm": 0.0013875890290364623,
9524
+ "learning_rate": 4.6371148973994525e-06,
9525
+ "loss": 11.5,
9526
+ "step": 1355
9527
+ },
9528
+ {
9529
+ "epoch": 0.21705984752986374,
9530
+ "grad_norm": 0.002735642483457923,
9531
+ "learning_rate": 4.573865674079625e-06,
9532
+ "loss": 11.5,
9533
+ "step": 1356
9534
+ },
9535
+ {
9536
+ "epoch": 0.2172199211637353,
9537
+ "grad_norm": 0.002947563771158457,
9538
+ "learning_rate": 4.511040673923828e-06,
9539
+ "loss": 11.5,
9540
+ "step": 1357
9541
+ },
9542
+ {
9543
+ "epoch": 0.2173799947976069,
9544
+ "grad_norm": 0.0042845094576478004,
9545
+ "learning_rate": 4.448640176224694e-06,
9546
+ "loss": 11.5,
9547
+ "step": 1358
9548
+ },
9549
+ {
9550
+ "epoch": 0.21754006843147847,
9551
+ "grad_norm": 0.004379062447696924,
9552
+ "learning_rate": 4.386664458387779e-06,
9553
+ "loss": 11.5,
9554
+ "step": 1359
9555
+ },
9556
+ {
9557
+ "epoch": 0.21770014206535007,
9558
+ "grad_norm": 0.0032331692054867744,
9559
+ "learning_rate": 4.325113795930203e-06,
9560
+ "loss": 11.5,
9561
+ "step": 1360
9562
+ },
9563
+ {
9564
+ "epoch": 0.21786021569922165,
9565
+ "grad_norm": 0.0020940350368618965,
9566
+ "learning_rate": 4.263988462479484e-06,
9567
+ "loss": 11.5,
9568
+ "step": 1361
9569
+ },
9570
+ {
9571
+ "epoch": 0.21802028933309323,
9572
+ "grad_norm": 0.0035770414397120476,
9573
+ "learning_rate": 4.203288729772326e-06,
9574
+ "loss": 11.5,
9575
+ "step": 1362
9576
+ },
9577
+ {
9578
+ "epoch": 0.2181803629669648,
9579
+ "grad_norm": 0.0055876183323562145,
9580
+ "learning_rate": 4.143014867653383e-06,
9581
+ "loss": 11.5,
9582
+ "step": 1363
9583
+ },
9584
+ {
9585
+ "epoch": 0.21834043660083638,
9586
+ "grad_norm": 0.005337531678378582,
9587
+ "learning_rate": 4.083167144074073e-06,
9588
+ "loss": 11.5,
9589
+ "step": 1364
9590
+ },
9591
+ {
9592
+ "epoch": 0.21850051023470796,
9593
+ "grad_norm": 0.004889491945505142,
9594
+ "learning_rate": 4.023745825091407e-06,
9595
+ "loss": 11.5,
9596
+ "step": 1365
9597
+ },
9598
+ {
9599
+ "epoch": 0.21866058386857953,
9600
+ "grad_norm": 0.002258522668853402,
9601
+ "learning_rate": 3.964751174866765e-06,
9602
+ "loss": 11.5,
9603
+ "step": 1366
9604
+ },
9605
+ {
9606
+ "epoch": 0.21882065750245114,
9607
+ "grad_norm": 0.0026405653916299343,
9608
+ "learning_rate": 3.906183455664725e-06,
9609
+ "loss": 11.5,
9610
+ "step": 1367
9611
+ },
9612
+ {
9613
+ "epoch": 0.21898073113632271,
9614
+ "grad_norm": 0.006426986772567034,
9615
+ "learning_rate": 3.84804292785198e-06,
9616
+ "loss": 11.5,
9617
+ "step": 1368
9618
+ },
9619
+ {
9620
+ "epoch": 0.2191408047701943,
9621
+ "grad_norm": 0.003312518587335944,
9622
+ "learning_rate": 3.7903298498960572e-06,
9623
+ "loss": 11.5,
9624
+ "step": 1369
9625
+ },
9626
+ {
9627
+ "epoch": 0.21930087840406587,
9628
+ "grad_norm": 0.0017910711467266083,
9629
+ "learning_rate": 3.7330444783642338e-06,
9630
+ "loss": 11.5,
9631
+ "step": 1370
9632
+ },
9633
+ {
9634
+ "epoch": 0.21946095203793745,
9635
+ "grad_norm": 0.0036273514851927757,
9636
+ "learning_rate": 3.676187067922421e-06,
9637
+ "loss": 11.5,
9638
+ "step": 1371
9639
+ },
9640
+ {
9641
+ "epoch": 0.21962102567180902,
9642
+ "grad_norm": 0.0038595781661570072,
9643
+ "learning_rate": 3.619757871333973e-06,
9644
+ "loss": 11.5,
9645
+ "step": 1372
9646
+ },
9647
+ {
9648
+ "epoch": 0.2197810993056806,
9649
+ "grad_norm": 0.00221767439506948,
9650
+ "learning_rate": 3.563757139458579e-06,
9651
+ "loss": 11.5,
9652
+ "step": 1373
9653
+ },
9654
+ {
9655
+ "epoch": 0.2199411729395522,
9656
+ "grad_norm": 0.0021597740706056356,
9657
+ "learning_rate": 3.5081851212512175e-06,
9658
+ "loss": 11.5,
9659
+ "step": 1374
9660
+ },
9661
+ {
9662
+ "epoch": 0.22010124657342378,
9663
+ "grad_norm": 0.002075984375551343,
9664
+ "learning_rate": 3.4530420637609363e-06,
9665
+ "loss": 11.5,
9666
+ "step": 1375
9667
+ },
9668
+ {
9669
+ "epoch": 0.22026132020729536,
9670
+ "grad_norm": 0.0031187019776552916,
9671
+ "learning_rate": 3.3983282121298086e-06,
9672
+ "loss": 11.5,
9673
+ "step": 1376
9674
+ },
9675
+ {
9676
+ "epoch": 0.22042139384116693,
9677
+ "grad_norm": 0.004900255240499973,
9678
+ "learning_rate": 3.3440438095919126e-06,
9679
+ "loss": 11.5,
9680
+ "step": 1377
9681
+ },
9682
+ {
9683
+ "epoch": 0.2205814674750385,
9684
+ "grad_norm": 0.002167940605431795,
9685
+ "learning_rate": 3.290189097472096e-06,
9686
+ "loss": 11.5,
9687
+ "step": 1378
9688
+ },
9689
+ {
9690
+ "epoch": 0.2207415411089101,
9691
+ "grad_norm": 0.002858449937775731,
9692
+ "learning_rate": 3.236764315185037e-06,
9693
+ "loss": 11.5,
9694
+ "step": 1379
9695
+ },
9696
+ {
9697
+ "epoch": 0.2209016147427817,
9698
+ "grad_norm": 0.0024274946190416813,
9699
+ "learning_rate": 3.1837697002341293e-06,
9700
+ "loss": 11.5,
9701
+ "step": 1380
9702
+ },
9703
+ {
9704
+ "epoch": 0.22106168837665327,
9705
+ "grad_norm": 0.0024481264408677816,
9706
+ "learning_rate": 3.131205488210409e-06,
9707
+ "loss": 11.5,
9708
+ "step": 1381
9709
+ },
9710
+ {
9711
+ "epoch": 0.22122176201052485,
9712
+ "grad_norm": 0.0024221399798989296,
9713
+ "learning_rate": 3.0790719127915646e-06,
9714
+ "loss": 11.5,
9715
+ "step": 1382
9716
+ },
9717
+ {
9718
+ "epoch": 0.22138183564439642,
9719
+ "grad_norm": 0.0027032729703933,
9720
+ "learning_rate": 3.0273692057408265e-06,
9721
+ "loss": 11.5,
9722
+ "step": 1383
9723
+ },
9724
+ {
9725
+ "epoch": 0.221541909278268,
9726
+ "grad_norm": 0.003121505258604884,
9727
+ "learning_rate": 2.976097596905969e-06,
9728
+ "loss": 11.5,
9729
+ "step": 1384
9730
+ },
9731
+ {
9732
+ "epoch": 0.22170198291213958,
9733
+ "grad_norm": 0.002749078441411257,
9734
+ "learning_rate": 2.9252573142183326e-06,
9735
+ "loss": 11.5,
9736
+ "step": 1385
9737
+ },
9738
+ {
9739
+ "epoch": 0.22186205654601115,
9740
+ "grad_norm": 0.005534507799893618,
9741
+ "learning_rate": 2.874848583691714e-06,
9742
+ "loss": 11.5,
9743
+ "step": 1386
9744
+ },
9745
+ {
9746
+ "epoch": 0.22202213017988276,
9747
+ "grad_norm": 0.002249793615192175,
9748
+ "learning_rate": 2.8248716294214774e-06,
9749
+ "loss": 11.5,
9750
+ "step": 1387
9751
+ },
9752
+ {
9753
+ "epoch": 0.22218220381375434,
9754
+ "grad_norm": 0.002555784536525607,
9755
+ "learning_rate": 2.7753266735834338e-06,
9756
+ "loss": 11.5,
9757
+ "step": 1388
9758
+ },
9759
+ {
9760
+ "epoch": 0.2223422774476259,
9761
+ "grad_norm": 0.005491218063980341,
9762
+ "learning_rate": 2.7262139364329643e-06,
9763
+ "loss": 11.5,
9764
+ "step": 1389
9765
+ },
9766
+ {
9767
+ "epoch": 0.2225023510814975,
9768
+ "grad_norm": 0.003095269901677966,
9769
+ "learning_rate": 2.677533636303964e-06,
9770
+ "loss": 11.5,
9771
+ "step": 1390
9772
+ },
9773
+ {
9774
+ "epoch": 0.22266242471536907,
9775
+ "grad_norm": 0.0014023822732269764,
9776
+ "learning_rate": 2.6292859896079213e-06,
9777
+ "loss": 11.5,
9778
+ "step": 1391
9779
+ },
9780
+ {
9781
+ "epoch": 0.22282249834924064,
9782
+ "grad_norm": 0.004665051586925983,
9783
+ "learning_rate": 2.581471210832931e-06,
9784
+ "loss": 11.5,
9785
+ "step": 1392
9786
+ },
9787
+ {
9788
+ "epoch": 0.22298257198311222,
9789
+ "grad_norm": 0.02085324190557003,
9790
+ "learning_rate": 2.5340895125427364e-06,
9791
+ "loss": 11.5,
9792
+ "step": 1393
9793
+ },
9794
+ {
9795
+ "epoch": 0.22314264561698383,
9796
+ "grad_norm": 0.0144707215949893,
9797
+ "learning_rate": 2.4871411053757898e-06,
9798
+ "loss": 11.5,
9799
+ "step": 1394
9800
+ },
9801
+ {
9802
+ "epoch": 0.2233027192508554,
9803
+ "grad_norm": 0.01008582953363657,
9804
+ "learning_rate": 2.440626198044327e-06,
9805
+ "loss": 11.5,
9806
+ "step": 1395
9807
+ },
9808
+ {
9809
+ "epoch": 0.22346279288472698,
9810
+ "grad_norm": 0.006674542091786861,
9811
+ "learning_rate": 2.394544997333437e-06,
9812
+ "loss": 11.5,
9813
+ "step": 1396
9814
+ },
9815
+ {
9816
+ "epoch": 0.22362286651859856,
9817
+ "grad_norm": 0.007663378491997719,
9818
+ "learning_rate": 2.3488977081001394e-06,
9819
+ "loss": 11.5,
9820
+ "step": 1397
9821
+ },
9822
+ {
9823
+ "epoch": 0.22378294015247013,
9824
+ "grad_norm": 0.0060112918727099895,
9825
+ "learning_rate": 2.3036845332724543e-06,
9826
+ "loss": 11.5,
9827
+ "step": 1398
9828
+ },
9829
+ {
9830
+ "epoch": 0.2239430137863417,
9831
+ "grad_norm": 0.00751597760245204,
9832
+ "learning_rate": 2.2589056738485324e-06,
9833
+ "loss": 11.5,
9834
+ "step": 1399
9835
+ },
9836
+ {
9837
+ "epoch": 0.2241030874202133,
9838
+ "grad_norm": 0.005465385038405657,
9839
+ "learning_rate": 2.2145613288957478e-06,
9840
+ "loss": 11.5,
9841
+ "step": 1400
9842
+ },
9843
+ {
9844
+ "epoch": 0.2242631610540849,
9845
+ "grad_norm": 0.002556642983108759,
9846
+ "learning_rate": 2.170651695549786e-06,
9847
+ "loss": 11.5,
9848
+ "step": 1401
9849
+ },
9850
+ {
9851
+ "epoch": 0.22442323468795647,
9852
+ "grad_norm": 0.0032211760990321636,
9853
+ "learning_rate": 2.1271769690138332e-06,
9854
+ "loss": 11.5,
9855
+ "step": 1402
9856
+ },
9857
+ {
9858
+ "epoch": 0.22458330832182805,
9859
+ "grad_norm": 0.0027126914355903864,
9860
+ "learning_rate": 2.084137342557646e-06,
9861
+ "loss": 11.5,
9862
+ "step": 1403
9863
+ },
9864
+ {
9865
+ "epoch": 0.22474338195569962,
9866
+ "grad_norm": 0.0041853804141283035,
9867
+ "learning_rate": 2.0415330075166937e-06,
9868
+ "loss": 11.5,
9869
+ "step": 1404
9870
+ },
9871
+ {
9872
+ "epoch": 0.2249034555895712,
9873
+ "grad_norm": 0.00473013473674655,
9874
+ "learning_rate": 1.9993641532913833e-06,
9875
+ "loss": 11.5,
9876
+ "step": 1405
9877
+ },
9878
+ {
9879
+ "epoch": 0.22506352922344278,
9880
+ "grad_norm": 0.0026882446836680174,
9881
+ "learning_rate": 1.9576309673461357e-06,
9882
+ "loss": 11.5,
9883
+ "step": 1406
9884
+ },
9885
+ {
9886
+ "epoch": 0.22522360285731435,
9887
+ "grad_norm": 0.0030842390842735767,
9888
+ "learning_rate": 1.916333635208556e-06,
9889
+ "loss": 11.5,
9890
+ "step": 1407
9891
+ },
9892
+ {
9893
+ "epoch": 0.22538367649118596,
9894
+ "grad_norm": 0.0039044285658746958,
9895
+ "learning_rate": 1.8754723404686425e-06,
9896
+ "loss": 11.5,
9897
+ "step": 1408
9898
+ },
9899
+ {
9900
+ "epoch": 0.22554375012505753,
9901
+ "grad_norm": 0.0030411509796977043,
9902
+ "learning_rate": 1.8350472647780116e-06,
9903
+ "loss": 11.5,
9904
+ "step": 1409
9905
+ },
9906
+ {
9907
+ "epoch": 0.2257038237589291,
9908
+ "grad_norm": 0.0017332800198346376,
9909
+ "learning_rate": 1.7950585878489856e-06,
9910
+ "loss": 11.5,
9911
+ "step": 1410
9912
+ },
9913
+ {
9914
+ "epoch": 0.2258638973928007,
9915
+ "grad_norm": 0.0015333160990849137,
9916
+ "learning_rate": 1.7555064874538397e-06,
9917
+ "loss": 11.5,
9918
+ "step": 1411
9919
+ },
9920
+ {
9921
+ "epoch": 0.22602397102667227,
9922
+ "grad_norm": 0.0015668972628191113,
9923
+ "learning_rate": 1.7163911394240672e-06,
9924
+ "loss": 11.5,
9925
+ "step": 1412
9926
+ },
9927
+ {
9928
+ "epoch": 0.22618404466054384,
9929
+ "grad_norm": 0.0032179735135287046,
9930
+ "learning_rate": 1.6777127176495043e-06,
9931
+ "loss": 11.5,
9932
+ "step": 1413
9933
+ },
9934
+ {
9935
+ "epoch": 0.22634411829441542,
9936
+ "grad_norm": 0.002921745413914323,
9937
+ "learning_rate": 1.6394713940776296e-06,
9938
+ "loss": 11.5,
9939
+ "step": 1414
9940
+ },
9941
+ {
9942
+ "epoch": 0.22650419192828702,
9943
+ "grad_norm": 0.0026629441417753696,
9944
+ "learning_rate": 1.6016673387127646e-06,
9945
+ "loss": 11.5,
9946
+ "step": 1415
9947
+ },
9948
+ {
9949
+ "epoch": 0.2266642655621586,
9950
+ "grad_norm": 0.003579874522984028,
9951
+ "learning_rate": 1.5643007196153302e-06,
9952
+ "loss": 11.5,
9953
+ "step": 1416
9954
+ },
9955
+ {
9956
+ "epoch": 0.22682433919603018,
9957
+ "grad_norm": 0.0021721201483160257,
9958
+ "learning_rate": 1.5273717029010925e-06,
9959
+ "loss": 11.5,
9960
+ "step": 1417
9961
+ },
9962
+ {
9963
+ "epoch": 0.22698441282990175,
9964
+ "grad_norm": 0.002987267915159464,
9965
+ "learning_rate": 1.4908804527404286e-06,
9966
+ "loss": 11.5,
9967
+ "step": 1418
9968
+ },
9969
+ {
9970
+ "epoch": 0.22714448646377333,
9971
+ "grad_norm": 0.005420115776360035,
9972
+ "learning_rate": 1.4548271313575835e-06,
9973
+ "loss": 11.5,
9974
+ "step": 1419
9975
+ },
9976
+ {
9977
+ "epoch": 0.2273045600976449,
9978
+ "grad_norm": 0.005826962646096945,
9979
+ "learning_rate": 1.4192118990299707e-06,
9980
+ "loss": 11.5,
9981
+ "step": 1420
9982
+ },
9983
+ {
9984
+ "epoch": 0.22746463373151649,
9985
+ "grad_norm": 0.002273988677188754,
9986
+ "learning_rate": 1.3840349140874619e-06,
9987
+ "loss": 11.5,
9988
+ "step": 1421
9989
+ },
9990
+ {
9991
+ "epoch": 0.2276247073653881,
9992
+ "grad_norm": 0.0024928958155214787,
9993
+ "learning_rate": 1.3492963329116537e-06,
9994
+ "loss": 11.5,
9995
+ "step": 1422
9996
+ },
9997
+ {
9998
+ "epoch": 0.22778478099925967,
9999
+ "grad_norm": 0.004260348156094551,
10000
+ "learning_rate": 1.3149963099352014e-06,
10001
+ "loss": 11.5,
10002
+ "step": 1423
10003
+ },
10004
+ {
10005
+ "epoch": 0.22794485463313124,
10006
+ "grad_norm": 0.004182882606983185,
10007
+ "learning_rate": 1.2811349976411202e-06,
10008
+ "loss": 11.5,
10009
+ "step": 1424
10010
+ },
10011
+ {
10012
+ "epoch": 0.22810492826700282,
10013
+ "grad_norm": 0.003101121634244919,
10014
+ "learning_rate": 1.2477125465620853e-06,
10015
+ "loss": 11.5,
10016
+ "step": 1425
10017
+ },
10018
+ {
10019
+ "epoch": 0.2282650019008744,
10020
+ "grad_norm": 0.00238924752920866,
10021
+ "learning_rate": 1.2147291052798216e-06,
10022
+ "loss": 11.5,
10023
+ "step": 1426
10024
+ },
10025
+ {
10026
+ "epoch": 0.22842507553474597,
10027
+ "grad_norm": 0.0032329584937542677,
10028
+ "learning_rate": 1.1821848204243814e-06,
10029
+ "loss": 11.5,
10030
+ "step": 1427
10031
+ },
10032
+ {
10033
+ "epoch": 0.22858514916861755,
10034
+ "grad_norm": 0.005832359194755554,
10035
+ "learning_rate": 1.1500798366735233e-06,
10036
+ "loss": 11.5,
10037
+ "step": 1428
10038
+ },
10039
+ {
10040
+ "epoch": 0.22874522280248916,
10041
+ "grad_norm": 0.004793527070432901,
10042
+ "learning_rate": 1.1184142967520794e-06,
10043
+ "loss": 11.5,
10044
+ "step": 1429
10045
+ },
10046
+ {
10047
+ "epoch": 0.22890529643636073,
10048
+ "grad_norm": 0.002899014391005039,
10049
+ "learning_rate": 1.0871883414312777e-06,
10050
+ "loss": 11.5,
10051
+ "step": 1430
10052
+ },
10053
+ {
10054
+ "epoch": 0.2290653700702323,
10055
+ "grad_norm": 0.0017772008432075381,
10056
+ "learning_rate": 1.0564021095281652e-06,
10057
+ "loss": 11.5,
10058
+ "step": 1431
10059
+ },
10060
+ {
10061
+ "epoch": 0.2292254437041039,
10062
+ "grad_norm": 0.004641447216272354,
10063
+ "learning_rate": 1.0260557379049519e-06,
10064
+ "loss": 11.5,
10065
+ "step": 1432
10066
+ },
10067
+ {
10068
+ "epoch": 0.22938551733797546,
10069
+ "grad_norm": 0.004166705533862114,
10070
+ "learning_rate": 9.96149361468457e-07,
10071
+ "loss": 11.5,
10072
+ "step": 1433
10073
+ },
10074
+ {
10075
+ "epoch": 0.22954559097184704,
10076
+ "grad_norm": 0.0020900522358715534,
10077
+ "learning_rate": 9.66683113169431e-07,
10078
+ "loss": 11.5,
10079
+ "step": 1434
10080
+ },
10081
+ {
10082
+ "epoch": 0.22970566460571862,
10083
+ "grad_norm": 0.002282516798004508,
10084
+ "learning_rate": 9.376571240020227e-07,
10085
+ "loss": 11.5,
10086
+ "step": 1435
10087
+ },
10088
+ {
10089
+ "epoch": 0.22986573823959022,
10090
+ "grad_norm": 0.003710755379870534,
10091
+ "learning_rate": 9.090715230031688e-07,
10092
+ "loss": 11.5,
10093
+ "step": 1436
10094
+ },
10095
+ {
10096
+ "epoch": 0.2300258118734618,
10097
+ "grad_norm": 0.0018695998005568981,
10098
+ "learning_rate": 8.809264372520609e-07,
10099
+ "loss": 11.5,
10100
+ "step": 1437
10101
+ },
10102
+ {
10103
+ "epoch": 0.23018588550733338,
10104
+ "grad_norm": 0.0014625567710027099,
10105
+ "learning_rate": 8.532219918695128e-07,
10106
+ "loss": 11.5,
10107
+ "step": 1438
10108
+ },
10109
+ {
10110
+ "epoch": 0.23034595914120495,
10111
+ "grad_norm": 0.004999818746000528,
10112
+ "learning_rate": 8.259583100174606e-07,
10113
+ "loss": 11.5,
10114
+ "step": 1439
10115
+ },
10116
+ {
10117
+ "epoch": 0.23050603277507653,
10118
+ "grad_norm": 0.002869151532649994,
10119
+ "learning_rate": 7.991355128984079e-07,
10120
+ "loss": 11.5,
10121
+ "step": 1440
10122
+ },
10123
+ {
10124
+ "epoch": 0.2306661064089481,
10125
+ "grad_norm": 0.0023289695382118225,
10126
+ "learning_rate": 7.727537197548707e-07,
10127
+ "loss": 11.5,
10128
+ "step": 1441
10129
+ },
10130
+ {
10131
+ "epoch": 0.23082618004281968,
10132
+ "grad_norm": 0.0017972509376704693,
10133
+ "learning_rate": 7.468130478688218e-07,
10134
+ "loss": 11.5,
10135
+ "step": 1442
10136
+ },
10137
+ {
10138
+ "epoch": 0.2309862536766913,
10139
+ "grad_norm": 0.044782571494579315,
10140
+ "learning_rate": 7.213136125612586e-07,
10141
+ "loss": 11.5,
10142
+ "step": 1443
10143
+ },
10144
+ {
10145
+ "epoch": 0.23114632731056287,
10146
+ "grad_norm": 0.011034706607460976,
10147
+ "learning_rate": 6.962555271915805e-07,
10148
+ "loss": 11.5,
10149
+ "step": 1444
10150
+ },
10151
+ {
10152
+ "epoch": 0.23130640094443444,
10153
+ "grad_norm": 0.005636899266391993,
10154
+ "learning_rate": 6.716389031571568e-07,
10155
+ "loss": 11.5,
10156
+ "step": 1445
10157
+ },
10158
+ {
10159
+ "epoch": 0.23146647457830602,
10160
+ "grad_norm": 0.012516049668192863,
10161
+ "learning_rate": 6.474638498928265e-07,
10162
+ "loss": 11.5,
10163
+ "step": 1446
10164
+ },
10165
+ {
10166
+ "epoch": 0.2316265482121776,
10167
+ "grad_norm": 0.006045103073120117,
10168
+ "learning_rate": 6.237304748703543e-07,
10169
+ "loss": 11.5,
10170
+ "step": 1447
10171
+ },
10172
+ {
10173
+ "epoch": 0.23178662184604917,
10174
+ "grad_norm": 0.00623738020658493,
10175
+ "learning_rate": 6.004388835980423e-07,
10176
+ "loss": 11.5,
10177
+ "step": 1448
10178
+ },
10179
+ {
10180
+ "epoch": 0.23194669547992075,
10181
+ "grad_norm": 0.0038605364970862865,
10182
+ "learning_rate": 5.77589179620186e-07,
10183
+ "loss": 11.5,
10184
+ "step": 1449
10185
+ },
10186
+ {
10187
+ "epoch": 0.23210676911379235,
10188
+ "grad_norm": 0.007407385855913162,
10189
+ "learning_rate": 5.55181464516652e-07,
10190
+ "loss": 11.5,
10191
+ "step": 1450
10192
+ },
10193
+ {
10194
+ "epoch": 0.23226684274766393,
10195
+ "grad_norm": 0.0058756982907652855,
10196
+ "learning_rate": 5.332158379024122e-07,
10197
+ "loss": 11.5,
10198
+ "step": 1451
10199
+ },
10200
+ {
10201
+ "epoch": 0.2324269163815355,
10202
+ "grad_norm": 0.003662444418296218,
10203
+ "learning_rate": 5.116923974270993e-07,
10204
+ "loss": 11.5,
10205
+ "step": 1452
10206
+ },
10207
+ {
10208
+ "epoch": 0.23258699001540709,
10209
+ "grad_norm": 0.0038290186785161495,
10210
+ "learning_rate": 4.906112387745965e-07,
10211
+ "loss": 11.5,
10212
+ "step": 1453
10213
+ },
10214
+ {
10215
+ "epoch": 0.23274706364927866,
10216
+ "grad_norm": 0.003163130022585392,
10217
+ "learning_rate": 4.6997245566257064e-07,
10218
+ "loss": 11.5,
10219
+ "step": 1454
10220
+ },
10221
+ {
10222
+ "epoch": 0.23290713728315024,
10223
+ "grad_norm": 0.002829737262800336,
10224
+ "learning_rate": 4.497761398421063e-07,
10225
+ "loss": 11.5,
10226
+ "step": 1455
10227
+ },
10228
+ {
10229
+ "epoch": 0.23306721091702182,
10230
+ "grad_norm": 0.00424747820943594,
10231
+ "learning_rate": 4.3002238109723927e-07,
10232
+ "loss": 11.5,
10233
+ "step": 1456
10234
+ },
10235
+ {
10236
+ "epoch": 0.23322728455089342,
10237
+ "grad_norm": 0.003198497463017702,
10238
+ "learning_rate": 4.107112672446123e-07,
10239
+ "loss": 11.5,
10240
+ "step": 1457
10241
+ },
10242
+ {
10243
+ "epoch": 0.233387358184765,
10244
+ "grad_norm": 0.003337225643917918,
10245
+ "learning_rate": 3.9184288413306456e-07,
10246
+ "loss": 11.5,
10247
+ "step": 1458
10248
+ },
10249
+ {
10250
+ "epoch": 0.23354743181863657,
10251
+ "grad_norm": 0.004608597606420517,
10252
+ "learning_rate": 3.734173156432208e-07,
10253
+ "loss": 11.5,
10254
+ "step": 1459
10255
+ },
10256
+ {
10257
+ "epoch": 0.23370750545250815,
10258
+ "grad_norm": 0.005992481950670481,
10259
+ "learning_rate": 3.554346436871581e-07,
10260
+ "loss": 11.5,
10261
+ "step": 1460
10262
+ },
10263
+ {
10264
+ "epoch": 0.23386757908637973,
10265
+ "grad_norm": 0.0015647500986233354,
10266
+ "learning_rate": 3.3789494820803957e-07,
10267
+ "loss": 11.5,
10268
+ "step": 1461
10269
+ },
10270
+ {
10271
+ "epoch": 0.2340276527202513,
10272
+ "grad_norm": 0.00299090170301497,
10273
+ "learning_rate": 3.2079830717972606e-07,
10274
+ "loss": 11.5,
10275
+ "step": 1462
10276
+ },
10277
+ {
10278
+ "epoch": 0.2341877263541229,
10279
+ "grad_norm": 0.0028376192785799503,
10280
+ "learning_rate": 3.041447966064648e-07,
10281
+ "loss": 11.5,
10282
+ "step": 1463
10283
+ },
10284
+ {
10285
+ "epoch": 0.2343477999879945,
10286
+ "grad_norm": 0.002717991592362523,
10287
+ "learning_rate": 2.8793449052254563e-07,
10288
+ "loss": 11.5,
10289
+ "step": 1464
10290
+ },
10291
+ {
10292
+ "epoch": 0.23450787362186606,
10293
+ "grad_norm": 0.0019830649252980947,
10294
+ "learning_rate": 2.721674609919345e-07,
10295
+ "loss": 11.5,
10296
+ "step": 1465
10297
+ },
10298
+ {
10299
+ "epoch": 0.23466794725573764,
10300
+ "grad_norm": 0.0012316781794652343,
10301
+ "learning_rate": 2.568437781080069e-07,
10302
+ "loss": 11.5,
10303
+ "step": 1466
10304
+ },
10305
+ {
10306
+ "epoch": 0.23482802088960922,
10307
+ "grad_norm": 0.0031201078090816736,
10308
+ "learning_rate": 2.4196350999320384e-07,
10309
+ "loss": 11.5,
10310
+ "step": 1467
10311
+ },
10312
+ {
10313
+ "epoch": 0.2349880945234808,
10314
+ "grad_norm": 0.003829725319519639,
10315
+ "learning_rate": 2.275267227987321e-07,
10316
+ "loss": 11.5,
10317
+ "step": 1468
10318
+ },
10319
+ {
10320
+ "epoch": 0.23514816815735237,
10321
+ "grad_norm": 0.003428353928029537,
10322
+ "learning_rate": 2.135334807042866e-07,
10323
+ "loss": 11.5,
10324
+ "step": 1469
10325
+ },
10326
+ {
10327
+ "epoch": 0.23530824179122398,
10328
+ "grad_norm": 0.0036914802622050047,
10329
+ "learning_rate": 1.9998384591773944e-07,
10330
+ "loss": 11.5,
10331
+ "step": 1470
10332
+ },
10333
+ {
10334
+ "epoch": 0.23546831542509555,
10335
+ "grad_norm": 0.0024707193952053785,
10336
+ "learning_rate": 1.8687787867489592e-07,
10337
+ "loss": 11.5,
10338
+ "step": 1471
10339
+ },
10340
+ {
10341
+ "epoch": 0.23562838905896713,
10342
+ "grad_norm": 0.002799749607220292,
10343
+ "learning_rate": 1.7421563723919454e-07,
10344
+ "loss": 11.5,
10345
+ "step": 1472
10346
+ },
10347
+ {
10348
+ "epoch": 0.2357884626928387,
10349
+ "grad_norm": 0.003706209594383836,
10350
+ "learning_rate": 1.6199717790145174e-07,
10351
+ "loss": 11.5,
10352
+ "step": 1473
10353
+ },
10354
+ {
10355
+ "epoch": 0.23594853632671028,
10356
+ "grad_norm": 0.0034813382662832737,
10357
+ "learning_rate": 1.5022255497962879e-07,
10358
+ "loss": 11.5,
10359
+ "step": 1474
10360
+ },
10361
+ {
10362
+ "epoch": 0.23610860996058186,
10363
+ "grad_norm": 0.002922093030065298,
10364
+ "learning_rate": 1.3889182081860962e-07,
10365
+ "loss": 11.5,
10366
+ "step": 1475
10367
+ },
10368
+ {
10369
+ "epoch": 0.23626868359445344,
10370
+ "grad_norm": 0.0027509492356330156,
10371
+ "learning_rate": 1.2800502578991235e-07,
10372
+ "loss": 11.5,
10373
+ "step": 1476
10374
+ },
10375
+ {
10376
+ "epoch": 0.23642875722832504,
10377
+ "grad_norm": 0.0042092702351510525,
10378
+ "learning_rate": 1.1756221829148928e-07,
10379
+ "loss": 11.5,
10380
+ "step": 1477
10381
+ },
10382
+ {
10383
+ "epoch": 0.23658883086219662,
10384
+ "grad_norm": 0.0024770977906882763,
10385
+ "learning_rate": 1.0756344474753821e-07,
10386
+ "loss": 11.5,
10387
+ "step": 1478
10388
+ },
10389
+ {
10390
+ "epoch": 0.2367489044960682,
10391
+ "grad_norm": 0.0025954816956073046,
10392
+ "learning_rate": 9.800874960826933e-08,
10393
+ "loss": 11.5,
10394
+ "step": 1479
10395
+ },
10396
+ {
10397
+ "epoch": 0.23690897812993977,
10398
+ "grad_norm": 0.001979141030460596,
10399
+ "learning_rate": 8.889817534969425e-08,
10400
+ "loss": 11.5,
10401
+ "step": 1480
10402
+ },
10403
+ {
10404
+ "epoch": 0.23706905176381135,
10405
+ "grad_norm": 0.005076172295957804,
10406
+ "learning_rate": 8.023176247348163e-08,
10407
+ "loss": 11.5,
10408
+ "step": 1481
10409
+ },
10410
+ {
10411
+ "epoch": 0.23722912539768293,
10412
+ "grad_norm": 0.0013020483311265707,
10413
+ "learning_rate": 7.200954950673522e-08,
10414
+ "loss": 11.5,
10415
+ "step": 1482
10416
+ },
10417
+ {
10418
+ "epoch": 0.2373891990315545,
10419
+ "grad_norm": 0.002819462912157178,
10420
+ "learning_rate": 6.423157300184946e-08,
10421
+ "loss": 11.5,
10422
+ "step": 1483
10423
+ },
10424
+ {
10425
+ "epoch": 0.2375492726654261,
10426
+ "grad_norm": 0.004089313559234142,
10427
+ "learning_rate": 5.6897867536331864e-08,
10428
+ "loss": 11.5,
10429
+ "step": 1484
10430
+ },
10431
+ {
10432
+ "epoch": 0.23770934629929769,
10433
+ "grad_norm": 0.0035174668300896883,
10434
+ "learning_rate": 5.000846571264761e-08,
10435
+ "loss": 11.5,
10436
+ "step": 1485
10437
+ },
10438
+ {
10439
+ "epoch": 0.23786941993316926,
10440
+ "grad_norm": 0.0026240090373903513,
10441
+ "learning_rate": 4.35633981580974e-08,
10442
+ "loss": 11.5,
10443
+ "step": 1486
10444
+ },
10445
+ {
10446
+ "epoch": 0.23802949356704084,
10447
+ "grad_norm": 0.0020378362387418747,
10448
+ "learning_rate": 3.756269352462871e-08,
10449
+ "loss": 11.5,
10450
+ "step": 1487
10451
+ },
10452
+ {
10453
+ "epoch": 0.23818956720091242,
10454
+ "grad_norm": 0.002563786692917347,
10455
+ "learning_rate": 3.20063784888025e-08,
10456
+ "loss": 11.5,
10457
+ "step": 1488
10458
+ },
10459
+ {
10460
+ "epoch": 0.238349640834784,
10461
+ "grad_norm": 0.0014814968453720212,
10462
+ "learning_rate": 2.6894477751548964e-08,
10463
+ "loss": 11.5,
10464
+ "step": 1489
10465
+ },
10466
+ {
10467
+ "epoch": 0.23850971446865557,
10468
+ "grad_norm": 0.0015452037332579494,
10469
+ "learning_rate": 2.222701403818972e-08,
10470
+ "loss": 11.5,
10471
+ "step": 1490
10472
+ },
10473
+ {
10474
+ "epoch": 0.23866978810252718,
10475
+ "grad_norm": 0.004355388227850199,
10476
+ "learning_rate": 1.8004008098226887e-08,
10477
+ "loss": 11.5,
10478
+ "step": 1491
10479
+ },
10480
+ {
10481
+ "epoch": 0.23882986173639875,
10482
+ "grad_norm": 0.001626601442694664,
10483
+ "learning_rate": 1.4225478705309769e-08,
10484
+ "loss": 11.5,
10485
+ "step": 1492
10486
+ },
10487
+ {
10488
+ "epoch": 0.23898993537027033,
10489
+ "grad_norm": 0.028113674372434616,
10490
+ "learning_rate": 1.0891442657134932e-08,
10491
+ "loss": 11.5,
10492
+ "step": 1493
10493
+ },
10494
+ {
10495
+ "epoch": 0.2391500090041419,
10496
+ "grad_norm": 0.026651926338672638,
10497
+ "learning_rate": 8.001914775401798e-09,
10498
+ "loss": 11.5,
10499
+ "step": 1494
10500
+ },
10501
+ {
10502
+ "epoch": 0.23931008263801348,
10503
+ "grad_norm": 0.006215530447661877,
10504
+ "learning_rate": 5.5569079056794206e-09,
10505
+ "loss": 11.5,
10506
+ "step": 1495
10507
+ },
10508
+ {
10509
+ "epoch": 0.23947015627188506,
10510
+ "grad_norm": 0.005797202233225107,
10511
+ "learning_rate": 3.5564329174064824e-09,
10512
+ "loss": 11.5,
10513
+ "step": 1496
10514
+ },
10515
+ {
10516
+ "epoch": 0.23963022990575664,
10517
+ "grad_norm": 0.006935896351933479,
10518
+ "learning_rate": 2.0004987038246824e-09,
10519
+ "loss": 11.5,
10520
+ "step": 1497
10521
+ },
10522
+ {
10523
+ "epoch": 0.23979030353962824,
10524
+ "grad_norm": 0.005933831911534071,
10525
+ "learning_rate": 8.891121819565306e-10,
10526
+ "loss": 11.5,
10527
+ "step": 1498
10528
+ },
10529
+ {
10530
+ "epoch": 0.23995037717349982,
10531
+ "grad_norm": 0.007345221936702728,
10532
+ "learning_rate": 2.2227829252763344e-10,
10533
+ "loss": 11.5,
10534
+ "step": 1499
10535
+ },
10536
+ {
10537
+ "epoch": 0.2401104508073714,
10538
+ "grad_norm": 0.003996612038463354,
10539
+ "learning_rate": 0.0,
10540
+ "loss": 11.5,
10541
+ "step": 1500
10542
+ },
10543
+ {
10544
+ "epoch": 0.2401104508073714,
10545
+ "eval_loss": 11.5,
10546
+ "eval_runtime": 59.2015,
10547
+ "eval_samples_per_second": 177.732,
10548
+ "eval_steps_per_second": 88.866,
10549
+ "step": 1500
10550
  }
10551
  ],
10552
  "logging_steps": 1,
 
10561
  "should_evaluate": false,
10562
  "should_log": false,
10563
  "should_save": true,
10564
+ "should_training_stop": true
10565
  },
10566
  "attributes": {}
10567
  }
10568
  },
10569
+ "total_flos": 239204040278016.0,
10570
  "train_batch_size": 2,
10571
  "trial_name": null,
10572
  "trial_params": null