Iterations	Time	Episode_return_mean	Episode_return_std	Normalized_reward_mean	Normalized_reward_std	Max_return_rollout	Max_normalized_return_rollout	Loss
1000	532.3994877338409	3585.8074156395305	4.29126839051279	110.80041807949726	0.13185352754093307	3585.8074156395305	110.80041807949726	0.0
2000	546.5555093288422	3334.4411105671097	751.18152886176	103.07693611271944	23.080806276994355	3585.8074156395305	110.80041807949726	0.0
3000	561.570633649826	3580.895546664781	5.306370263928501	110.64949597623949	0.16304355124562156	3585.8074156395305	110.80041807949726	0.0
4000	576.7270805835724	3311.9244485984245	743.534689049265	102.38508907849948	22.8458494502326	3585.8074156395305	110.80041807949726	0.0
5000	592.5566346645355	3585.4353456182407	2.075749110183633	110.78898585472477	0.06377947440266128	3585.8074156395305	110.80041807949726	0.0
6000	896.8242950439453	662.397680742891	2.382780307807611	20.975720364058425	0.07321331605221781	3585.8074156395305	110.80041807949726	-311.6577
7000	1184.9619944095612	916.45831739522	48.63960567162783	28.781988372362186	1.4945006935904532	3585.8074156395305	110.80041807949726	-320.65674
8000	1491.5394976139069	986.6009216540493	169.48440228232818	30.937190275575983	5.207578335929093	3585.8074156395305	110.80041807949726	-318.71774
9000	1782.114171743393	1380.626619732448	17.29126644413142	43.044025249654055	0.5312915130988765	3585.8074156395305	110.80041807949726	-309.22144
10000	2087.7790870666504	3295.5371930495066	134.33793204858338	101.88157420732142	4.127667768886253	3585.8074156395305	110.80041807949726	-315.9832
11000	2381.8097729682922	265.8269454131615	367.7353499552312	8.790686566515275	11.299037645907552	3585.8074156395305	110.80041807949726	-309.541
12000	2661.6745834350586	258.874910934748	2.296874988016205	8.577078330872972	0.0705737888965481	3585.8074156395305	110.80041807949726	-302.56757
13000	2977.362001180649	588.5365245688774	227.03719763231044	18.70626222172309	6.975945726678529	3585.8074156395305	110.80041807949726	-297.84097
14000	3283.3156547546387	71.18548185645909	6.5651709932732025	2.8101322780862015	0.20172146684795209	3585.8074156395305	110.80041807949726	-301.12732
15000	3567.0298943519592	83.7122110308315	2.6317965158253362	3.1950286024089882	0.08086458892869296	3585.8074156395305	110.80041807949726	-299.094
16000	3885.431255340576	2918.6830379851554	612.2520798859211	90.30235212381172	18.812059542979522	3585.8074156395305	110.80041807949726	-298.90915
17000	4204.981162071228	501.1691642330235	2.6175538787245007	16.021812403182217	0.08042696961143399	3585.8074156395305	110.80041807949726	-295.38266
18000	4498.0020842552185	1918.4927514949522	1159.2622998588201	59.57050189102964	35.61949747061527	3585.8074156395305	110.80041807949726	-298.97675
19000	4801.287141084671	2052.690411624383	145.02614597020855	63.69385966443855	4.456073867137775	3585.8074156395305	110.80041807949726	-290.91064
20000	5121.232552051544	3056.0016240285945	894.4885429208359	94.52160347774466	27.4840580910319	3585.8074156395305	110.80041807949726	-301.06967
21000	5431.704634666443	1115.3108799858771	300.94718203267075	34.89193290440284	9.246904165266983	3585.8074156395305	110.80041807949726	-318.44574
22000	5756.150338172913	3264.2415988600237	14.314196595680942	100.91998567105192	0.4398180545471379	3585.8074156395305	110.80041807949726	-304.9154
23000	6070.081013202667	1093.0072857211621	31.17896368541477	34.206632589198605	0.9580049469945574	3585.8074156395305	110.80041807949726	-292.39948
24000	6379.558784723282	1363.4771460768338	96.87957644308062	42.517090462269934	2.9767222038436363	3585.8074156395305	110.80041807949726	-324.14618
25000	6708.859549045563	2995.756400522262	27.35242367916378	92.67050853006819	0.8404306654100837	3585.8074156395305	110.80041807949726	-298.63525
26000	7046.160782575607	3133.765709446685	12.022386728698892	96.91098303765247	0.3693998965771615	3585.8074156395305	110.80041807949726	-307.68823
27000	7385.195395946503	2678.2832246093303	465.81613513812044	82.91582661917016	14.312668193682073	3585.8074156395305	110.80041807949726	-316.23578
28000	7689.560110807419	3532.771813199672	24.29674808337185	109.17084597386668	0.7465419663912428	3585.8074156395305	110.80041807949726	-298.86542
29000	8017.3730618953705	3542.1269660109256	29.523390242721195	109.45829243178927	0.907135791617362	3585.8074156395305	110.80041807949726	-309.675
30000	8364.969769954681	3456.750572614443	3.8761774132157716	106.83501707037487	0.11909944072407837	3585.8074156395305	110.80041807949726	-312.44794
31000	8698.860831260681	2063.3409889826135	1673.7324990164354	64.02110934151186	51.427110605134814	3585.8074156395305	110.80041807949726	-306.1727
32000	9015.260156869888	3111.295667214001	1017.1868203262169	96.2205684416036	31.254085790735473	3585.8074156395305	110.80041807949726	-302.1306
33000	9366.064170360565	2678.2832246093303	465.81613513812044	82.91582661917016	14.312668193682073	3585.8074156395305	110.80041807949726	-310.97192
34000	9729.9720454216	3320.149364583289	32.90726737208637	102.63780787575062	1.0111088121020062	3585.8074156395305	110.80041807949726	-317.86536
35000	10105.020653486252	3573.9612770581252	11.180709500918256	110.43643358410884	0.34353851913940736	3585.8074156395305	110.80041807949726	-315.71655
36000	10451.792045354843	3434.268815630774	7.268861092556195	106.14424252684637	0.22334305129399484	3585.8074156395305	110.80041807949726	-308.2113
37000	10776.551649332047	3111.295667214001	1017.1868203262169	96.2205684416036	31.254085790735473	3585.8074156395305	110.80041807949726	-302.37805
38000	11133.783746004105	3212.6166121482424	712.4227301611057	99.3337561492044	21.889903292872326	3585.8074156395305	110.80041807949726	-304.43106
39000	11492.619097948074	3526.1238836362268	73.28910451405989	108.96658166690281	2.251881281035481	3585.8074156395305	110.80041807949726	-305.64087
40000	11832.245307207108	3484.895833247591	55.908933816263435	107.69980844679961	1.7178580955282665	3585.8074156395305	110.80041807949726	-299.67987
41000	12174.067113161087	3513.758758023966	20.60740340217288	108.58665077419342	0.6331831488430544	3585.8074156395305	110.80041807949726	-307.76062
42000	12541.615090847015	3509.9160993766986	12.493650324767236	108.4685812311888	0.3838799434743925	3585.8074156395305	110.80041807949726	-295.98828
43000	12927.36074590683	3510.4677386378366	6.6179475167851605	108.48553090105142	0.20334307849354075	3585.8074156395305	110.80041807949726	-303.35132
44000	13303.795550346375	3509.5339039396617	3.0986218549565265	108.45683789285674	0.0952082659277841	3585.8074156395305	110.80041807949726	-308.92892
45000	13648.772342920303	3577.6377770495624	23.673690038410946	110.5493977356746	0.7273978827276636	3585.8074156395305	110.80041807949726	-315.14713
46000	14020.230719089508	3580.32144638722	10.982531099603365	110.63185616910789	0.33744928888907927	3585.8074156395305	110.80041807949726	-311.26648
47000	14338.588199138641	976.952989068054	105.82479604386963	30.640747865273006	3.2515730525111093	3585.8074156395305	110.80041807949726	-307.59143
48000	14681.23451590538	3212.6166121482424	712.4227301611057	99.3337561492044	21.889903292872326	3585.8074156395305	110.80041807949726	-310.97858
49000	15065.519160032272	3612.9858774974537	5.206843687929707	111.63550359338085	0.15998549732419037	3612.9858774974537	111.63550359338085	-308.9236
50000	15446.586084127426	3648.753898464342	12.963965950137824	112.73451193041913	0.39833086302065523	3648.753898464342	112.73451193041913	-309.45984
51000	15825.727772712708	3582.0016385189665	3.297027559389827	110.68348175841084	0.10130448029452284	3648.753898464342	112.73451193041913	-317.69464
52000	16217.939846515656	3596.123796537483	5.796114037947887	111.11739923496592	0.17809142015506668	3648.753898464342	112.73451193041913	-312.78
53000	16625.975509881973	3510.530487389523	22.340470010491927	108.48745891941469	0.6864333594976608	3648.753898464342	112.73451193041913	-313.64328
54000	17123.907299280167	3531.8358304746057	15.038554878856631	109.14208696539022	0.4620746896835831	3648.753898464342	112.73451193041913	-311.84106
55000	17638.05813384056	3514.228372669687	12.387972418515705	108.60108015543649	0.38063288375815196	3648.753898464342	112.73451193041913	-316.7489
56000	18094.664530277252	3468.852617579887	181.23108766075939	107.20686454621223	5.568507031855893	3648.753898464342	112.73451193041913	-306.40256
57000	18590.265813589096	3568.709012258648	4.444882068093008	110.27505247755273	0.1365734619342903	3648.753898464342	112.73451193041913	-314.33136
58000	19080.705452680588	3553.2281583551767	7.203122636770386	109.79938770649547	0.2213231712721269	3648.753898464342	112.73451193041913	-304.00732
59000	19593.559446573257	3530.4699233222514	2.3899429126635616	109.10011809746076	0.07343339427401409	3648.753898464342	112.73451193041913	-305.5697
60000	20046.411410093307	3350.408997986148	565.367556473234	103.56756547727545	17.371485513001502	3648.753898464342	112.73451193041913	-308.55832
61000	20584.194076299667	3555.2123689467344	10.51082373316203	109.86035456805541	0.32295560670181706	3648.753898464342	112.73451193041913	-306.33057
62000	21098.75009202957	3260.699053845088	435.74424870680014	100.81113742056155	13.388679306259878	3648.753898464342	112.73451193041913	-308.91217
63000	21608.92690014839	3556.161721576703	164.47553908711058	109.88952438027654	5.053675987914809	3648.753898464342	112.73451193041913	-315.64163
64000	22107.14465212822	3458.983572054321	23.604477290822125	106.90362821895644	0.7252712516037426	3648.753898464342	112.73451193041913	-307.42145
65000	22640.311299324036	3495.7826532243803	28.147724907608705	108.03431691539511	0.864867093730417	3648.753898464342	112.73451193041913	-317.84912
66000	23153.341497421265	3543.266050167811	72.37810920269337	109.49329193556848	2.2238900359195886	3648.753898464342	112.73451193041913	-317.9981
67000	23736.948165416718	3229.033581087592	485.9102029063989	99.8381839941206	14.930078590046842	3648.753898464342	112.73451193041913	-320.42203
68000	24213.747706651688	3527.074857010043	12.492764859302296	108.99580127810505	0.383852736659429	3648.753898464342	112.73451193041913	-314.6223
69000	24757.473006486893	3529.303377547151	9.593454945892965	109.06427480790447	0.29476853014310317	3648.753898464342	112.73451193041913	-322.9541
70000	25286.37169623375	3618.537699698091	12.90580696117517	111.80608890169029	0.3965438697228509	3648.753898464342	112.73451193041913	-317.93512
71000	25800.47110748291	3579.855836606788	16.44290717288628	110.61754984136965	0.5052248231703164	3648.753898464342	112.73451193041913	-318.77612
72000	26313.25843834877	3567.4519484618017	9.585692291745017	110.23642793094442	0.2945300148046659	3648.753898464342	112.73451193041913	-322.83075
73000	26801.745875597	2909.8322798188688	1368.3402760800868	90.03040369751037	42.0436280975508	3648.753898464342	112.73451193041913	-321.55518
74000	27280.894395828247	3350.408997986148	565.367556473234	103.56756547727545	17.371485513001502	3648.753898464342	112.73451193041913	-326.94168
75000	27774.01846075058	2909.8322798188688	1368.3402760800868	90.03040369751037	42.0436280975508	3648.753898464342	112.73451193041913	-321.09338
76000	28250.825606822968	3574.382851724248	9.059833394635264	110.44938688877119	0.2783724724971314	3648.753898464342	112.73451193041913	-327.43262
77000	28792.441253185272	3589.9087252347153	6.8310930936948	110.92643493243008	0.2098921902334208	3648.753898464342	112.73451193041913	-324.7658
78000	29299.22355890274	3581.3173385811847	6.713837322986964	110.66245595613475	0.2062893890134939	3648.753898464342	112.73451193041913	-323.88162
79000	29827.949144363403	3384.4915907890404	368.5689261554145	104.6147873426656	11.324650111143082	3648.753898464342	112.73451193041913	-327.59113
80000	30321.678255796432	3384.4915907890404	368.5689261554145	104.6147873426656	11.324650111143082	3648.753898464342	112.73451193041913	-317.96362
81000	30847.58678841591	3595.2861142686647	8.799365347332921	111.09166060665117	0.2703693303668357	3648.753898464342	112.73451193041913	-327.9503
82000	31347.712814331055	3595.2861142686647	8.799365347332921	111.09166060665117	0.2703693303668357	3648.753898464342	112.73451193041913	-328.6862
83000	31859.88416838646	3589.9087252347153	6.8310930936948	110.92643493243008	0.2098921902334208	3648.753898464342	112.73451193041913	-335.0434
84000	32397.781859874725	3603.2176934877016	4.019866837388281	111.33536633741194	0.12351444247259384	3648.753898464342	112.73451193041913	-332.214
85000	32924.01618504524	3574.382851724248	9.059833394635264	110.44938688877119	0.2783724724971314	3648.753898464342	112.73451193041913	-330.8758
86000	33425.44077420235	3565.3325353102673	4.089800433822847	110.17130683505484	0.12566322240067357	3648.753898464342	112.73451193041913	-324.24078
87000	33879.54791712761	3285.994724337859	4.807819314049613	101.58837228038968	0.1477250730199874	3648.753898464342	112.73451193041913	-329.30392
88000	34314.31483793259	3562.311299360842	2.9925531727227894	110.07847632873045	0.09194919922735181	3648.753898464342	112.73451193041913	-325.10733
89000	34758.07113647461	2715.7612812223024	1061.1925871892656	84.06737751743704	32.60620713692413	3648.753898464342	112.73451193041913	-331.56543
90000	35205.18559932709	3608.4119271608006	20.390032512648055	111.49496437937641	0.6265042101330156	3648.753898464342	112.73451193041913	-327.79144
91000	35628.40602135658	2716.148373244988	1057.6717650631754	84.07927130827679	32.49802634399224	3648.753898464342	112.73451193041913	-332.98224
92000	36181.92375087738	3294.6889848030683	646.2612934131287	101.8555121577816	19.857026756488935	3648.753898464342	112.73451193041913	-333.12326
93000	36660.19304013252	3399.763237231633	761.1242054140092	105.0840240045499	23.38630499143294	3648.753898464342	112.73451193041913	-324.83582
94000	37094.83240485191	3131.4481994257303	4.116006057098743	96.83977521666185	0.12646841647288873	3648.753898464342	112.73451193041913	-328.92108
95000	37562.2740354538	2750.004784894681	898.035379777204	85.1195435307645	27.593038212657067	3648.753898464342	112.73451193041913	-326.43774
96000	37975.924337387085	3384.738796079514	531.9438394392251	104.6223829732833	16.344508266785155	3648.753898464342	112.73451193041913	-332.2929
97000	38394.55396986008	3548.832660519068	7.744125583215976	109.66433162464546	0.23794602969240236	3648.753898464342	112.73451193041913	-331.59082
98000	38838.18923830986	3568.718116068993	6.619439975014675	110.27533220126115	0.20338893577031286	3648.753898464342	112.73451193041913	-335.0885
99000	39287.6619822979	3538.20318903251	13.921540467206508	109.3377304466588	0.427753300973486	3648.753898464342	112.73451193041913	-332.15088
100000	39727.50790333748	3553.1449698688834	7.0662838486184105	109.79683165677534	0.21711866218988468	3648.753898464342	112.73451193041913	-333.1571
