{ "algorithm": "Q-Learning", "environment": "ziadbc/teeunit-env", "trained_at": "2026-03-08T10:56:29.785554", "episodes": 20, "steps": 938, "total_reward": 39.38000000000003, "actions": [ { "tool": "move", "args": { "direction": "left" } }, { "tool": "move", "args": { "direction": "right" } }, { "tool": "move", "args": { "direction": "none" } }, { "tool": "jump", "args": {} }, { "tool": "shoot", "args": { "weapon": 1 } }, { "tool": "shoot", "args": { "weapon": 2 } }, { "tool": "hook", "args": {} } ], "q_table": { "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": { "6": 0.009469134627691268, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": { "6": 0.0060994729826249995, "0": 0.0, "1": 0.0, "2": 0.0014354270612500003, "3": 0.0, "4": 0.0014354270612500003, "5": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_3')": { "2": 0.0019000000000000002, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_3')": { "3": 0.004950249375625001, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.001, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_2')": { "2": 0.008353226940779229, "0": 0.001189525, "1": 0.0, "3": 0.0012835773750000002, "4": 0.002625493328184375, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_1')": { "4": 0.003403321409077521, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_1')": { "3": 0.016252138779852113, "0": 0.0, "1": 0.0013582611155625, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_0')": { "6": 0.001, "1": 0.014925116973446905, "0": 0.0, "2": 0.0, "3": 0.0011985048750000002, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_0')": { "3": 0.0188005703720386, "0": 0.0032682148915153773, "1": 0.0, "2": 0.0, "4": 0.0016463060906228733, "5": 0.0014702736906843752, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_-1')": { "1": 0.04037445812756561, "0": 0.010111221173019479, "2": 0.0, "3": 0.0, "4": 0.0037772246706651255, "5": 0.0036823474354472155, "6": 0.0014702736906843752 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": { "6": 0.001, "4": 0.006089149498329344, "0": 0.001, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.001 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_4')": { "5": 0.0027955000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_4')": { "4": 0.001 }, "('enemy_mid', 'hp_3', 'pos_2_4')": { "0": 0.0027955000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_1_5')": { "5": 0.0036865225000000004, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('hp_3', 'pos_0_5')": { "1": 1.0010000000000001 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_2')": { "1": 0.001, "2": 0.016090238314915517, "0": 0.0, "3": 0.0, "4": 0.0021805560779033133, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": { "6": 0.011040468537489273, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0018017594567444882, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": { "1": 0.00846899094180844, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": { "3": 0.007194301532993241, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": { "6": 0.006345725562881251, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.001 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": { "1": 0.0019000000000000002, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": { "3": 0.0028905000000000003, "0": 0.0, "1": 0.0, "2": 0.001, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_2')": { "5": 0.004573089887500001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_2')": { "4": 0.001, "0": 0.005092609233124027, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": { "6": 0.004950249375625001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.001, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_2')": { "2": 0.001, "3": 0.001 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_2')": { "6": 0.014037585612700982, "0": 0.0, "1": 0.0021552196375, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_2')": { "6": 0.011445712450502781, "0": 0.0, "1": 0.001, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_2')": { "5": 0.004950249375625001, "0": 0.0, "1": 0.0, "2": 0.001, "3": 0.0013771594881250003, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_2')": { "0": 0.0019000000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_2')": { "4": 0.002089525, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_1')": { "1": 0.0019000000000000002 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_1')": { "1": 0.005455224438062501, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.001, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_1')": { "3": 0.001 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_1')": { "2": 0.012039182244899372, "0": 0.0, "1": 0.0015182463216159377, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_0')": { "6": 0.0015182463216159377 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": { "3": 0.007347652122957158, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0014568110914766003, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_1')": { "3": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_1')": { "4": 0.0027955000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_1')": { "3": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_0')": { "4": 0.008939875895639257, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.003318981126926729, "5": 0.0, "6": 0.0018380980112063664 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_-1')": { "0": 0.0027955000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_-1')": { "3": 0.006446793033568751, "0": 0.0015272713216159376, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_-1')": { "1": 0.0040358935393125, "2": 0.001095, "0": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_-2')": { "4": 0.0027955000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_-2')": { "2": 0.0057298219380625005, "0": 0.0012835773750000002, "1": 0.0, "3": 0.0, "4": 0.0015443330841159377, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": { "6": 0.0011805000000000001 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": { "4": 0.008539737645753012, "0": 0.0017043831114980862, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_4')": { "2": 0.0028036225, "5": 0.001095, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_4')": { "2": 0.004573089887500001, "0": 0.0012835773750000002, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_5')": { "5": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_5')": { "5": 0.00448844275, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_5')": { "3": 0.001 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_4')": { "0": 0.0019000000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": { "5": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_5_4')": { "5": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_5_3')": { "1": 0.001 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_5_3')": { "3": 0.0019950000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.001 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": { "3": 0.001 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_3')": { "3": 0.001, "2": 0.001, "1": 0.001 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_5_2')": { "1": 0.001, "2": 0.001095, "5": 0.01177388315228993, "0": 0.0, "3": 0.0012933611733093751, "4": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": { "1": 0.001095, "6": 0.001113857963125 }, "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": { "6": 0.001, "5": 0.0019855000000000003, "4": 0.001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0 }, "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": { "4": 0.001, "0": 0.00466865017375, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_2')": { "5": 0.001, "0": 0.006490476067517585, "1": 0.0012146282405625002, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0012146282405625002 }, "('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_2')": { "2": 0.0013582611155625 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_3')": { "3": 0.0027955000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": { "4": 0.007583443062417828, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": { "4": 0.005455224438062501, "0": 0.0, "1": 0.0013771594881250003, "2": 0.0, "3": 0.0026166030274375005, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_2_1')": { "5": 0.001 }, "('hp_3', 'pos_2_1')": { "2": 1.0010000000000001 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_2')": { "5": 0.005296280898750001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_2')": { "3": 0.004573089887500001, "0": 0.0, "1": 0.0, "2": 0.001189525, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_1')": { "0": 0.0019000000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_4_1')": { "5": 0.001 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_3_1')": { "3": 0.004573089887500001, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_3_0')": { "2": 0.0036865225000000004, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_2_0')": { "5": 0.001 }, "('enemy_far', 'hp_3', 'pos_2_0')": { "5": 0.0072062835742928285, "0": 0.0, "1": 0.0, "2": 0.0013771594881250003, "3": 0.0, "4": 0.0016551077106197985, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_2_1')": { "2": 0.004573089887500001, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_2_2')": { "0": 0.001, "4": 0.0028805725000000003, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_2_3')": { "3": 0.001, "6": 0.0028805725000000003, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_mid', 'hp_3', 'pos_2_2')": { "5": 0.006332948315872189, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": { "2": 0.006090201994256251, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_5')": { "4": 0.0028905, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_5')": { "6": 0.004375533088189032, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": { "1": 0.0037815225000000004, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_5')": { "3": 0.001095 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_3')": { "3": 0.001 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_3')": { "2": 0.012355355281635293, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_7_3')": { "6": 0.0027955000000000002, "0": 0.001189525, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": { "6": 0.0020786543875, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_4')": { "6": 0.0029850250000000005, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.001, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_5')": { "0": 0.0027955000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_5')": { "4": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_1_5')": { "1": 0.001, "3": 0.001 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_1_4')": { "3": 0.005455224438062501, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_1_3')": { "2": 0.001, "1": 0.0037711696375000003, "0": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": { "1": 0.008267726940779227, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.001, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_3_3')": { "4": 0.0029850250000000005, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.001, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_4_3')": { "5": 0.001 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": { "1": 0.0037815225000000004, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_4_4')": { "6": 0.001 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": { "2": 0.001, "6": 0.0019855000000000003 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": {}, "('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_4_2')": { "1": 0.0019000000000000002, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_2')": { "2": 0.001 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_3')": { "5": 0.00431787025, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_3')": { "2": 0.0027955000000000002, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_4')": { "0": 0.001, "5": 0.0028805725000000003, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_5')": { "5": 0.001 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_4_5')": { "0": 0.004573089887500001, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_5')": { "3": 0.001 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_4')": { "6": 0.004573089887500001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_3_4')": { "0": 0.002805, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_2_4')": { "3": 0.002183577375, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_2_3')": { "6": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_3_3')": { "6": 0.0027955000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": { "3": 0.001095 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": { "3": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_2')": { "4": 0.001 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_6_2')": { "2": 0.0029850250000000005, "0": 0.0, "1": 0.001, "3": 0.001189525, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_6_1')": {}, "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": { "2": 0.005455224438062501, "0": 0.0, "1": 0.0, "3": 0.0012835773750000002, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_2')": { "3": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_1')": { "5": 0.0036865225000000004, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'hp_3', 'pos_2_1')": { "2": 0.0027955000000000002, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_2_1')": { "4": 0.007583443062417828, "0": 0.001189525, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_1_2')": { "3": 0.001 }, "('enemy_far', 'hp_3', 'pos_1_2')": { "3": 0.005909701994256251, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_1_1')": { "5": 0.011675438617124839, "0": 0.0012835773750000002, "1": 0.0, "2": 0.0, "3": 0.0021091666686268596, "4": 0.0, "6": 0.0021091666686268596 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": { "4": 0.00215745, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": { "0": 0.0027955000000000002, "2": 0.001, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": { "1": 0.001 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": { "1": 0.0024182463216159376, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_6_5')": { "2": 0.00980017651616106, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0014702736906843752, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_6_5')": { "5": 0.001, "1": 0.001 }, "('enemy_mid', 'hp_3', 'pos_7_5')": { "4": 0.001, "0": 0.001095, "3": 0.001 }, "('enemy_close', 'hp_3', 'pos_7_4')": { "0": 0.0019000000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'hp_3', 'pos_6_4')": { "1": 0.0019000000000000002, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_6_4')": { "6": 0.001, "3": 0.001 }, "('enemy_mid', 'hp_3', 'pos_6_3')": { "3": 0.005455224438062501, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_6_3')": { "6": 0.001 }, "('enemy_far', 'hp_3', 'pos_6_2')": { "1": 0.0019000000000000002, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'hp_3', 'pos_6_2')": { "6": 0.001 }, "('enemy_mid', 'hp_3', 'pos_7_2')": { "4": 0.0019950000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_3_2')": { "1": 0.0038582248696280644, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": { "0": 0.001 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": { "3": 0.003505983665265065, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.001 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_1_2')": { "0": 0.001, "1": 0.0028805725000000003, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_2')": { "4": 0.0019950000000000002, "0": 0.0, "1": 0.0, "2": 0.001, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": { "2": 0.001, "4": 0.001095, "5": 0.004185585850131244, "0": 0.0, "1": 0.0, "3": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": { "3": 0.0036865225000000004, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_1')": { "0": 0.0029850250000000005, "1": 0.001, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_1')": { "6": 0.004573089887500001, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_1_1')": { "3": 0.001, "4": 0.009022015150864955, "0": 0.0, "1": 0.0, "2": 0.0, "5": 0.0, "6": 0.0 }, "('hp_3', 'pos_1_1')": { "1": 1.0010000000000001 }, "('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_2_3')": { "2": 0.001, "6": 0.001 }, "('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_2_2')": { "6": 0.005550224438062501, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_3_3')": { "1": 0.001 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_3')": { "0": 0.0015947735769543437 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_4')": { "3": 0.0019950000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": { "0": 0.0022267050000000003, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": { "3": 0.001, "2": 0.0024199435393125, "0": 0.0, "1": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": { "4": 0.0029845686655553426, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_2')": { "3": 0.001, "1": 0.001095, "4": 0.001104025, "2": 0.0017468321720666997 }, "('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_3')": { "5": 0.0015129711176250001 }, "('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_3_3')": { "3": 0.001 }, "('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_3_2')": { "5": 0.0012834916375000002 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_1')": { "4": 0.0017923783423600297 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_1')": { "1": 0.001, "4": 0.006416332084264109, "0": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_1')": { "3": 0.001095 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_3_3')": { "6": 0.0040367421375, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0012835773750000002, "5": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_4')": { "5": 0.001095 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_4')": { "6": 0.001 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_4')": { "2": 0.0019000000000000002, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_5')": { "5": 0.0036865225000000004, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_far', 'hp_3', 'pos_3_5')": { "3": 0.0011805000000000001 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_3')": { "0": 0.0027955000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'hp_3', 'pos_2_3')": { "5": 0.001 }, "('enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": { "2": 0.00266714895486003, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_far', 'hp_3', 'pos_2_3')": { "4": 0.001 }, "('enemy_far', 'hp_3', 'pos_2_3')": { "0": 0.0027955000000000002, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_1_3')": { "3": 0.003313746321615938, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_0_2')": { "5": 0.005455224438062501, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.001189525, "4": 0.0, "6": 0.0 }, "('enemy_far', 'hp_3', 'pos_0_1')": { "3": 0.005925498128746876, "0": 0.0, "1": 0.0, "2": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_2')": { "1": 0.0036865225000000004, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_6_2')": { "6": 0.002238691096757993, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_7_2')": { "4": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_7_3')": { "4": 0.001 }, "('enemy_far', 'enemy_far', 'enemy_mid', 'hp_2', 'pos_6_3')": { "4": 0.001 }, "('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_4')": { "6": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 }, "('enemy_close', 'enemy_far', 'enemy_mid', 'hp_2', 'pos_6_4')": { "5": 0.0019000000000000002, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_4')": { "0": 0.001, "2": 0.008377534060647993, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0016453816993769654, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'hp_2', 'pos_6_5')": { "2": 0.010786915292227773, "0": 0.0, "1": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_close', 'enemy_mid', 'hp_2', 'pos_5_5')": { "1": 0.0022502196375, "0": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0, "6": 0.0 }, "('enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_5')": { "6": 0.005392987913055791, "0": 0.0, "1": 0.0, "2": 0.0, "3": 0.0, "4": 0.0, "5": 0.0 } }, "metadata": { "version": "1.0.0", "framework": "custom", "description": "Q-Learning agent trained on TeeUnit environment", "space_url": "https://huggingface.co/spaces/ziadbc/teeunit-env", "github_url": "https://github.com/ziadgit/teeunit" } }