teeunit-agent / teeunit_qlearning_agent.json
ziadbc's picture
feat: add Q-Learning agent trained on teeunit-env Space
868f2dd
{
"algorithm": "Q-Learning",
"environment": "ziadbc/teeunit-env",
"trained_at": "2026-03-08T10:56:29.785554",
"episodes": 20,
"steps": 938,
"total_reward": 39.38000000000003,
"actions": [
{
"tool": "move",
"args": {
"direction": "left"
}
},
{
"tool": "move",
"args": {
"direction": "right"
}
},
{
"tool": "move",
"args": {
"direction": "none"
}
},
{
"tool": "jump",
"args": {}
},
{
"tool": "shoot",
"args": {
"weapon": 1
}
},
{
"tool": "shoot",
"args": {
"weapon": 2
}
},
{
"tool": "hook",
"args": {}
}
],
"q_table": {
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"6": 0.009469134627691268,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"6": 0.0060994729826249995,
"0": 0.0,
"1": 0.0,
"2": 0.0014354270612500003,
"3": 0.0,
"4": 0.0014354270612500003,
"5": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_3')": {
"2": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_3')": {
"3": 0.004950249375625001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.001,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_2')": {
"2": 0.008353226940779229,
"0": 0.001189525,
"1": 0.0,
"3": 0.0012835773750000002,
"4": 0.002625493328184375,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_1')": {
"4": 0.003403321409077521,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_1')": {
"3": 0.016252138779852113,
"0": 0.0,
"1": 0.0013582611155625,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_0')": {
"6": 0.001,
"1": 0.014925116973446905,
"0": 0.0,
"2": 0.0,
"3": 0.0011985048750000002,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_0')": {
"3": 0.0188005703720386,
"0": 0.0032682148915153773,
"1": 0.0,
"2": 0.0,
"4": 0.0016463060906228733,
"5": 0.0014702736906843752,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_-1')": {
"1": 0.04037445812756561,
"0": 0.010111221173019479,
"2": 0.0,
"3": 0.0,
"4": 0.0037772246706651255,
"5": 0.0036823474354472155,
"6": 0.0014702736906843752
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"6": 0.001,
"4": 0.006089149498329344,
"0": 0.001,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.001
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_4')": {
"5": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_4')": {
"4": 0.001
},
"('enemy_mid', 'hp_3', 'pos_2_4')": {
"0": 0.0027955000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_1_5')": {
"5": 0.0036865225000000004,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('hp_3', 'pos_0_5')": {
"1": 1.0010000000000001
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_2')": {
"1": 0.001,
"2": 0.016090238314915517,
"0": 0.0,
"3": 0.0,
"4": 0.0021805560779033133,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": {
"6": 0.011040468537489273,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0018017594567444882,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"1": 0.00846899094180844,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"3": 0.007194301532993241,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"6": 0.006345725562881251,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.001
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"1": 0.0019000000000000002,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": {
"3": 0.0028905000000000003,
"0": 0.0,
"1": 0.0,
"2": 0.001,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_2')": {
"5": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_2')": {
"4": 0.001,
"0": 0.005092609233124027,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": {
"6": 0.004950249375625001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.001,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_2')": {
"2": 0.001,
"3": 0.001
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_2')": {
"6": 0.014037585612700982,
"0": 0.0,
"1": 0.0021552196375,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"6": 0.011445712450502781,
"0": 0.0,
"1": 0.001,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_2')": {
"5": 0.004950249375625001,
"0": 0.0,
"1": 0.0,
"2": 0.001,
"3": 0.0013771594881250003,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_2')": {
"0": 0.0019000000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_2')": {
"4": 0.002089525,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_1')": {
"1": 0.0019000000000000002
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_1')": {
"1": 0.005455224438062501,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.001,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_1')": {
"3": 0.001
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_1')": {
"2": 0.012039182244899372,
"0": 0.0,
"1": 0.0015182463216159377,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_5_0')": {
"6": 0.0015182463216159377
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"3": 0.007347652122957158,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0014568110914766003,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_1')": {
"3": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_1')": {
"4": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_1')": {
"3": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_0')": {
"4": 0.008939875895639257,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.003318981126926729,
"5": 0.0,
"6": 0.0018380980112063664
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_-1')": {
"0": 0.0027955000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_-1')": {
"3": 0.006446793033568751,
"0": 0.0015272713216159376,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_-1')": {
"1": 0.0040358935393125,
"2": 0.001095,
"0": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_-2')": {
"4": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_-2')": {
"2": 0.0057298219380625005,
"0": 0.0012835773750000002,
"1": 0.0,
"3": 0.0,
"4": 0.0015443330841159377,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"6": 0.0011805000000000001
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"4": 0.008539737645753012,
"0": 0.0017043831114980862,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_4')": {
"2": 0.0028036225,
"5": 0.001095,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_4')": {
"2": 0.004573089887500001,
"0": 0.0012835773750000002,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_5')": {
"5": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_6_5')": {
"5": 0.00448844275,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_5')": {
"3": 0.001
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_4')": {
"0": 0.0019000000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"5": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_5_4')": {
"5": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_5_3')": {
"1": 0.001
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"3": 0.0019950000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.001
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"3": 0.001
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"3": 0.001,
"2": 0.001,
"1": 0.001
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_5_2')": {
"1": 0.001,
"2": 0.001095,
"5": 0.01177388315228993,
"0": 0.0,
"3": 0.0012933611733093751,
"4": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"1": 0.001095,
"6": 0.001113857963125
},
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"6": 0.001,
"5": 0.0019855000000000003,
"4": 0.001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0
},
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"4": 0.001,
"0": 0.00466865017375,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"5": 0.001,
"0": 0.006490476067517585,
"1": 0.0012146282405625002,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0012146282405625002
},
"('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_2')": {
"2": 0.0013582611155625
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_3')": {
"3": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": {
"4": 0.007583443062417828,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": {
"4": 0.005455224438062501,
"0": 0.0,
"1": 0.0013771594881250003,
"2": 0.0,
"3": 0.0026166030274375005,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_2_1')": {
"5": 0.001
},
"('hp_3', 'pos_2_1')": {
"2": 1.0010000000000001
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_2')": {
"5": 0.005296280898750001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_2')": {
"3": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"2": 0.001189525,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_1')": {
"0": 0.0019000000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_4_1')": {
"5": 0.001
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_3_1')": {
"3": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_3_0')": {
"2": 0.0036865225000000004,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_2_0')": {
"5": 0.001
},
"('enemy_far', 'hp_3', 'pos_2_0')": {
"5": 0.0072062835742928285,
"0": 0.0,
"1": 0.0,
"2": 0.0013771594881250003,
"3": 0.0,
"4": 0.0016551077106197985,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_2_1')": {
"2": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_2_2')": {
"0": 0.001,
"4": 0.0028805725000000003,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_2_3')": {
"3": 0.001,
"6": 0.0028805725000000003,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_mid', 'hp_3', 'pos_2_2')": {
"5": 0.006332948315872189,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"2": 0.006090201994256251,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_5')": {
"4": 0.0028905,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_5')": {
"6": 0.004375533088189032,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"1": 0.0037815225000000004,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_5')": {
"3": 0.001095
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_6_3')": {
"3": 0.001
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_7_3')": {
"2": 0.012355355281635293,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_7_3')": {
"6": 0.0027955000000000002,
"0": 0.001189525,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"6": 0.0020786543875,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_4')": {
"6": 0.0029850250000000005,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.001,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_5')": {
"0": 0.0027955000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_5')": {
"4": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_1_5')": {
"1": 0.001,
"3": 0.001
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_1_4')": {
"3": 0.005455224438062501,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_1_3')": {
"2": 0.001,
"1": 0.0037711696375000003,
"0": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"1": 0.008267726940779227,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.001,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_3_3')": {
"4": 0.0029850250000000005,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.001,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_4_3')": {
"5": 0.001
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"1": 0.0037815225000000004,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"6": 0.001
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"2": 0.001,
"6": 0.0019855000000000003
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": {},
"('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_4_2')": {
"1": 0.0019000000000000002,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_2')": {
"2": 0.001
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"5": 0.00431787025,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_3')": {
"2": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"0": 0.001,
"5": 0.0028805725000000003,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_5')": {
"5": 0.001
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_4_5')": {
"0": 0.004573089887500001,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_5')": {
"3": 0.001
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_4')": {
"6": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_3_4')": {
"0": 0.002805,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_2_4')": {
"3": 0.002183577375,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_2_3')": {
"6": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"6": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"3": 0.001095
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_5_2')": {
"3": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'hp_3', 'pos_6_2')": {
"4": 0.001
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_6_2')": {
"2": 0.0029850250000000005,
"0": 0.0,
"1": 0.001,
"3": 0.001189525,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_6_1')": {},
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": {
"2": 0.005455224438062501,
"0": 0.0,
"1": 0.0,
"3": 0.0012835773750000002,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_2')": {
"3": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_1')": {
"5": 0.0036865225000000004,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'hp_3', 'pos_2_1')": {
"2": 0.0027955000000000002,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_2_1')": {
"4": 0.007583443062417828,
"0": 0.001189525,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_1_2')": {
"3": 0.001
},
"('enemy_far', 'hp_3', 'pos_1_2')": {
"3": 0.005909701994256251,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_1_1')": {
"5": 0.011675438617124839,
"0": 0.0012835773750000002,
"1": 0.0,
"2": 0.0,
"3": 0.0021091666686268596,
"4": 0.0,
"6": 0.0021091666686268596
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"4": 0.00215745,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"0": 0.0027955000000000002,
"2": 0.001,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"1": 0.001
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_4')": {
"1": 0.0024182463216159376,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_6_5')": {
"2": 0.00980017651616106,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0014702736906843752,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_6_5')": {
"5": 0.001,
"1": 0.001
},
"('enemy_mid', 'hp_3', 'pos_7_5')": {
"4": 0.001,
"0": 0.001095,
"3": 0.001
},
"('enemy_close', 'hp_3', 'pos_7_4')": {
"0": 0.0019000000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'hp_3', 'pos_6_4')": {
"1": 0.0019000000000000002,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_6_4')": {
"6": 0.001,
"3": 0.001
},
"('enemy_mid', 'hp_3', 'pos_6_3')": {
"3": 0.005455224438062501,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_6_3')": {
"6": 0.001
},
"('enemy_far', 'hp_3', 'pos_6_2')": {
"1": 0.0019000000000000002,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'hp_3', 'pos_6_2')": {
"6": 0.001
},
"('enemy_mid', 'hp_3', 'pos_7_2')": {
"4": 0.0019950000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"1": 0.0038582248696280644,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"0": 0.001
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"3": 0.003505983665265065,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.001
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_1_2')": {
"0": 0.001,
"1": 0.0028805725000000003,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_2')": {
"4": 0.0019950000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.001,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_2_2')": {
"2": 0.001,
"4": 0.001095,
"5": 0.004185585850131244,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_2')": {
"3": 0.0036865225000000004,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_1')": {
"0": 0.0029850250000000005,
"1": 0.001,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_1_1')": {
"6": 0.004573089887500001,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_1_1')": {
"3": 0.001,
"4": 0.009022015150864955,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"5": 0.0,
"6": 0.0
},
"('hp_3', 'pos_1_1')": {
"1": 1.0010000000000001
},
"('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_2_3')": {
"2": 0.001,
"6": 0.001
},
"('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_2_2')": {
"6": 0.005550224438062501,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_3_3')": {
"1": 0.001
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"0": 0.0015947735769543437
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_4')": {
"3": 0.0019950000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"0": 0.0022267050000000003,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_4_3')": {
"3": 0.001,
"2": 0.0024199435393125,
"0": 0.0,
"1": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_3_2')": {
"4": 0.0029845686655553426,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_2')": {
"3": 0.001,
"1": 0.001095,
"4": 0.001104025,
"2": 0.0017468321720666997
},
"('enemy_far', 'enemy_far', 'enemy_far', 'hp_3', 'pos_4_3')": {
"5": 0.0015129711176250001
},
"('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_3_3')": {
"3": 0.001
},
"('enemy_close', 'enemy_close', 'enemy_close', 'hp_3', 'pos_3_2')": {
"5": 0.0012834916375000002
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_5_1')": {
"4": 0.0017923783423600297
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_5_1')": {
"1": 0.001,
"4": 0.006416332084264109,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_6_1')": {
"3": 0.001095
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"6": 0.0040367421375,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0012835773750000002,
"5": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"5": 0.001095
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_4_4')": {
"6": 0.001
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_3', 'pos_3_4')": {
"2": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_far', 'hp_3', 'pos_3_5')": {
"5": 0.0036865225000000004,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_far', 'hp_3', 'pos_3_5')": {
"3": 0.0011805000000000001
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_3_3')": {
"0": 0.0027955000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"5": 0.001
},
"('enemy_mid', 'enemy_mid', 'hp_3', 'pos_2_3')": {
"2": 0.00266714895486003,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_far', 'hp_3', 'pos_2_3')": {
"4": 0.001
},
"('enemy_far', 'hp_3', 'pos_2_3')": {
"0": 0.0027955000000000002,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_1_3')": {
"3": 0.003313746321615938,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_0_2')": {
"5": 0.005455224438062501,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.001189525,
"4": 0.0,
"6": 0.0
},
"('enemy_far', 'hp_3', 'pos_0_1')": {
"3": 0.005925498128746876,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_mid', 'hp_3', 'pos_5_2')": {
"1": 0.0036865225000000004,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_close', 'enemy_far', 'hp_3', 'pos_6_2')": {
"6": 0.002238691096757993,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_7_2')": {
"4": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_3', 'pos_7_3')": {
"4": 0.001
},
"('enemy_far', 'enemy_far', 'enemy_mid', 'hp_2', 'pos_6_3')": {
"4": 0.001
},
"('enemy_far', 'enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_4')": {
"6": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
},
"('enemy_close', 'enemy_far', 'enemy_mid', 'hp_2', 'pos_6_4')": {
"5": 0.0019000000000000002,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_4')": {
"0": 0.001,
"2": 0.008377534060647993,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0016453816993769654,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'hp_2', 'pos_6_5')": {
"2": 0.010786915292227773,
"0": 0.0,
"1": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_close', 'enemy_mid', 'hp_2', 'pos_5_5')": {
"1": 0.0022502196375,
"0": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0,
"6": 0.0
},
"('enemy_mid', 'enemy_mid', 'hp_2', 'pos_6_5')": {
"6": 0.005392987913055791,
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0,
"5": 0.0
}
},
"metadata": {
"version": "1.0.0",
"framework": "custom",
"description": "Q-Learning agent trained on TeeUnit environment",
"space_url": "https://huggingface.co/spaces/ziadbc/teeunit-env",
"github_url": "https://github.com/ziadgit/teeunit"
}
}