| { |
| "task": "handler", |
| "best_epoch": 5, |
| "training_seconds": 304.73208945803344, |
| "split_sizes": { |
| "train": 2400, |
| "validation": 300, |
| "test": 300 |
| }, |
| "validation": { |
| "loss": 0.5876449354489645, |
| "accuracy": 0.8466666666666667, |
| "macro_f1": 0.8471922277069336 |
| }, |
| "test": { |
| "loss": 0.6294241340955099, |
| "accuracy": 0.8166666666666667, |
| "macro_f1": 0.816800011054457 |
| }, |
| "test_confusions": [ |
| { |
| "gold": "human", |
| "predicted": "llm", |
| "count": 18 |
| }, |
| { |
| "gold": "llm", |
| "predicted": "auto", |
| "count": 15 |
| }, |
| { |
| "gold": "llm", |
| "predicted": "human", |
| "count": 10 |
| }, |
| { |
| "gold": "auto", |
| "predicted": "llm", |
| "count": 5 |
| }, |
| { |
| "gold": "auto", |
| "predicted": "human", |
| "count": 5 |
| }, |
| { |
| "gold": "human", |
| "predicted": "auto", |
| "count": 2 |
| } |
| ], |
| "history": [ |
| { |
| "epoch": 1, |
| "train_loss": 0.9450590944290161, |
| "validation_loss": 0.640375197728475, |
| "validation_accuracy": 0.7833333333333333, |
| "validation_macro_f1": 0.7873895322407908 |
| }, |
| { |
| "epoch": 2, |
| "train_loss": 0.3881728690862656, |
| "validation_loss": 0.5689977049827576, |
| "validation_accuracy": 0.8366666666666667, |
| "validation_macro_f1": 0.8295788111791534 |
| }, |
| { |
| "epoch": 3, |
| "train_loss": 0.18638452569643657, |
| "validation_loss": 0.6046478613217672, |
| "validation_accuracy": 0.8033333333333333, |
| "validation_macro_f1": 0.8073069144063059 |
| }, |
| { |
| "epoch": 4, |
| "train_loss": 0.17458565334479015, |
| "validation_loss": 0.5988235028584799, |
| "validation_accuracy": 0.8333333333333334, |
| "validation_macro_f1": 0.8331806628375255 |
| }, |
| { |
| "epoch": 5, |
| "train_loss": 0.17275874733924865, |
| "validation_loss": 0.5876449354489645, |
| "validation_accuracy": 0.8466666666666667, |
| "validation_macro_f1": 0.8471922277069336 |
| }, |
| { |
| "epoch": 6, |
| "train_loss": 0.17210762143135072, |
| "validation_loss": 0.5890995128949483, |
| "validation_accuracy": 0.84, |
| "validation_macro_f1": 0.839868859643578 |
| }, |
| { |
| "epoch": 7, |
| "train_loss": 0.17215188225110373, |
| "validation_loss": 0.5889288687705994, |
| "validation_accuracy": 0.84, |
| "validation_macro_f1": 0.8401046298542054 |
| }, |
| { |
| "epoch": 8, |
| "train_loss": 0.1719669226805369, |
| "validation_loss": 0.5910564653078715, |
| "validation_accuracy": 0.8366666666666667, |
| "validation_macro_f1": 0.8366387893269615 |
| } |
| ] |
| } |
|
|
