Auto logs epoch 1
Browse files- logs/cloud_orchestrator.log +8 -71
logs/cloud_orchestrator.log
CHANGED
|
@@ -1,71 +1,8 @@
|
|
| 1 |
-
[2026-06-27
|
| 2 |
-
[2026-06-27
|
| 3 |
-
[2026-06-27
|
| 4 |
-
[2026-06-27
|
| 5 |
-
[2026-06-27
|
| 6 |
-
[2026-06-27
|
| 7 |
-
[2026-06-27
|
| 8 |
-
[2026-06-27
|
| 9 |
-
[2026-06-27 20:16:25] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_001.pt bulutta guvende.
|
| 10 |
-
[2026-06-27 20:16:27] [Orchestrator] Epoch 2 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 11 |
-
[2026-06-27 20:16:27] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 12 |
-
[2026-06-27 20:16:31] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_002.pt bulutta guvende.
|
| 13 |
-
[2026-06-27 20:16:33] [Orchestrator] Epoch 3 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 14 |
-
[2026-06-27 20:16:33] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 15 |
-
[2026-06-27 20:16:38] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_003.pt bulutta guvende.
|
| 16 |
-
[2026-06-27 20:16:40] [Orchestrator] Epoch 4 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 17 |
-
[2026-06-27 20:16:40] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 18 |
-
[2026-06-27 20:16:45] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_004.pt bulutta guvende.
|
| 19 |
-
[2026-06-27 20:16:47] [Orchestrator] Epoch 5 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 20 |
-
[2026-06-27 20:16:47] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 21 |
-
[2026-06-27 20:16:52] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_005.pt bulutta guvende.
|
| 22 |
-
[2026-06-27 20:16:52] [Orchestrator] Orchestrator surumu: v1.1-auto-resume-model-repo
|
| 23 |
-
[2026-06-27 20:16:52] [Orchestrator] [Kesin] HF depo hazir: HayrettinIscan/MeshAI-Base-Models (model)
|
| 24 |
-
[2026-06-27 20:16:52] [Orchestrator] HayrettinIscan/MeshAI-Base-Models deposu kontrol ediliyor...
|
| 25 |
-
[2026-06-27 20:16:53] [Orchestrator] [Kesin] En guncel kayit bulundu: checkpoints/latest_model.pt. Buluttan indiriliyor...
|
| 26 |
-
[2026-06-27 20:16:54] [Orchestrator] [Kesin] Indirme tamamlandi. Egitim kalindigi yerden devam edecek.
|
| 27 |
-
[2026-06-27 20:16:54] [Orchestrator] [Kesin] Egitim motoru baslatiliyor: /usr/bin/python3 -u train_pipeline.py --epochs 15 --validation-every 500 --resume_from /content/MeshAI_Cloud/checkpoints/latest_model.pt
|
| 28 |
-
[2026-06-27 20:17:05] [Orchestrator] Epoch 1 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 29 |
-
[2026-06-27 20:17:05] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 30 |
-
[2026-06-27 20:17:09] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_001.pt bulutta guvende.
|
| 31 |
-
[2026-06-27 20:17:11] [Orchestrator] Epoch 2 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 32 |
-
[2026-06-27 20:17:11] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 33 |
-
[2026-06-27 20:17:16] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_002.pt bulutta guvende.
|
| 34 |
-
[2026-06-27 20:17:18] [Orchestrator] Epoch 3 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 35 |
-
[2026-06-27 20:17:18] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 36 |
-
[2026-06-27 20:17:23] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_003.pt bulutta guvende.
|
| 37 |
-
[2026-06-27 20:17:24] [Orchestrator] Epoch 4 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 38 |
-
[2026-06-27 20:17:24] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 39 |
-
[2026-06-27 20:17:31] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_004.pt bulutta guvende.
|
| 40 |
-
[2026-06-27 20:17:31] [Orchestrator] Epoch 5 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 41 |
-
[2026-06-27 20:17:31] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 42 |
-
[2026-06-27 20:17:36] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_005.pt bulutta guvende.
|
| 43 |
-
[2026-06-27 20:17:38] [Orchestrator] Epoch 6 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 44 |
-
[2026-06-27 20:17:38] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 45 |
-
[2026-06-27 20:17:42] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_006.pt bulutta guvende.
|
| 46 |
-
[2026-06-27 20:17:45] [Orchestrator] Epoch 7 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 47 |
-
[2026-06-27 20:17:45] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 48 |
-
[2026-06-27 20:17:49] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_007.pt bulutta guvende.
|
| 49 |
-
[2026-06-27 20:17:52] [Orchestrator] Epoch 8 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 50 |
-
[2026-06-27 20:17:52] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 51 |
-
[2026-06-27 20:17:57] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_008.pt bulutta guvende.
|
| 52 |
-
[2026-06-27 20:17:59] [Orchestrator] Epoch 9 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 53 |
-
[2026-06-27 20:17:59] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 54 |
-
[2026-06-27 20:18:04] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_009.pt bulutta guvende.
|
| 55 |
-
[2026-06-27 20:18:06] [Orchestrator] Epoch 10 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 56 |
-
[2026-06-27 20:18:06] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 57 |
-
[2026-06-27 20:18:10] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_010.pt bulutta guvende.
|
| 58 |
-
[2026-06-27 20:18:12] [Orchestrator] Epoch 11 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 59 |
-
[2026-06-27 20:18:12] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 60 |
-
[2026-06-27 20:18:17] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_011.pt bulutta guvende.
|
| 61 |
-
[2026-06-27 20:18:19] [Orchestrator] Epoch 12 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 62 |
-
[2026-06-27 20:18:19] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 63 |
-
[2026-06-27 20:18:23] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_012.pt bulutta guvende.
|
| 64 |
-
[2026-06-27 20:18:25] [Orchestrator] Epoch 13 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 65 |
-
[2026-06-27 20:18:25] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 66 |
-
[2026-06-27 20:18:30] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_013.pt bulutta guvende.
|
| 67 |
-
[2026-06-27 20:18:32] [Orchestrator] Epoch 14 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 68 |
-
[2026-06-27 20:18:32] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
| 69 |
-
[2026-06-27 20:18:37] [Orchestrator] [Kesin] YEDEKLEME BASARILI: latest_model.pt ve checkpoints/checkpoint_epoch_014.pt bulutta guvende.
|
| 70 |
-
[2026-06-27 20:18:38] [Orchestrator] Epoch 15 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 71 |
-
[2026-06-27 20:18:38] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
|
|
|
| 1 |
+
[2026-06-27 21:34:47] [Orchestrator] Orchestrator surumu: v1.1-auto-resume-model-repo
|
| 2 |
+
[2026-06-27 21:34:48] [Orchestrator] [Kesin] HF depo hazir: HayrettinIscan/MeshAI-Base-Models (model)
|
| 3 |
+
[2026-06-27 21:34:48] [Orchestrator] HayrettinIscan/MeshAI-Base-Models deposu kontrol ediliyor...
|
| 4 |
+
[2026-06-27 21:34:48] [Orchestrator] [Kesin] En guncel kayit bulundu: checkpoints/latest_model.pt. Buluttan indiriliyor...
|
| 5 |
+
[2026-06-27 21:34:49] [Orchestrator] [Kesin] Indirme tamamlandi. Egitim kalindigi yerden devam edecek.
|
| 6 |
+
[2026-06-27 21:34:49] [Orchestrator] [Kesin] Egitim motoru baslatiliyor: /usr/bin/python3 -u train_pipeline.py --epochs 5 --validation-every 500 --resume_from /content/MeshAI_Cloud/checkpoints/latest_model.pt
|
| 7 |
+
[2026-06-27 21:35:05] [Orchestrator] Epoch 1 sinyali yakalandi. Otomatik bulut yedeklemesi tetikleniyor...
|
| 8 |
+
[2026-06-27 21:35:05] [Orchestrator] [Muhtemel] latest_model.pt Hugging Face HayrettinIscan/MeshAI-Base-Models deposuna aktariliyor...
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|