update deleteAll

deleteAll.py

@@ -1,29 +1,25 @@
-from datasets import DatasetDict, Dataset
-from dotenv import load_dotenv
-import os
 from huggingface_hub import HfApi
+import shutil, os
+from dotenv import load_dotenv
 
 load_dotenv()
-
 HF_DATA_REPO_ID = os.getenv("HF_DATA_REPO_ID")
 HF_DATA_TOKEN = os.getenv("HF_DATA_TOKEN")
+
 api = HfApi()
 
-# 1️⃣ repo 내 전체 파일 리스트 가져오기
+# 1️⃣ 모든 파일 삭제
 files = api.list_repo_files(repo_id=HF_DATA_REPO_ID, repo_type="dataset", token=HF_DATA_TOKEN)
-
-print(f"📂 삭제 대상 파일 {len(files)}개:")
-for f in files:
-    print("-", f)
-
-# 2️⃣ 전체 파일 삭제
 for path in files:
-    api.delete_file(
-        path_in_repo=path,
-        repo_id=HF_DATA_REPO_ID,
-        repo_type="dataset",
-        token=HF_DATA_TOKEN
-    )
-    print(f"🗑️ {path} 삭제 완료")
+    api.delete_file(path_in_repo=path, repo_id=HF_DATA_REPO_ID, repo_type="dataset", token=HF_DATA_TOKEN)
+print("🗑️ repo 내부 파일 모두 삭제 완료")
+
+# 2️⃣ 캐시 삭제
+cache_dir = os.path.expanduser("~/.cache/huggingface/datasets")
+if os.path.exists(cache_dir):
+    shutil.rmtree(cache_dir)
+print("🧹 로컬 캐시 초기화 완료")
 
-print("✅ 허깅페이스 Hub의 /data 포함 모든 파일 삭제 완료")
+# 3️⃣ repo 메타데이터 초기화
+api.create_repo(HF_DATA_REPO_ID, repo_type="dataset", token=HF_DATA_TOKEN, exist_ok=True, private=True)
+print("✅ dataset repo metadata 재설정 완료 (빈 상태)")

test_api.sh

@@ -37,29 +37,51 @@ curl -X POST "$BASE_URL/upload_state" \
 echo ""
 echo ""
 
-# 3. Dataset 업로드
-# echo "3️⃣ Dataset 업로드"
-# echo "--------------------------------------"
-# curl -X POST "$BASE_URL/upload_dataset" \
-#   -H "Content-Type: application/json" \
-#   -H "accept: application/json" \
-#   -d '{
-#     "user_id": "test_user_001",
-#     "rms": 0.42,
-#     "freq": 45.3,
-#     "fatigue": 0.25,
-#     "timestamp": "2024-01-15T10:30:00Z"
-#   }' | jq .
-# echo ""
-# echo ""
+# 3. 로그 데이터 업로드 (새로운 개별 API)
+echo "3️⃣ 로그 데이터 업로드"
+echo "--------------------------------------"
+curl -X POST "$BASE_URL/upload_logs" \
+  -H "Content-Type: application/json" \
+  -H "accept: application/json" \
+  -d '{
+    "user_id": "test_user_001",
+    "session_id": "session_123",
+    "measure_date": "2025-10-24",
+    "rms": 0.42,
+    "freq": 45.3,
+    "fatigue": 0.25,
+    "rms_base": 0.40,
+    "freq_base": 44.8,
+    "user_emb": [0.2, 0.05, 45.1, 0.7, 0.8, 0.03, 0.12, 0.0015, 0.4, 0.75, 0.9, 0.85],
+    "mode": "training",
+    "window_count": 5,
+    "measurement_count": 1
+  }' | jq .
+echo ""
+echo ""
 
-# 4. 사용자 Dataset 조회
-# echo "4️⃣ 사용자 Dataset 조회"
-# echo "--------------------------------------"
-# curl -X GET "$BASE_URL/user_dataset/test_user_001" \
-#   -H "accept: application/json" | jq .
-# echo ""
-# echo ""
+# 4. 추가 로그 데이터 업로드
+echo "4️⃣ 추가 로그 데이터 업로드"
+echo "--------------------------------------"
+curl -X POST "$BASE_URL/upload_logs" \
+  -H "Content-Type: application/json" \
+  -H "accept: application/json" \
+  -d '{
+    "user_id": "test_user_001",
+    "session_id": "session_124",
+    "measure_date": "2025-10-24",
+    "rms": 0.38,
+    "freq": 46.1,
+    "fatigue": 0.32,
+    "rms_base": 0.40,
+    "freq_base": 44.8,
+    "user_emb": [0.22, 0.06, 45.5, 0.72, 0.82, 0.035, 0.13, 0.0018, 0.42, 0.77, 0.92, 0.87],
+    "mode": "testing",
+    "window_count": 7,
+    "measurement_count": 1
+  }' | jq .
+echo ""
+echo ""
 
 echo "======================================"
 echo "✅ 테스트 완료"