Spaces:
Running
Running
Update sync_data.sh
Browse files- sync_data.sh +61 -35
sync_data.sh
CHANGED
|
@@ -6,6 +6,10 @@ if [ -z "$G_NAME" ] || [ -z "$G_TOKEN" ]; then
|
|
| 6 |
exit 1
|
| 7 |
fi
|
| 8 |
|
|
|
|
|
|
|
|
|
|
|
|
|
| 9 |
# 从 WebDAV 恢复配置的函数
|
| 10 |
restore_from_webdav() {
|
| 11 |
if [ -z "$WEBDAV_URL" ] || [ -z "$WEBDAV_USERNAME" ] || [ -z "$WEBDAV_PASSWORD" ]; then
|
|
@@ -20,7 +24,7 @@ restore_from_webdav() {
|
|
| 20 |
YESTERDAY_FILENAME="mcp_backup_$(date -d '1 day ago' +'%m_%d').tar.gz"
|
| 21 |
|
| 22 |
# 创建临时恢复目录
|
| 23 |
-
RESTORE_DIR="/
|
| 24 |
mkdir -p "$RESTORE_DIR"
|
| 25 |
|
| 26 |
# 尝试下载今天的备份,如果失败则尝试昨天的
|
|
@@ -49,25 +53,29 @@ restore_from_webdav() {
|
|
| 49 |
echo "解压缩备份文件成功"
|
| 50 |
|
| 51 |
# 恢复配置文件
|
| 52 |
-
if [ -d "config" ]; then
|
| 53 |
echo "恢复 config 目录..."
|
| 54 |
mkdir -p /mcp-proxy-server/config
|
| 55 |
cp -r config/* /mcp-proxy-server/config/
|
| 56 |
echo "config 目录恢复成功"
|
|
|
|
|
|
|
| 57 |
fi
|
| 58 |
|
| 59 |
-
if [ -d "tools" ]; then
|
| 60 |
echo "恢复 tools 目录..."
|
| 61 |
mkdir -p /tools
|
| 62 |
cp -r tools/* /tools/
|
| 63 |
echo "tools 目录恢复成功"
|
|
|
|
|
|
|
| 64 |
fi
|
| 65 |
|
| 66 |
echo "从 WebDAV 恢复配置文件完成"
|
| 67 |
} || {
|
| 68 |
echo "解压缩备份文件失败"
|
| 69 |
}
|
| 70 |
-
cd
|
| 71 |
fi
|
| 72 |
|
| 73 |
# 清理临时目录
|
|
@@ -80,11 +88,11 @@ IFS='/' read -r GITHUB_USER GITHUB_REPO <<< "$G_NAME"
|
|
| 80 |
|
| 81 |
# 构建 GitHub 仓库的克隆 URL,包含令牌
|
| 82 |
REPO_URL="https://${G_TOKEN}@github.com/${G_NAME}.git"
|
| 83 |
-
mkdir -p
|
| 84 |
|
| 85 |
# 克隆仓库
|
| 86 |
-
echo "
|
| 87 |
-
git clone "$REPO_URL"
|
| 88 |
echo "克隆失败,请检查 G_NAME 和 G_TOKEN 是否正确。"
|
| 89 |
exit 1
|
| 90 |
}
|
|
@@ -114,17 +122,28 @@ if [ "$RESTORE_SOURCE" = "webdav" ]; then
|
|
| 114 |
restore_from_webdav
|
| 115 |
elif [ "$RESTORE_SOURCE" = "github" ] || [ "$RESTORE_SOURCE" = "auto" ]; then
|
| 116 |
# 检查并恢复配置文件(从 GitHub)
|
| 117 |
-
if [ -d /
|
| 118 |
echo "从 GitHub 仓库中恢复配置文件..."
|
| 119 |
# 创建目标目录
|
| 120 |
mkdir -p /mcp-proxy-server/config
|
| 121 |
mkdir -p /tools
|
| 122 |
|
| 123 |
-
#
|
| 124 |
-
|
| 125 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 126 |
|
| 127 |
-
echo "从 GitHub
|
| 128 |
else
|
| 129 |
echo "GitHub 仓库中未找到 config 或 tools 目录"
|
| 130 |
if [ "$RESTORE_SOURCE" = "auto" ]; then
|
|
@@ -145,7 +164,7 @@ sync_data() {
|
|
| 145 |
# 1. 同步到 GitHub
|
| 146 |
echo "正在开始同步"
|
| 147 |
# 进入仓库目录
|
| 148 |
-
cd
|
| 149 |
# 配置 Git 用户信息
|
| 150 |
git config user.name "AutoSync Bot"
|
| 151 |
git config user.email "autosync@bot.com"
|
|
@@ -160,17 +179,18 @@ sync_data() {
|
|
| 160 |
mkdir -p ./config
|
| 161 |
mkdir -p ./tools
|
| 162 |
|
| 163 |
-
#
|
| 164 |
-
if [ -d "/mcp-proxy-server/config" ]; then
|
| 165 |
-
|
|
|
|
| 166 |
else
|
| 167 |
-
echo "/mcp-proxy-server/config
|
| 168 |
fi
|
| 169 |
|
| 170 |
-
if [ -d "/tools" ]; then
|
| 171 |
-
cp -r /tools/* ./tools/ 2>/dev/null || echo "tools
|
| 172 |
else
|
| 173 |
-
echo "/tools
|
| 174 |
fi
|
| 175 |
|
| 176 |
# 检查是否有变化
|
|
@@ -192,8 +212,7 @@ sync_data() {
|
|
| 192 |
}
|
| 193 |
}
|
| 194 |
# 返回上级目录
|
| 195 |
-
cd
|
| 196 |
-
cd ..
|
| 197 |
|
| 198 |
# 2. 同步到 WebDAV
|
| 199 |
if [ -z "$WEBDAV_URL" ] || [ -z "$WEBDAV_USERNAME" ] || [ -z "$WEBDAV_PASSWORD" ]; then
|
|
@@ -202,37 +221,45 @@ sync_data() {
|
|
| 202 |
echo "同步到 WebDAV..."
|
| 203 |
FILENAME="mcp_backup_$(date +'%m_%d').tar.gz"
|
| 204 |
|
| 205 |
-
#
|
| 206 |
-
TEMP_DIR="/
|
|
|
|
| 207 |
mkdir -p "$TEMP_DIR"
|
| 208 |
|
| 209 |
# 复制要备份的目录到临时目录
|
| 210 |
-
|
| 211 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
| 212 |
fi
|
| 213 |
-
|
| 214 |
-
|
|
|
|
|
|
|
|
|
|
| 215 |
fi
|
| 216 |
|
| 217 |
# 创建压缩包
|
| 218 |
-
if [ "$(ls -A $TEMP_DIR)" ]; then
|
| 219 |
cd "$TEMP_DIR"
|
| 220 |
tar -czf "../$FILENAME" .
|
| 221 |
-
cd
|
| 222 |
|
| 223 |
# 使用 curl 进行文件上传
|
| 224 |
-
curl -T "
|
| 225 |
echo "WebDAV 上传成功"
|
| 226 |
} || {
|
| 227 |
echo "WebDAV 上传失败,等待重试..."
|
| 228 |
sleep 10
|
| 229 |
-
curl -T "
|
| 230 |
echo "重试失败,放弃webdav上传。"
|
| 231 |
}
|
| 232 |
}
|
| 233 |
|
| 234 |
# 清理临时文件
|
| 235 |
-
rm -f "
|
| 236 |
else
|
| 237 |
echo "没有找到要备份的文件,跳过 WebDAV 同步"
|
| 238 |
fi
|
|
@@ -243,8 +270,7 @@ sync_data() {
|
|
| 243 |
|
| 244 |
else
|
| 245 |
# 返回上级目录
|
| 246 |
-
cd
|
| 247 |
-
cd ..
|
| 248 |
echo "GitHub: 没有检测到配置文件变化"
|
| 249 |
fi
|
| 250 |
# 3. 等待统一的时间间隔
|
|
|
|
| 6 |
exit 1
|
| 7 |
fi
|
| 8 |
|
| 9 |
+
# 使用独立的工作目录,避免与配置目录冲突
|
| 10 |
+
WORK_DIR="/tmp/mcp_sync_work"
|
| 11 |
+
GITHUB_DATA_DIR="$WORK_DIR/github_data"
|
| 12 |
+
|
| 13 |
# 从 WebDAV 恢复配置的函数
|
| 14 |
restore_from_webdav() {
|
| 15 |
if [ -z "$WEBDAV_URL" ] || [ -z "$WEBDAV_USERNAME" ] || [ -z "$WEBDAV_PASSWORD" ]; then
|
|
|
|
| 24 |
YESTERDAY_FILENAME="mcp_backup_$(date -d '1 day ago' +'%m_%d').tar.gz"
|
| 25 |
|
| 26 |
# 创建临时恢复目录
|
| 27 |
+
RESTORE_DIR="$WORK_DIR/webdav_restore"
|
| 28 |
mkdir -p "$RESTORE_DIR"
|
| 29 |
|
| 30 |
# 尝试下载今天的备份,如果失败则尝试昨天的
|
|
|
|
| 53 |
echo "解压缩备份文件成功"
|
| 54 |
|
| 55 |
# 恢复配置文件
|
| 56 |
+
if [ -d "config" ] && [ "$(ls -A config 2>/dev/null)" ]; then
|
| 57 |
echo "恢复 config 目录..."
|
| 58 |
mkdir -p /mcp-proxy-server/config
|
| 59 |
cp -r config/* /mcp-proxy-server/config/
|
| 60 |
echo "config 目录恢复成功"
|
| 61 |
+
else
|
| 62 |
+
echo "备份中没有 config 目录或目录为空"
|
| 63 |
fi
|
| 64 |
|
| 65 |
+
if [ -d "tools" ] && [ "$(ls -A tools 2>/dev/null)" ]; then
|
| 66 |
echo "恢复 tools 目录..."
|
| 67 |
mkdir -p /tools
|
| 68 |
cp -r tools/* /tools/
|
| 69 |
echo "tools 目录恢复成功"
|
| 70 |
+
else
|
| 71 |
+
echo "备份中没有 tools 目录或目录为空"
|
| 72 |
fi
|
| 73 |
|
| 74 |
echo "从 WebDAV 恢复配置文件完成"
|
| 75 |
} || {
|
| 76 |
echo "解压缩备份文件失败"
|
| 77 |
}
|
| 78 |
+
cd - > /dev/null
|
| 79 |
fi
|
| 80 |
|
| 81 |
# 清理临时目录
|
|
|
|
| 88 |
|
| 89 |
# 构建 GitHub 仓库的克隆 URL,包含令牌
|
| 90 |
REPO_URL="https://${G_TOKEN}@github.com/${G_NAME}.git"
|
| 91 |
+
mkdir -p "$GITHUB_DATA_DIR"
|
| 92 |
|
| 93 |
# 克隆仓库
|
| 94 |
+
echo "正在克隆仓库到 $GITHUB_DATA_DIR ……"
|
| 95 |
+
git clone "$REPO_URL" "$GITHUB_DATA_DIR" || {
|
| 96 |
echo "克隆失败,请检查 G_NAME 和 G_TOKEN 是否正确。"
|
| 97 |
exit 1
|
| 98 |
}
|
|
|
|
| 122 |
restore_from_webdav
|
| 123 |
elif [ "$RESTORE_SOURCE" = "github" ] || [ "$RESTORE_SOURCE" = "auto" ]; then
|
| 124 |
# 检查并恢复配置文件(从 GitHub)
|
| 125 |
+
if [ -d "$GITHUB_DATA_DIR/config" ] && [ -d "$GITHUB_DATA_DIR/tools" ]; then
|
| 126 |
echo "从 GitHub 仓库中恢复配置文件..."
|
| 127 |
# 创建目标目录
|
| 128 |
mkdir -p /mcp-proxy-server/config
|
| 129 |
mkdir -p /tools
|
| 130 |
|
| 131 |
+
# 复制配置文件(检查是否为空)
|
| 132 |
+
if [ "$(ls -A $GITHUB_DATA_DIR/config 2>/dev/null)" ]; then
|
| 133 |
+
cp -r "$GITHUB_DATA_DIR/config"/* /mcp-proxy-server/config/
|
| 134 |
+
echo "config 目录恢复成功"
|
| 135 |
+
else
|
| 136 |
+
echo "GitHub 仓库中的 config 目录为空"
|
| 137 |
+
fi
|
| 138 |
+
|
| 139 |
+
if [ "$(ls -A $GITHUB_DATA_DIR/tools 2>/dev/null)" ]; then
|
| 140 |
+
cp -r "$GITHUB_DATA_DIR/tools"/* /tools/
|
| 141 |
+
echo "tools 目录恢复成功"
|
| 142 |
+
else
|
| 143 |
+
echo "GitHub 仓库中的 tools 目录为空"
|
| 144 |
+
fi
|
| 145 |
|
| 146 |
+
echo "从 GitHub 仓库中拉取配置文件完成"
|
| 147 |
else
|
| 148 |
echo "GitHub 仓库中未找到 config 或 tools 目录"
|
| 149 |
if [ "$RESTORE_SOURCE" = "auto" ]; then
|
|
|
|
| 164 |
# 1. 同步到 GitHub
|
| 165 |
echo "正在开始同步"
|
| 166 |
# 进入仓库目录
|
| 167 |
+
cd "$GITHUB_DATA_DIR"
|
| 168 |
# 配置 Git 用户信息
|
| 169 |
git config user.name "AutoSync Bot"
|
| 170 |
git config user.email "autosync@bot.com"
|
|
|
|
| 179 |
mkdir -p ./config
|
| 180 |
mkdir -p ./tools
|
| 181 |
|
| 182 |
+
# 复制配置文件(如果存在且非空)
|
| 183 |
+
if [ -d "/mcp-proxy-server/config" ] && [ "$(ls -A /mcp-proxy-server/config 2>/dev/null | grep -v github_data)" ]; then
|
| 184 |
+
# 排除 github_data 目录,避免嵌套
|
| 185 |
+
rsync -av --exclude='github_data' --exclude='temp_backup' --exclude='webdav_restore' /mcp-proxy-server/config/ ./config/ 2>/dev/null && echo "config 目录同步成功" || echo "config 目录同步失败"
|
| 186 |
else
|
| 187 |
+
echo "/mcp-proxy-server/config 目录不存在或为空"
|
| 188 |
fi
|
| 189 |
|
| 190 |
+
if [ -d "/tools" ] && [ "$(ls -A /tools 2>/dev/null)" ]; then
|
| 191 |
+
cp -r /tools/* ./tools/ 2>/dev/null && echo "tools 目录同步成功" || echo "tools 目录同步失败"
|
| 192 |
else
|
| 193 |
+
echo "/tools 目录不存在或为空"
|
| 194 |
fi
|
| 195 |
|
| 196 |
# 检查是否有变化
|
|
|
|
| 212 |
}
|
| 213 |
}
|
| 214 |
# 返回上级目录
|
| 215 |
+
cd - > /dev/null
|
|
|
|
| 216 |
|
| 217 |
# 2. 同步到 WebDAV
|
| 218 |
if [ -z "$WEBDAV_URL" ] || [ -z "$WEBDAV_USERNAME" ] || [ -z "$WEBDAV_PASSWORD" ]; then
|
|
|
|
| 221 |
echo "同步到 WebDAV..."
|
| 222 |
FILENAME="mcp_backup_$(date +'%m_%d').tar.gz"
|
| 223 |
|
| 224 |
+
# 创建临时备份压缩包(使用独立目录)
|
| 225 |
+
TEMP_DIR="$WORK_DIR/temp_backup"
|
| 226 |
+
rm -rf "$TEMP_DIR" # 清理之前的临时目录
|
| 227 |
mkdir -p "$TEMP_DIR"
|
| 228 |
|
| 229 |
# 复制要备份的目录到临时目录
|
| 230 |
+
BACKUP_CREATED=0
|
| 231 |
+
|
| 232 |
+
if [ -d "/mcp-proxy-server/config" ] && [ "$(ls -A /mcp-proxy-server/config 2>/dev/null | grep -v github_data | grep -v temp_backup | grep -v webdav_restore)" ]; then
|
| 233 |
+
echo "备份 config 目录..."
|
| 234 |
+
mkdir -p "$TEMP_DIR/config"
|
| 235 |
+
rsync -av --exclude='github_data' --exclude='temp_backup' --exclude='webdav_restore' /mcp-proxy-server/config/ "$TEMP_DIR/config/" 2>/dev/null && BACKUP_CREATED=1
|
| 236 |
fi
|
| 237 |
+
|
| 238 |
+
if [ -d "/tools" ] && [ "$(ls -A /tools 2>/dev/null)" ]; then
|
| 239 |
+
echo "备份 tools 目录..."
|
| 240 |
+
mkdir -p "$TEMP_DIR/tools"
|
| 241 |
+
cp -r /tools/* "$TEMP_DIR/tools/" 2>/dev/null && BACKUP_CREATED=1
|
| 242 |
fi
|
| 243 |
|
| 244 |
# 创建压缩包
|
| 245 |
+
if [ "$BACKUP_CREATED" = "1" ] && [ "$(ls -A $TEMP_DIR)" ]; then
|
| 246 |
cd "$TEMP_DIR"
|
| 247 |
tar -czf "../$FILENAME" .
|
| 248 |
+
cd - > /dev/null
|
| 249 |
|
| 250 |
# 使用 curl 进行文件上传
|
| 251 |
+
curl -T "$WORK_DIR/$FILENAME" --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/$FILENAME" && {
|
| 252 |
echo "WebDAV 上传成功"
|
| 253 |
} || {
|
| 254 |
echo "WebDAV 上传失败,等待重试..."
|
| 255 |
sleep 10
|
| 256 |
+
curl -T "$WORK_DIR/$FILENAME" --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/$FILENAME" || {
|
| 257 |
echo "重试失败,放弃webdav上传。"
|
| 258 |
}
|
| 259 |
}
|
| 260 |
|
| 261 |
# 清理临时文件
|
| 262 |
+
rm -f "$WORK_DIR/$FILENAME"
|
| 263 |
else
|
| 264 |
echo "没有找到要备份的文件,跳过 WebDAV 同步"
|
| 265 |
fi
|
|
|
|
| 270 |
|
| 271 |
else
|
| 272 |
# 返回上级目录
|
| 273 |
+
cd - > /dev/null
|
|
|
|
| 274 |
echo "GitHub: 没有检测到配置文件变化"
|
| 275 |
fi
|
| 276 |
# 3. 等待统一的时间间隔
|