36 lines
1.0 KiB
Python
36 lines
1.0 KiB
Python
# -*- coding: utf-8 -*-
|
|
"""手动/定时把本地 数据.jsonl 备份到 COS(文件名带机器号+日期)。
|
|
|
|
常驻 worker(run_worker.py)内部已有每天10点自动备份线程; 本脚本用于:
|
|
- 不跑常驻 worker、想用系统 crontab 定时备份的场景;
|
|
- 想立刻手动备份一次。
|
|
|
|
crontab 例(每天10点):
|
|
0 10 * * * cd /项目根 && python3 tools/upload_daily.py >> log/upload_daily.log 2>&1
|
|
"""
|
|
import os
|
|
import sys
|
|
|
|
sys.path.insert(0, os.path.dirname(os.path.dirname(os.path.abspath(__file__))))
|
|
from tool import job_cos # noqa: E402
|
|
|
|
JSONL = "数据.jsonl"
|
|
|
|
|
|
def main():
|
|
mid = job_cos.get_machine_id()
|
|
dst = job_cos.upload_daily_backup(JSONL, mid)
|
|
if dst:
|
|
print(f"✓ 数据.jsonl 已上传 -> {dst}")
|
|
else:
|
|
print(f"✗ 本地无 {JSONL}, 未上传")
|
|
ll = job_cos.upload_longlist_backup(mid)
|
|
if ll:
|
|
print(f"✓ 超长待重跑列表已上传 -> {ll}")
|
|
else:
|
|
print("✗ 本地无超长待重跑列表, 未上传")
|
|
|
|
|
|
if __name__ == "__main__":
|
|
main()
|