当前位置: 首页 > news >正文

Rclone同步Linux数据到google云盘

文章目录

  • Rclone管理云存储
    • Rclone安装和使用说明
      • 安装rclone
      • 配置rclone连接到云盘
      • 基本备份命令
      • 高级备份选项
      • 自动化备份
      • 加密备份(可选)
      • 恢复数据
      • 常见云存储服务名称
      • 注意事项
    • googleCloud 平台中操作
      • OAuth权限请求页面(OAuth同意屏幕)创建
      • Google drive api 客户ID创建(`需要先创建OAuth权限请求页面`)
    • Linux(Debian)系统备份代码到云盘操作
      • 安装Rclone
      • 配置`config`,创建远程连接
        • 创建一个遥控节点,并命名回车
        • 配置客户ID 和秘钥
        • 选择启动权限范围,选择1
        • 其他参数配置
        • 黑窗口回车后,会自动启动浏览器打开网页授权
        • 填写token
      • 测试推送备份
        • 同步传输到云盘
        • 新增附件`newfile.txt`,同步成功
        • 根据后续需求,定制定时同步方案

Rclone管理云存储

Rclone(Remote Clone)是一款开源的命令行工具,用于管理云存储和本地文件系统之间的文件同步、传输和加密。它支持超过 70 种存储服务(如 Google Drive、Dropbox、Amazon S3、OneDrive、Backblaze B2 等),并提供了类似 Unix 命令(如 cp、mv、ls)的操作方式,适合自动化备份、数据迁移和远程文件管理。
资源

  • 官网:https://rclone.org

  • 文档:https://rclone.org/docs/

  • GitHub:https://github.com/rclone/rclonek

Rclone安装和使用说明

安装rclone

在大多数Linux发行版上安装rclone:

# 使用curl安装(通用方法)
curl https://rclone.org/install.sh | sudo bash

# 或者使用包管理器
# Debian/Ubuntu
sudo apt install rclone

# CentOS/RHEL
sudo yum install rclone

配置rclone连接到云盘

运行配置命令:

rclone config

按照提示选择云存储类型(如Google Drive、OneDrive、Dropbox等),然后按照授权流程完成设置。

基本备份命令

  • 简单复制
rclone copy /本地/目录 远程名称:远程路径
  • 同步(保持两边一致)
rclone sync /本地/目录 远程名称:远程路径
  • 带进度显示的复制
rclone copy -P /本地/目录 远程名称:远程路径

高级备份选项

  • 增量备份(只复制更改的文件)
rclone copy --update /本地/目录 远程名称:远程路径
  • 排除特定文件或目录
rclone copy --exclude "*.tmp" --exclude "/cache/**" /本地/目录 远程名称:远程路径
  • 设置带宽限制
rclone copy --bwlimit 1M /本地/目录 远程名称:远程路径

自动化备份

创建cron任务实现定期备份

  • 编辑crontab:
crontab -e
  • 添加类似如下内容(每天凌晨3点执行备份):
0 3 * * * /usr/bin/rclone sync /重要数据 远程名称:备份路径 >> /var/log/rclone.log 2>&1

加密备份(可选)

如果你需要加密云端的备份数据:

rclone config

选择"crypt"类型,然后配置加密选项。

恢复数据

从云盘恢复数据到本地:

rclone copy 远程名称:远程路径 /本地/恢复目录

常见云存储服务名称

在rclone配置中,常用云服务的名称如下:

  • Google Drive: “drive”

  • Dropbox: “dropbox”

  • Microsoft OneDrive: “onedrive”

  • Amazon S3: “s3”

  • Alibaba Cloud OSS: “oss”

  • 腾讯云COS: “cos”

注意事项

  • 首次同步大量数据可能需要较长时间

  • 使用sync命令要小心,它会删除云盘上不存在于本地的文件

  • 对于关键数据,建议先在小规模数据上测试

  • 注意云服务商的API调用限制

通过以上步骤,你可以有效地将Linux服务器上的数据备份到各种云存储服务中。

googleCloud 平台中操作

OAuth权限请求页面(OAuth同意屏幕)创建

  • 选项API和服务 => 二级菜单OAuth权限请求页面
    在这里插入图片描述
  • 第一次进入显示页面如下,点击开始进行创建
    在这里插入图片描述
    在这里插入图片描述
  • 创建完成如下
    在这里插入图片描述

Google drive api 客户ID创建(需要先创建OAuth权限请求页面

点击菜单 => API和服务 => +启用API和服務 => 搜索google drive api选中

  • 选项API和服务器菜单,进入
    在这里插入图片描述

  • +启用API和服务器
    在这里插入图片描述

  • 进入到 API 库进行搜寻选择
    在这里插入图片描述

  • 选中Google Drive API
    在这里插入图片描述

  • 点击启用
    在这里插入图片描述

  • 进入页面后,选择凭据 => +创建凭据 => Oauth客户端凭据
    在这里插入图片描述
    在这里插入图片描述

  • 创建成功,客户端ID 和秘钥用作交互验证使用

在这里插入图片描述

Linux(Debian)系统备份代码到云盘操作

安装Rclone

curl https://rclone.org/install.sh | sudo bash
  • 出现一下提醒说明已经安装成功

在这里插入图片描述

  • 在新的系统中安装时,提醒无相关解压工具,需要提取安装
sudo apt install unzip

在这里插入图片描述

配置config,创建远程连接

rclone config
创建一个遥控节点,并命名回车

在这里插入图片描述

  • 命名回车后,会列出rclone支持的存储类型选择,输入对应的类型前面的数字编号,这个数字可能不同版本不一样,本次选择的是20 Goole Drive

在这里插入图片描述

配置客户ID 和秘钥

在这里插入图片描述

选择启动权限范围,选择1

在这里插入图片描述

其他参数配置
  • 选择service_account_file。
    直接按回车
  • 编辑高级配置?
    输入n
  • 使用web浏览器自动验证rclone与remote?
    输入n

到这一步,需要借助window来进行授权操作
在这里插入图片描述

  • 下载window版本rclone,解压下载包,进入解压目录,在地址栏中出入cmd启动黑窗口,拷贝返回的命令回车
    在这里插入图片描述
黑窗口回车后,会自动启动浏览器打开网页授权
  • 选择申请对应的google账号

在这里插入图片描述

  • 显示已封锁存储权限
    在这里插入图片描述

  • 出现上面的页面,需要把当前账号加入测试名单
    在这里插入图片描述
    在这里插入图片描述

  • 重复上面动动作,选择对应账号 一直下一步
    在这里插入图片描述

  • 出现这个页面,表明已经授权成功。在黑窗口中拿到授权的token
    在这里插入图片描述

填写token
  • 在windows浏览器中授权完成后,CMD黑窗口中会获取到token,拷贝粘贴到输入位置
  • 询问是否为共享盘(团队盘),个人的不是,输入n回车
  • 最后一步选择y回车,完成操作,q退出

在这里插入图片描述

测试推送备份

同步传输到云盘
rclone sync ./testdir/ gg-drive:LinuxDocs

在这里插入图片描述

  • google云盘中可以看到对应的数据

在这里插入图片描述

新增附件newfile.txt,同步成功

在这里插入图片描述

在这里插入图片描述

根据后续需求,定制定时同步方案
http://www.dtcms.com/a/106864.html

相关文章:

  • 【SQL】MySQL进阶3:Innodb引擎结构,事务与ACID的实现
  • Apifox Helper 与 Swagger3 区别
  • 一个服务器算分布式吗,分布式需要几个服务器
  • 电子企业MES管理系统智能排产与动态调度优化
  • 化工网平台API接口开发实战:从接入到数据解析‌
  • 递归(实践版)
  • 阿里云AI Studio 2.0:拖拽搭建企业级智能客服系统
  • 信息学奥赛一本通 1611:仓库建设 | 洛谷 P2120 [ZJOI2007] 仓库建设
  • Cribl 创建路线Route
  • dubbo RPC协议
  • Unity Standard Shader 解析(二)之ForwardAdd(标准版)
  • <贪心算法>
  • 第四章、Isaacsim在GUI中构建机器人(3):添加摄像头和传感器
  • Java语言如何用AI实现文件报告的自动质检?
  • Vue3编译器深度解析:从模板编译到极致性能优化
  • 【NLP 面经 5】
  • 通过ansible+docker-compose快速安装一主两从redis+三sentinel
  • 获取最新浏览器驱动,并自动安装适配浏览器
  • 使用 Amazon Lightsail 启动并配置 WordPress 实例教程
  • LRU缓存是什么
  • DataFrame基础(不包含列删除及行相关操作)
  • error LNK2019: 无法解析的外部符号 __imp__XXXX,该符号在函数xxxxx中被引用
  • 45、Vue 中的动态组件
  • 深入理解多线程编程:从基础概念到实战应用
  • 【C++】类和对象(二)
  • 第三章 知识图谱赋能 RAG:构建结构化知识引擎
  • CoT-VLA:视觉-语言-动作模型的视觉思维链推理
  • 软件工程面试题(二十三)
  • Web服务器主动推送技术(SSE)
  • MongoDB 复制集实战