前言
由于公司用了minio做文档存储,所以最新学习了下rclone的使用,用来同步云存储的数据,以及为后续数据迁移做准备。
minio是基于s3协议的实现,在安装完rclone后,会看到我们用rclone配置连接minio时会选择s3协议。
安装环境是centos7
安装rclone
执行
curl https://rclone.org/install.sh | sudo bash
可能会报错
None of the supported tools for extracting zip archives (unzip 7z busybox) were found. Please install one of them and try again.
此时安装unzip
yum -y install unzip
此时安装完unzip后,再次执行安装rclone,根据个人网速,这个过程可能稍微长一些,耐心等待~
curl https://rclone.org/install.sh | sudo bash
出现如下提示,rclone安装成功
接下来,我们进行配置,来连接minio服务器。
配置连接
执行,
rclone config
输入n,创建一个新的远程连接,命名为minio.
此处是设置创建的远程名称,我们设置为minio.名称设置完成后,接下里会让设置存储类型。
选择序号4,选用s3协议。接下来,会让选择S3提供方。我们选择 minio,输入序号7
接下来开始录入access_key_id和secret_access_key
接着选择地区,如果不知道地区,可以不填,直接选择数字1,则可以,知道地址直接输入即可。
输入endpoint
下面这结果看自己情况填写,不设置值,敲回车默认为“”
到这一步基本上就配置的查不多了,会提示是否需要进一步配置,我们选择no,完成当前配置,该配置会保存到.config/rclone/rclone.conf配置文件中。
执行下面的命令,可以查看rclone的配置文件位置vim
rclone config file
命令
下面列出一些常用的命令
查询所有的桶(minio为配置的名称,由于配值了path,所以可以直接写:)
rclone lsd minio:
创建一个新的桶(bucket需要改成新创建的桶的名称)
rclone mkdir minio:bucket
将文件复制到该存储桶中
rclone copy /path/to/files minio:bucket
从该存储桶中复制文件
rclone copy minio:bucket /tmp/bucket-copy
列出bucket中的所有文件
rclone ls minio:bucket
将文件同步到该存储桶中 —dry-run首先尝试 (同步操作,会把本地的文件全部上传到指定的桶,桶中原来有的文件,会被删除,所以使用时一定要注意)
rclone --dry-run sync /path/to/files minio:bucket
然后真正同步
rclone sync /path/to/files minio:bucket
这是不是可以同步所有用s3协议的呀大佬,谢谢大佬
应该可以同步所有使用s3协议的