阿里云oss数据迁移到腾讯云cos&nbs…
来源:互联网 发布:淘宝流量怎么提高 编辑:程序博客网 时间:2024/06/03 10:34
迁移工具使用方法
迁移工具支持将S3,OSS, Qiniu,文件列表等文件迁移到COS对象存储。工具只支持在linux/macos下运行,系统自带的Python版本在2.6以上。
系统依赖
工具运行平台为*nix,需要有Python2.7及以上环境,同时机器应该安装pip,gcc与python-dev。您可以使用系统自带的包管理器安装相关依赖。
在centos上,使用如下命令安装:
1
sudo
在ubuntu/debian上,使用如下命令安装:
sudo
安装方法
推荐使用pip安装,安装pip的方法,可以参考官网或者使用apt/yum等包管理工具安装python-pip包。
执行完上述命令后,可以尝试使用如下命令检测是否安装成功。
cos_migrate_tool
卸载方法
执行如下命令:
pip
使用方法
在安装成功后,系统会有一个可执行命令
配置文件自行编写,模版参考下章内容。在配置文件中,需要配置一个工作目录,之后迁移过程中产生的临时文件都在放置在该目录,请保证目录空间足够大,如果并行执行多个迁移任务,推荐使用不同的目录。
在迁移过程中,你可以查看你设定的工作目录下面的fail_file.txt来查看迁移失败的文件列表。
云服务器、云数据库方案、网络安全防护优选
配置文件
配置文件模板,common 部分配置基本配置,workspace是上述的工作目录。source部分配置数据源的信息,如果你想迁移oss到cos,该部分就是配置oss的属性。destination部分配置cos属性。
!! 配置文件请删除注释文字,即
[common]
workspace=/tmp/tmp6
type=oss
accesskeyid=
accesskeysecret=
bucket=
endpoint=
[destination]
type=cosv4
region=shanghai
accesskeyid=
appid=
accesskeysecret=
bucket=sdktest
迁移OSS
[common]
workspace=/tmp/tmp6
[source]
type=oss
accesskeyid=
accesskeysecret=
bucket=
endpoint=
[destination]
type=cosv4
region=shanghai
accesskeyid=
appid=
accesskeysecret=
bucket=sdktest
prefix_dir=/dir21/
迁移qiniu
[common]
workspace=/tmp/tmp11
[source]
type=qiniu
accesskeyid=
accesskeysecret=
bucket=
domain_url=
prefix=dir1
[destination]
type=cosv4
region=shanghai
accesskeyid=
appid=
accesskeysecret=
bucket=sdktest
prefix_dir=/dir21/
overwrite=true
迁移S3
[common]
workspace=/tmp/tmp21
[source]
type=s3
accesskeyid=
accesskeysecret=
bucket=
prefix=dir1
[destination]
type=cosv4
region=shanghai
accesskeyid=
appid=
accesskeysecret=
bucket=
迁移列表文件
[common]
workspace=
[source]
type=url
url_list_file=/tmp/urllist.txt
timeout=3
[destination]
type=cosv4
region=
accesskeyid=
appid=
accesskeysecret=
bucket=
迁移COSv3
[common]
workspace=
[source]
type=cosv3
accesskeyid=
appid=
accesskeysecret=
bucket=
[destination]
type=cosv4
region=
accesskeyid=
appid=
accesskeysecret=
bucket=
COS v3 迁移到COSv4
[common]
workspace=
[source]
type=cosv3
accesskeyid=
appid=
accesskeysecret=
bucket=
[destination]
type=cosv4
region=
accesskeyid=
appid=
accesskeysecret=
bucket=
COS v4 迁移到COSv4
[common]
workspace=
[source]
type=cosv4
accesskeyid=
region=
appid=
accesskeysecret=
bucket=
prefix_dir=/foo
[destination]
type=cosv4
region=
accesskeyid=
appid=
accesskeysecret=
bucket=
常见错误与解决办法
1.
2.
3.
4.
5.
云服务器、云数据库方案、网络安全防护优选
本技术文转自 “蓝叶子_架构” 博客http://dellinger.blog.51cto.com/12445009/1971596
- 阿里云oss数据迁移到腾讯云cos&nbs…
- 阿里云oss迁移到腾讯云cos使用工具…
- 腾讯云,阿里云 MySQL数据迁移到数据盘
- 对象存储服务OSS使用案例之腾讯COS、七牛云存储、阿里OSS
- 对象存储服务OSS使用案例之腾讯COS、七牛云存储、阿里OSS
- java 上传文件到oss(阿里云)
- 上传文件到阿里云OSS
- springboot上传文件到阿里云OSS
- 静态网站迁移至阿里云OSS的实战过程
- 阿里云OSS开发
- 阿里云OSS使用方法
- 测试阿里云OSS
- 阿里云 OSS+CDN
- 阿里云oss
- 阿里云OSS
- 阿里云oss
- 阿里云OSS配置
- 阿里云OSS术语
- 关于原生js和JQuery的小记
- 3、node之pm2搭建node生产环境
- 阿里云oss迁移到腾讯云cos使用工具…
- Day04_Java_作业
- RecycleView 瀑布流中加载更多遇到的问题
- 阿里云oss数据迁移到腾讯云cos&nbs…
- linux配置bond双网卡绑定
- [资源发布] python实战视频(…
- hdu 4801 Pocket Cube(dfs+模拟)
- 在Nginx上配置多个站点
- http协议的状态码-400,401,403,404,500(面试)
- 《EffectiveC++》读书笔记(一)条款1-3
- 洛谷 P2376 [USACO09OCT]津贴Allowance
- RDD五大特性