S3cmd

小编 2026-07-05 阅读:1102 评论:0
一:安装方法#wget http://nchc.dl.sourceforge.net/proje...

一:安装方法

#wget http://nchc.dl.sourceforge.net/project/s3tools/s3cmd/1.0.0/s3cmd-1.0.0.tar.gz   #tar -zxf s3cmd-1.0.0.tar.gz -C /usr/local/   #mv /usr/local/s3cmd-1.0.0/ /usr/local/s3cmd/   #ln -s /usr/local/s3cmd/s3cmd /usr/bin/s3cmd

  

二:使用方法

  1.配置Access Key ID 和 Secret Access Key

 #s3cmd --configure

  

       2.列举所有的Buckets

#s3cmd ls

  

  3.创建 bucket,且 bucket 名称是唯一的,不能重复。

#s3cmd mb s3://my-bucket-name

  

  4.删除空 bucket

#s3cmd rb s3://my-bucket-name

  

  5.列举 Bucket 中的内容

#s3cmd ls s3://my-bucket-name

  

  6.上传 file.txt 到某个 bucket

#s3cmd put file.txt s3://my-bucket-name/file.txt

  

  7.上传并将权限设置为所有人可读

#s3cmd put --acl-public file.txt s3://my-bucket-name/file.txt

  

  8.批量上传文件

#s3cmd put ./* s3://my-bucket-name/

  

  9.下载文件

#s3cmd get s3://my-bucket-name/file.txt file.txt

  

  10.批量下载

#s3cmd get s3://my-bucket-name/* ./

  

  11.删除文件

#s3cmd del s3://my-bucket-name/file.txt

  

  12.来获得对应的bucket所占用的空间大小

#s3cmd du -H s3://my-bucket-name

  

三:文件夹处理规则

  带"/"斜杠的 dir1,相当于上传yh目录下的所有文件,即类似 "cp ./* "

  

# s3cmd put -r yh s3://yaohong-bucket  upload: 'yh/1' -> 's3://yaohong-bucket/yh/1' [1 of 4]  0 of 0 0% in 0s 0.00 B/s done  upload: 'yh/2' -> 's3://yaohong-bucket/yh/2' [2 of 4]  0 of 0 0% in 0s 0.00 B/s done  upload: 'yh/3.py' -> 's3://yaohong-bucket/yh/3.py' [3 of 4]  0 of 0 0% in 0s 0.00 B/s done  upload: 'yh/3.sh' -> 's3://yaohong-bucket/yh/3.sh' [4 of 4]  0 of 0 0% in 0s 0.00 B/s done

  

四:同步方法

  1.同步当前目录下所有文件

#s3cmd sync  ./  s3://yaohong-bucket/

  2.加 "--dry-run"参数后,仅列出需要同步的项目,不实际进行同步。

#s3cmd sync  --dry-run ./  s3://my-bucket-name/

  3.加 " --delete-removed"参数后,会删除本地不存在的文件。

#s3cmd sync  --delete-removed ./  s3://my-bucket-name/

  4.加 " --skip-existing"参数后,不进行MD5校验,直接跳过本地已存在的文件。

#s3cmd sync  --skip-existing ./  s3://my-bucket-name/

  高级同步

        排除、包含规则(--exclude 、--include)

  file1-1.txt被排除,file2-2.txt同样是txt格式却能被包含

# s3cmd sync --dry-run --exclude '*.txt' --include 'dir2/*' ./  s3://my-bucket-name/exclude: dir1/file1-1.txtupload: ./dir2/file2-2.txt -> s3://my-bucket-name/dir2/file2-2.txt

  从文件中载入排除或包含规则。(--exclude-from、--include-from)

#s3cmd sync  --exclude-from pictures.exclude ./  s3://my-bucket-name/

  排除或包含规则支持正则表达式

--rexclude 、--rinclude、--rexclude-from、--rinclude-from

  

 

版权声明

本文仅代表作者观点,不代表百度立场。
本文系作者授权百度百家发表,未经许可,不得转载。

上一篇:MySQL 下一篇:以后每天更新一篇博客
热门文章
  • Sequential Monte Carlo Methods (SMC) 序列蒙特卡洛/粒子滤波/Bootstrap Filtering

    Sequential Monte Carlo Methods (SMC) 序列蒙特卡洛/粒子滤波/Bootstrap Filtering
    Problem Statement 我们考虑一个具有马尔可夫性质、非线性、非高斯的状态空间模型(State Space Model):对于一个时间序列上的观测结果{yt,t∈N}\\{ y_t , t \\in N \\}{yt​,t∈N},我们认为每个观测结果yty_tyt​的生成依赖于一个无法直接观察的隐变量xt∈{xt,t∈N}x_t \\in \\{x_t , t \\in N \\}xt​∈{xt​,t∈N},即:p(...
  • 机房智能化温湿度解决方式之POE供电以太网温湿度传感器

    机房智能化温湿度解决方式之POE供电以太网温湿度传感器
    机房智能化温湿度解决方式之POE供电以太网温湿度传感器 北京盈创力和电子科技有限公司 智能型TCP网口温湿度记录仪 北京IP网络温湿度记录仪厂家,北京盈创力和 北京智能型TCP网口温湿度记录仪IP网络温湿度记录仪是一种新型的基于TCP/IP协议双绞线以太网标准温湿度采集模块,利用它可以实现现场温度值、相对湿度值的采集,同时利用其自身的RJ45通信接口可以方便地和机房监控主机或交换机集线器进行联网。 工作于-40℃~85℃工业级带...
  • Hive 系统函数及示例

    Hive 系统函数及示例
    查看所有系统函数 show functions; 函数分类 内置函数【系统函数】 数学函数: floor、round、ceil、cos、log2等 字符串函数: length、reverse、trim、lower、get_json_object、repeat等 收集函数: size 转换函数: cast 日期函数: year、month、datediff、date、date_add等 条件函数: coalesce、case…w...
  • HTTP状态保持的原理

    HTTP状态保持的原理
    a)在用户登录之后,浏览器返回响应的时候会在响应中添加上cookieb)浏览器接收到cookie之后会自动保存c)当用户再次请求同一服务器中的其他网页的时候,浏览器会自动带上之前保存的cookied)服务接收到请求之后可以请 request 对象中取到cookie 判断当前用户是否登录  Http是无状态的,就是连接时数据互通,关闭后...
  • CSRF的原理和防范措施

    CSRF的原理和防范措施
    a)攻击原理:i.用户C访问正常网站A时进行登录,浏览器保存A的cookieii.用户C再访问攻击网站B,网站B上有某个隐藏的链接或者图片标签会自动请求网站A的URL地址,例如表单提交,传指定的参数iii.而攻击网站B在访问网站A的时候,浏览器会自动带上网站A的cookieiv.所以网站A在接收到请求之后可判断当前用户是登录状态,所以...
标签列表