对象存储ceph s3cmds使用方法

admin

1、配置，主要是 Access Key ID 和 Secret Access Key
; d% k/ x( K/ s! X; |) xs3cmd --configure
5 P  ]& R3 L$ h9 }5 z0 }
' F, Z6 f% B; S9 ~2、列举所有 Buckets。（bucket 相当于根文件夹）
+ X1 n) H3 o- [5 }5 u$ U! ps3cmd ls
( d3 d: u+ E; P  F
3、创建 bucket，且 bucket 名称是唯一的，不能重复，默认创建的 bucket 是公开的。
. r7 _/ b3 p  L' r( |s3cmd mb s3://my-bucket-name

4、删除空 bucket
. Q8 Z+ U% Z( O, H8 Q0 \5 @* m3 B! ps3cmd rb s3://my-bucket-name

4 p# L: q, k( N* m5、列举 Bucket 中的内容
s3cmd ls s3://my-bucket-name

6、上传
s3cmd put file.txt s3://my-bucket-name/file.txt
! ]6 s2 X( O2 L2 |3 ^" ^& {
支持批量上传，直接指定多个文件，如
s3cmd put t.py s3://tccpoc/t.py up.py s3://tccpoc/up.py
6 T. x, b2 V7 s3 j
如果上传终断，比如ctrl+c，会显示upload-id，按照指示，带上`--upload-id`就可以实现断点上传
' G, H4 T& c( |- `7 e
3 t' E1 y' K3 k) U7、上传并将权限设置为所有人可读
s3cmd put --acl-public file.txt s3://my-bucket-name/file.txt
--acl-private，也可以是私有
/ R7 r$ m/ w9 r
8、批量上传文件
+ E; Z- P. _8 B& ^+ ]( a1 zs3cmd put ./* s3://my-bucket-name/
% O. H' ]: E' N6 |! c* P
9、下载文件
s3cmd get s3://my-bucket-name/file.txt file.txt
. a! X5 h6 f  t8 }/ H$ n
支持批量下载，直接指定多个文件，如
s3cmd get s3://tccpoc/t.py s3://tccpoc/up.py

& d0 J8 U7 p; }- b, ?  T如果下载终断，比如ctrl+c，带上参数`--continue`,可以实现断点下载

10、批量下载
: \( d2 B3 T& ^7 W' i" d* Rs3cmd get s3://my-bucket-name/* ./
9 X9 J2 E6 N5 N' U
11、删除文件，
s3cmd del s3://my-bucket-name/file.txt
, a& P1 X& T$ ?/ K
支持批量删除，直接指定多个 bucket 对象，如
s3cmd del s3://my-bucket-name/file.txt s3://my-bucket-name/file2.txt

7 G9 u5 x4 E* _12、来获得对应的bucket所占用的空间大小
s3cmd du -H s3://my-bucket-name

上传大文件时，使用 --multipart-chunk-size-mb=size 指定的分片大小必须是4的倍数，否则上传会报 400（InvalidPartOrder）


/ u/ d& g) k) x/ |2 b* Q  n其他常用参数
复制  --list-md5                 结合list一起使用，打印md5
  -H, --human-readable-sizes 人性化文件大小
  -v, --verbose              显示详细的输出
$ N- Y4 S( e5 }9 y% l  -d, --debug                调试信息
! L& Q+ D  I- x& w: Q& K# U% u: g  --limit-rate=LIMITRATE     限速
' f8 e  `& V/ y* i文件同步相关
; m: N& o: J% @: P! T复制  --exclude=GLOB                             通配
. w9 ^  g, b- S5 ?& _4 ]  --exclude-from=FILE   从文件读取排除列表
* c" g5 `) E  n; x  T" x  --rexclude=REGEXP     正则形式的匹配排除
' [3 L. I  t$ Q/ ^6 ?) p  --rexclude-from=FILE  从文件读取正则形式的匹配排除

1 `( P0 x+ n8 b1 f) y, @& T0 r  --include=GLOB        通配
  --include-from=FILE   从文件读取文件列表
( e0 C4 a  w( Q. S3 s  --rinclude=REGEXP     正则匹配
  --rinclude-from=FILE  从文件读取正则匹配
7 _' }* C( Q0 q- r  v5 S: O# 示例
# s3cmd sync --exclude '*' --include 'link*' images/ s3://files
upload: 'images/link.png' -> 's3://files/link.png'  [1 of 1]
8094 of 8094   100% in    0s   206.34 kB/s  done

# s3cmd sync --exclude '*' --include 'link*' s3://files images2
download: 's3://files/link.png' -> 'images2/link.png'  [1 of 1]
8094 of 8094   100% in    0s   323.87 kB/s  done
& ^' N" s+ Z; t' U/ kDone. Downloaded 8094 bytes in 1.0 seconds, 7.90 kB/s.
ACL
- n! l( \9 U9 H- y  X" D复制# s3cmd modify s3://files/link.png --acl-private
# s3cmd modify s3://files/link.png --acl-public

7 [1 k5 z" }' U, z6 d, m( c+ m