对象存储ceph s3cmds使用方法

admin

1、配置，主要是 Access Key ID 和 Secret Access Key
s3cmd --configure
6 w. `% U4 V$ Q/ _8 {# j2 D
7 m! E6 ]3 u" o8 K: Q- L! B, Q2、列举所有 Buckets。（bucket 相当于根文件夹）
s3cmd ls

$ u* X+ ?/ {/ s1 {3 Y0 |7 W: s6 G3、创建 bucket，且 bucket 名称是唯一的，不能重复，默认创建的 bucket 是公开的。
s3cmd mb s3://my-bucket-name
1 H5 U/ D, k8 E7 A
4、删除空 bucket
s3cmd rb s3://my-bucket-name
8 d" `9 @3 x# j0 k* \6 g
5、列举 Bucket 中的内容
- o; A: n: T. Z. F/ l6 j9 xs3cmd ls s3://my-bucket-name

6、上传
$ d3 I! Z) D. W6 _8 Is3cmd put file.txt s3://my-bucket-name/file.txt

8 V2 k0 x2 ^- M* x- W& D支持批量上传，直接指定多个文件，如
s3cmd put t.py s3://tccpoc/t.py up.py s3://tccpoc/up.py

) p6 X5 x! g. j2 f0 S4 {如果上传终断，比如ctrl+c，会显示upload-id，按照指示，带上`--upload-id`就可以实现断点上传

. b- y  d9 M: x1 }2 o( K# L+ F1 ]/ e: O7、上传并将权限设置为所有人可读
7 j8 c) C1 S- R- j* ^8 ~  _s3cmd put --acl-public file.txt s3://my-bucket-name/file.txt
+ N$ r# F, n2 g. ]" Q--acl-private，也可以是私有

6 |' L' \& h# \9 M8、批量上传文件
s3cmd put ./* s3://my-bucket-name/

9、下载文件
s3cmd get s3://my-bucket-name/file.txt file.txt
$ v) q' r/ a6 _+ x! i8 B
支持批量下载，直接指定多个文件，如
) ]9 |! _6 U5 R# `: H  m9 T/ Is3cmd get s3://tccpoc/t.py s3://tccpoc/up.py
' n( U: v/ c# v
- w1 o% j- a+ ]6 }, P; z如果下载终断，比如ctrl+c，带上参数`--continue`,可以实现断点下载

: h% L! d+ T1 a; Z" f. M2 p10、批量下载
s3cmd get s3://my-bucket-name/* ./

11、删除文件，
$ w7 U- }. g: h, }( ss3cmd del s3://my-bucket-name/file.txt
' N$ ]9 S& R) v$ P4 R3 B
支持批量删除，直接指定多个 bucket 对象，如
s3cmd del s3://my-bucket-name/file.txt s3://my-bucket-name/file2.txt

$ C1 |3 {: Z" Y+ U6 o7 v, @% g" N12、来获得对应的bucket所占用的空间大小
s3cmd du -H s3://my-bucket-name
' Y! P2 q9 L  l1 q  v$ a4 u/ v
上传大文件时，使用 --multipart-chunk-size-mb=size 指定的分片大小必须是4的倍数，否则上传会报 400（InvalidPartOrder）


; P) m$ _$ }6 |/ _; R; R其他常用参数
3 V% X* ~) v5 C) A/ {4 s复制  --list-md5                 结合list一起使用，打印md5
  -H, --human-readable-sizes 人性化文件大小
/ V% a" Z  {/ a) _# l  -v, --verbose              显示详细的输出
  -d, --debug                调试信息
  --limit-rate=LIMITRATE     限速
文件同步相关
) C9 s  y5 {- D# |$ s复制  --exclude=GLOB                             通配
9 X' V* K( [/ P$ \2 I  --exclude-from=FILE   从文件读取排除列表
9 E( U3 y+ q; g( ?3 }4 c$ _% @2 Y9 g  --rexclude=REGEXP     正则形式的匹配排除
  --rexclude-from=FILE  从文件读取正则形式的匹配排除

  --include=GLOB        通配
  --include-from=FILE   从文件读取文件列表
' T( ]4 y) e2 w/ O& _4 [0 L/ n* n  --rinclude=REGEXP     正则匹配
  --rinclude-from=FILE  从文件读取正则匹配
# 示例
# s3cmd sync --exclude '*' --include 'link*' images/ s3://files
. W5 a7 |0 n/ G1 bupload: 'images/link.png' -> 's3://files/link.png'  [1 of 1]
+ Y" g' @+ m* Y8094 of 8094   100% in    0s   206.34 kB/s  done

# s3cmd sync --exclude '*' --include 'link*' s3://files images2
download: 's3://files/link.png' -> 'images2/link.png'  [1 of 1]
8094 of 8094   100% in    0s   323.87 kB/s  done
Done. Downloaded 8094 bytes in 1.0 seconds, 7.90 kB/s.
" K1 _+ N, v5 P8 x* BACL
( p" Q( Z$ ]5 j9 z; N复制# s3cmd modify s3://files/link.png --acl-private
! Q& `6 E& T; e1 z# s3cmd modify s3://files/link.png --acl-public
9 |, X% {( `9 |& _2 B
# u3 p' h4 I7 R