zoukankan      html  css  js  c++  java
  • ceph对象存储

    https://edu.51cto.com/center/course/lesson/index?id=333061

    https://www.cnblogs.com/xd502djj/p/3604783.html

    1、配置,主要是 Access Key ID 和 Secret Access Key

    1
    
    s3cmd --configure

    2、列举所有 Buckets。(bucket 相当于根文件夹)

    1
    
    s3cmd ls

    3、创建 bucket,且 bucket 名称是唯一的,不能重复。

    1
    
    s3cmd mb s3://my-bucket-name

    4、删除空 bucket

    1
    
    s3cmd rb s3://my-bucket-name

    5、列举 Bucket 中的内容

    1
    
    s3cmd ls s3://my-bucket-name

    6、上传 file.txt 到某个 bucket,

    1
    
    s3cmd put file.txt s3://my-bucket-name/file.txt

    7、上传并将权限设置为所有人可读

    1
    
    s3cmd put --acl-public file.txt s3://my-bucket-name/file.txt

    8、批量上传文件

    1
    
    s3cmd put ./* s3://my-bucket-name/

    9、下载文件

    1
    
    s3cmd get s3://my-bucket-name/file.txt file.txt

    10、批量下载

    1
    
    s3cmd get s3://my-bucket-name/* ./

    11、删除文件

    1
    
    s3cmd del s3://my-bucket-name/file.txt

    12、来获得对应的bucket所占用的空间大小

    1
    
    s3cmd du -H s3://my-bucket-name

    三、目录处理规则

    以下命令都能将dir1 中的文件上传至my-bucket-name,但效果只截然不同的。

    1)dir1 不带"/"斜杠,那么dir1会作为文件路径的一部分,相当于上传整个dir1目录,即类似 "cp -r dir1/"

    1
    2
    
    ~/demo$ s3cmd put -r dir1 s3://my-bucket-name/
    dir1/file1-1.txt -> s3://my-bucket-name/dir1/file1-1.txt  [1 of 1]

    2)带"/"斜杠的 dir1,相当于上传dir1目录下的所有文件,即类似 "cp ./* "

    1
    2
    
    ~/demo$ s3cmd put -r dir1/ s3://my-bucket-name/
    dir1/file1-1.txt -> s3://my-bucket-name/file1-1.txt  [1 of 1]

    四、同步方法

    这是s3cmd 使用难点,但却是最实用的功能。官方使用说明见《s3cmd sync HowTo》

    首先明确,同步操作是要进行MD5校验的,只有当文件不同时,才会被传输。

    4.1、常规同步操作

    1、同步当前目录下所有文件

    1
    
    s3cmd sync  ./  s3://my-bucket-name/

    2、加 "--dry-run"参数后,仅列出需要同步的项目,不实际进行同步。

    1
    
    s3cmd sync  --dry-run ./  s3://my-bucket-name/

    3、加 " --delete-removed"参数后,会删除本地不存在的文件。

    1
    
    s3cmd sync  --delete-removed ./  s3://my-bucket-name/

    4、加 " --skip-existing"参数后,不进行MD5校验,直接跳过本地已存在的文件。

    1
    
    s3cmd sync  --skip-existing ./  s3://my-bucket-name/

    4.2、高级同步操作

    4.2.1、排除、包含规则(--exclude 、--include)

    file1-1.txt被排除,file2-2.txt同样是txt格式却能被包含。

    1
    2
    3
    
    ~/demo$ s3cmd sync --dry-run --exclude '*.txt' --include 'dir2/*' ./  s3://my-bucket-name/
    exclude: dir1/file1-1.txt
    upload: ./dir2/file2-2.txt -> s3://my-bucket-name/dir2/file2-2.txt

    4.2.2、从文件中载入排除或包含规则。(--exclude-from、--include-from)

    1
    
    s3cmd sync  --exclude-from pictures.exclude ./  s3://my-bucket-name/

    pictures.exclude 文件内容

    1
    2
    3
    
    # Hey, comments are allowed here ;-)
    *.jpg
    *.gif

    4.2.3、排除或包含规则支持正则表达式

    1
    
    --rexclude 、--rinclude、--rexclude-from、--rinclude-from
  • 相关阅读:
    godaddy 亚太机房 更换 美国机房 全过程(图)
    博客园设置访问密码
    GoDaddy Linux主机支持机房的更换
    今天电信宽代终于装上光纤了,升级或安装光纤需购光猫,可以自购。我来扫盲一下
    我来科普一下为毛很多人升级了20M的电信光纤宽带反而感觉速度更卡了
    百度浏览器使用率统计
    hdu 1281
    C#基于SMTP协议和SOCKET通信,实现邮件内容和附件的发送,并可隐藏收件人
    如何处理标注打架
    提高你的Java代码质量吧:谨慎包装类型的比较
  • 原文地址:https://www.cnblogs.com/alpha1981/p/11347957.html
Copyright © 2011-2022 走看看