
Ceph
文章平均质量分 88
__Silent
这个作者很懒,什么都没留下…
展开
-
S3 上传大文件 InvalidRange
问题s3流式上传大文件,报错:416 InvalidRangetar -cP data_150G | s3cmd put - s3://wuyan_test/data_150G经过多次测试,得到结论: 文件大小从150GB~1TB 都会导致416错误问题表现s3cmd output: rgw log:2018-08-22 21:26:12.854078 7f25...原创 2018-08-27 16:54:27 · 5501 阅读 · 2 评论 -
(1) S3 connect reset by peer
问题描述 && 初步分析定位问题描述s3cmd -q get s3://zh_test/data_30.tar - | tar -xvf - -C ./在使用上面的命令,从S3中get 一个tar包,并同时解压到本地ECFS分布式存储的卷中时,会发生报错,导致get中断。问题复现频率非常高s3cmd 日志#s3cmd -q get s3://zh_test...原创 2018-09-17 18:51:20 · 1125 阅读 · 0 评论 -
(2) S3 connect reset by peer
Connect reset 原因 定位分析1. 问题表现继第一篇《问题描述 & 初步分析定位》, 问题表现为:s3cmd error message: error: [Errno 104] Connection reset by peerradosgw error message: ERROR: flush_read_list(): d->client_cb->...原创 2018-09-17 18:54:13 · 1534 阅读 · 0 评论 -
(3) s3cmd get object 代码流程
ceph version 12.2.5 (cad919881333ac92274171586c827e01f554a70a) luminous (stable)s3cmd get 时的代码流程get 代码调用流程civetweb.c worker_thread:static void *worker_thread(void *thread_func_param){...原创 2018-09-17 19:01:42 · 1241 阅读 · 0 评论