
oss存储
一只快死的猿
接python外包和爬虫单子
展开
-
存储(三)OSS2存储,解决mysql索引指纹匹配慢的问题
背景: 在存储二中我模拟实现了低配的百度网盘,在指纹存储匹配实现的过程中根本就没有考虑到后期运行速度的问题(因为自己小白还没有什么实质性的经验),最近在使用的过程中发现运行的速度越来越慢,如果是这样的话,那么之后公司的后端存储用户量一旦大起来,存储频率高起来,那之前的努力就没有什么用处了。在正文开始之前先简单阐述下存储二中的实现逻辑:1、利用爬虫爬取某网站的图片url,模拟用户使用APP上传图片。2、再获取图片内容,然后做md5和sha1加密。3、把加密后的密文叫做指纹,指纹是唯一存在的,拿着指纹原创 2020-08-14 10:52:34 · 4180 阅读 · 0 评论 -
存储(二):OSS2模拟低配百度网盘存储(优化存储)
在存储(一)中,已经可以把图片存储到阿里云产品的oss存储服务器上边了。问题:如果真是像存储(一)中所实现的功能:用户来一个图片、文件、视频或者其他的待存储对象,我就要给他存储到oss服务上边,这样存储空间的占用速度非常快,在大数据的时代下根本就无法满足需求,如果采用扩容,你无论阔多大,以这样的用户存储速度都不够用,而且存储服务器的高额存储费用可不是开玩笑的。分析:如果我们认真观察网上的数据,其实很大一部分数据都是重复的,比如QQ空间微信朋友圈等等,有没有发现好友有时候发的图片可能是之前用过的,即重原创 2020-08-01 11:09:57 · 5505 阅读 · 0 评论 -
存储(一):阿里云对象存储OSS2,python_SDK
有多种开发语言SDK,先上SDK连接:https://help.aliyun.com/document_detail/52834.html?spm=a2c4g.11186623.4.4.1efe585eCLlXR5前提:已开通OSS服务,已创建Accesskey。其他的就不多说了,连接文档里面的介绍和使用比我说的肯定要好太多了,我就分享一下我使用过程中遇到的一些坑和思想吧。首先说下安装问题,OSS Python SDK适用于Python 2.6、2.7、3.3、3.4、3.5、3.6版本,但是我服原创 2020-07-30 16:56:30 · 7247 阅读 · 0 评论