
AWS
人月神话
if not now , when?
if not me , who?
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
AWS-大数据之redshift
准备研究一下AWS平台对大数据的支持,我之前用的是aliyun的maxcompute,在国内比较好,但是如果要想把业务扩展到国际,阿里云可能没有AWS那么大的优势。太细节的东西我就懒得写了,只要给大家梳理一下流程思路,细节的东西我会找到相应的文档贴出来。入门步骤一、选国际AWS服务,但是要越过那道。。。你懂的AWS现在也入驻国内了,但是支持企业去注册,这点比较尴尬,所以也只能用国外的服务...原创 2018-12-04 10:22:11 · 7535 阅读 · 0 评论 -
AWS大数据之kinesis
kinesis中又包括了Amazon Kinesis Streams与Amazon Kinesis FirehoseAmazon Kinesis Streams通过 Amazon Kinesis Streams,您可以构建自己的自定义应用程序来处理或分析流数据,以满足特定需求。它能够每小时从成千上万个来源连续捕获和存储数 TB 的数据。然后,您可以构建应用程序来处理来自 Amazon Kine...原创 2018-12-04 14:15:16 · 3666 阅读 · 0 评论 -
AWS大数据之组件整合
kafka或kinesis 做数据收集S3+redshift 做数仓EMR做计算RDS做数据市场AWS Glue / AWS Data Pipeline 做数据集成这些组件配合起来,几乎可以做各种方式的数据分析kinesis还是比较推荐,延迟时间可以配置的算是实时的,而且功能会多一点,聚合、过滤什么的都可以...原创 2018-12-04 14:23:48 · 1312 阅读 · 0 评论