《大数据之路：阿里巴巴大数据实践》-第1章 总述

已于 2022-09-05 19:29:37 修改
阅读量903 收藏 1
点赞数
分类专栏： 【在线书籍】 文章标签： 大数据
于 2022-09-01 13:20:45 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/m0_54252387/article/details/126641150
版权
《大数据之路：阿里巴巴大数据实践》揭示了DT时代的数据价值。书中介绍了从数据采集、计算、服务到应用的四大层次，强调了有序、结构化的数据管理的重要性。阿里巴巴的数据采集体系包括Aplus.JS和UserTrack，数据计算层涵盖MaxCompute和StreamCompute，数据服务层通过数据服务平台OneService提供服务，而数据应用层服务于内部员工和商家，如搜索、推荐等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

了解本专栏 订阅专栏 解锁全文 超级会员免费看
《大数据之路：阿里巴巴大数据实践》-第4篇 数据应用篇 -第16章 数据应用
m0_54252387的博客
09-05 1233
大数据建设与管理的方法论 和实践，“生产要素”已经准备好，需要通过合适的方式提供给不同类 型的用户，让数据最大化地发挥价值。阿里巴巴作为一家天然的大数据 公司，对数据的应用表现在各个方面，如搜索、推荐、广告、金融、信 用、保险、文娱、物流等业务。将数据提供给商家，可以用于指导商家 的数据化运营，为商家提供多样化、普惠性的数据赋能；将数据提供给 阿里巴巴内部的搜索、推荐、广告、金融等平台，可以用于实现更好的 搜索体验、更精准的个性化推荐，优化购物体验，更精准地进行广告投 放、更普惠的金融服务等；将数据提供给阿
《大数据之路：阿里巴巴大数据实践》-第1篇 数据技术篇 -第6章 数据服务
m0_54252387的博客
09-02 572
数据部门产出的海量数据，如何能方便高效地开放出去，是我们一 直想要解决的难题。在没有数据服务的年代，数据开放的方式简单、粗 暴，一般是直接将数据导出给对方。这种方式不仅低效，还带来了安全 隐患等诸多问题。 为此，我们在数据服务这个方向上不断探索和实践。最早的数据服 务雏形诞生于2010年，至今已有7个年头。在这期间，随着我们对业 务的理解不断加深，同时也得益于新技术的持续涌现，对数据服务架构 也进行了多次升级改造。服务架构的每次升级，均在性能、稳定性、扩 展性等方面有所提升，从而能更好地服务于用户。
大数据之路：阿里巴巴大数据实践
qq_27639777的博客
08-16 7152
第1章：总述 如果说在IT时代是以自我控制、自我管理为主，那么到了DT（Data Technology）时代，则是以服务大众、激发生产力为主。阿里巴巴大数据系统体系架构主要分为数据采集、数据计算、数据服务和数据应用四大层次。 第2章：日志采集 阿里巴巴的日志采集体系方案包括两大体系：Aplus.JS是Web端（基于浏览器）日志采集技术方案：UserTrack是APP端（无线客户端）日志采集技术方案。 2.1 浏览器的页面日志采集 浏览器的页面型产品／服务的日志采集可分为如下两大类。 页面浏览（展现）日志
大数据学习之路（持续更新中...）
xingoo
12-18 673
大数据学习之路（持续更新中...） 在16年8月份至今，一直在努力学习大数据大数据相关的技术，很想了解众多老司机的学习历程。因为大数据涉及的技术很广需要了解的东西也很多，会让很多新手望而却步。所以，我就在自己学习的过程中总结一下学到的内容以及踩到的一些坑，希望得到老司机的指点和新手的借鉴。 目前正在结合机器学习理论学习MLlib源码 前言 在学...
《大数据之路：阿里巴巴大数据实践》：看阿里人从IT时代走向DT时代的经验之谈！
云祁QI
05-17 9598
最近一直在看《大数据之路：阿里巴巴大数据实践》一书，读完之后感觉受益良多。第一，对于整个大数据的体系有了更多且清晰的认知；第二，对于不同系统的逻辑处理方式给予了引导；第三，毕竟是阿里多年技术的累计产出，而且都是阿里技术大牛写的，干货相当多；最后，如果对于大数据方向想有更深入的了解，推荐阅读本书。
大数据之路：阿里巴巴大数据实践（1）
最新发布
qq_32907491的博客
01-25 973
览器的页面型产品/服务的日志采集可分为如下两大类（1）页面浏览（展现）日志采集。顾名思义，页面浏览日志是指：一个页面被浏览器加载呈现时采集的日志。此类日志是最基础的互联日志，也是目前所有互联网产品的两大基本指标：页面浏览量（Page View，PV）和访客数（UnigueVisitors，UV）的统计基础。贞面浏览日志是目前成熟度和完备度最高，同时也是最具挑战性的日志采集任务，我们将重点讲述此类日志的采集。（2）贞面交互目志采集。当贞面加载和染完成之后，用户可以在页面上执行各类操作。
大数据之路，阿里巴巴大数据实践
weixin_37364055的博客
12-23 953
​​​​​​​
《大数据之路：阿里巴巴大数据实践》-第1篇 数据技术篇 -第3章数据同步
m0_54252387的博客
09-01 879
我们将数据釆集分为日志采集和数据库数据同步两 部分。数据同步技术更通用的含义是不同系统间的数据流转，有多种不 同的应用场景。主数据库与备份数据库之间的数据备份，以及主系统与 子系统之间的数据更新，属于同类型不同集群数据库之间的数据同步。 另外，还有不同地域、不同数据库类型之间的数据传输交换，比如分布 式业务系统与数据仓库系统之间的数据同步。对于大数据系统来说，包 含数据从业务系统同步进入数据仓库和数据从数据仓库同步进入数据 服务或数据应用两个方面。本章侧重讲解数据从业务系统同步进入数据 仓库这个环节，但其适
《大数据之路：阿里巴巴大数据实践》-第1篇 数据技术篇 -第4章 离线数据开发
m0_54252387的博客
09-01 450
从采集系统中收集了大量的原始数据后，数据只有被整合和计算， 才能被用于洞察商业规律，挖掘潜在信息，从而实现大数据价值，达到 赋能于商业和创造价值的目的。面对海量的数据和复杂的计算，阿里巴 巴的数据计算层包括两大体系：数据存储及计算平台(离线计算平台 MaxCompute和实时计算平台StreamCompute)、数据整合及管理体系 (OneData)。   本章主要介绍MaxCompute和阿里巴巴内部基于MaxCompute的大 数据开发套件，并对在数据开发过程中经常遇到的问题和相关解决方案 进行介绍。.
《大数据之路：阿里巴巴大数据实践》
莫慌 吃口药
11-22 859
《大数据之路：阿里巴巴大数据实践》语录 目录 一、数据采集 1 ◆日志采集 1 ▼浏览器的页面日志采集 1 ▼无线客户端的日志采集 2 （1） 页面事件 3 （2） 控件点击事件 3 （3） 其它事件 3 （4） 特殊场景 3 （5）H5 & Native 日志统一 4 （6）设备标识 4 （7） 日志传输 5 ▼日志采集挑战 5 （1） 日志分流与定制处理 5...
阿里巴巴 大数据之路
04-29
阿里巴巴，作为距离大数据最近的公司之一，近几年对大数据却鲜有高谈阔论。实际上，阿里巴巴一开始就自然生长在数据的黑洞中，并且被越来越多、越来越密集的数据风暴裹挟。从需求→设计→迭代→升华为理论，在无数次的迭代进化中，阿里巴巴对大数据的理解才逐渐成形，慢慢能够在将数据黑洞为我所用的抗争中扳回一局。《大数据之路：阿里巴巴大数据实践》就是在这个过程中，由阿里巴巴数据技术及产品部沉淀下来的大数据知识与实践，值得每一位与大数据相关的人阅读。
大数据之路-阿里巴巴大数据实践
gaomeng_1的博客
05-26 298
"人类正在从IT时代走向DT时代",数据量激增,但是如果不能对这些数据进行有序/有结构地分类组织和存储,不能有效利用并发掘它,继而产生价值,那么同时也将成为一场灾难.对阿里来说,数据达到EB级别.双11可达12万笔/秒.应当建设高效的数据模型体系.数据体系主要分为:数据采集,数据计算,数据服务和数据应用四大层次.数据采集层:日志采集:针对Web端的采集技术方案;针对APP端的日志采集技术方案.业务数据:针对业务数据库的采集方案.数据计算层:计算层包括两大体系:数据存储及计算云平台(
大数据之路：阿里巴巴大数据实践（数据模型篇）
南雨有云
07-20 723
思维导图 第8章 大数据领域建模综述 一、典型的数据仓库建模方法论 1、ER模型 特点：需要全面了解企业业务和数据、实施周期非常长、对建模人员的能力要求非常高。 2、维度模型 步骤：选择需要进行分析决策的业务过程、选择粒度、识别维表、选择事实（确定分析需要衡量的指标） 3、Data Vault模型 Data Vault模型由以下几部分组成： Hub：是企业的核心业务实体，由实体key、数据仓库序列代理键、装载时间、数据来源组成； Link：代表Hub之间的关系。这里与ER模型最大的区别是将关系作为一个独立
【读书笔记】大数据之路：阿里巴巴大数据实践
热门推荐
AI天才研究院
09-27 1万+
大数据之路：阿里巴巴大数据实践 简介： 在Alibaba集团内，数据人员面临的现实情况是：集团数据存储已经达到EB级别，部分单张表每天的数据记录数高达几千亿条；在2016年“双11购物狂欢节”的24小时中，支付金额达到了1207亿元人民币，支付峰值高达12万笔/秒，下单峰值达17.5万笔/秒，媒体直播大屏处理的总数据量高达百亿级别且所有数据都需要做到实时、准确地对外披露……巨大的信息量给数据采...
大数据之路——阿里巴巴大数据实践（小白笔记）
cainiao22222的博客
11-12 817
第一章 总述 1.阿里巴巴大数据系统体系架构分为三大部分数据采集层、数据计算层、数据服务层 2.数据采集层     日志采集系统：Aplus.JS是 web端日志采集技术方案；UserTrack是APP端日志采集方案      数据传输：TimeTunnel（TT）体系进行数据传输，既包括数据库的增量数据传输，也包括日志数据的传输，既支持实时流式计算，也支持时间窗口的批量计算      ...
转---大数据之路：阿里巴巴大数据实践
weixin_41598761的博客
08-12 299
转---大数据之路：阿里巴巴大数据实践
大数据之路阿里巴巴实践
大数据指北
07-05 3367
大数据平台研发，全局概览导向。
大数据之路（转）
weixin_30532987的博客
05-15 389
引言 最近有很多人问我如何学习大数据？我也是思考了很多时日才动笔写下此文。一方面我自己还只是大数据学习中的一个小学生，贸然动笔怕贻笑大方；另一方面大数据本身领域博大精深，其涵盖领域之广技术种类之多确实很难用一篇文章囊括。怎奈“下雨天打孩子，闲着也是闲着”，况笔者一直坚持写技术类的博客，今天也请允许我写一点务虚类的东西吧。 本文的目的是希望给所有大数据初学者规划一条比较清晰的学习...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九层之台起于累土

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值