22、大数据与数据科学的综合洞察

大数据与数据科学的综合洞察

1. 企业大数据与数据科学战略

如今，大数据和数据科学无处不在。像Uber估值近70亿美元，Airbnb估值达30亿美元，这些成功案例让大数据和数据科学从理论技术话题变成了与无限投资成功相关的常用术语。几乎所有投资科技的公司都在以某种方式使用大数据，但实施过程缺乏明确框架，除了Hadoop被多数公司采用外，没有能保证成功的确定方案。

实施大数据战略通常有三个阶段：
- 休眠期 ：公司尚未确立明确指令，但有关于大数据的讨论。
- 被动期 ：讨论更正式，通常会委派团队评估对组织的影响和价值。
- 活跃期 ：公司开始评估技术并积极实施。

大数据和数据科学战略的所有权界定有些模糊，因为该领域涉及分析和技术两方面。分析通常由面向业务的部门负责，技术由IT部门负责，但数据科学需要两者协作。数据专家了解领域和数据，能确定理想用例，但缺乏技术能力就难以找到合适工具；IT经理熟悉技术，但需要业务利益相关者的反馈来确定解决方案。

实现战略的方式一般有自下而上和自上而下两种，但协作、迭代和敏捷的过程通常是最佳选择。自下而上从IT层面开始决策，自上而下从管理层面开始决策，都不是最优的，理想方式是有一个持续的反馈循环，根据发现过程调整需求。

graph LR
    classDef startend fill:#F5EBFF,stroke:#BE8FED,stroke-width:2px
    classDef process f