数据科学的力量-优快云博客

本文链接：https://blog.youkuaiyun.com/weixin_40714908/article/details/87854854

什么是数据科学（数据挖掘）？

随着网络通讯技术发达，世界已然进入大数据时代，每分每秒都有无数数据产生。例如你点击某条新闻，看新闻时长，你发布的评论，这些全部是可用的数据，数据科学家们可以通过数据分析出你的性别年龄爱好甚至价值观。而在2010年以前，我们面临最大的挑战就是构建存储这么多数据的方法和框架。现在，当Hadoop和其他框架成功解决了存储问题时，如何处理这些数据成为我们全新挑战。数据科学就是系统研究这个新兴挑战的学科。它更是人工智能的未来。

为什么我们需要数据科学呢？？？

传统上，我们可以用简单数学工具分析一些小量structured(结构化)的数据。但是根据上图，到2020年，百分之八十的数据都是unstructured（非结构化）。这些数据来自财务日志，文本文件，多媒体，各种传感器和仪器。简单数学工具无法满足处理海量数据需求。我们需要更复杂更先进的分析工具还有算法去处理，分析，抓取，提炼有意义的内容。

而现实生活我们如何运用数据科学呢？

（1）如果你能从现有数据（如客户过去的浏览历史记录，购买历史记录，年龄和收入）了解客户的具体要求。毫无疑问，你之前也拥有所有一些数据，但现在你有了更大量更实时的数据，你可以更有效地训练模型，并以更高的精度更及时向您的客户推荐产品。国内很多电商平台已经在这个方向努力了。但是其实所有商业领域都需要这个技能。拥有这个技能绝对是接下来商战制胜关键。

（2）接下来让我们来理解数据科学在决策中的作用。如果你的车可以智能送你回家怎么样？自动驾驶汽车从传感器收集实时数据，包括雷达，照相机和激光，以创建周围环境的地图。基于这些数据，利用先进的机器学习算法，它自己决定何时加速，何时加速，何时超车，何时转弯，最终顺利送你回家。

（3）让我们看看数据科学如何用于预测分析。我们以天气预报为例。可以收集和分析来自船舶，飞机，雷达，卫星的数据以建立模型。这些模型不仅可以预测天气，还可以帮助预测任何自然灾害的发生。它可以帮我们提前采取适当的措施，挽救许多宝贵的生命。