今年是我第一次数据挖掘,数据挖掘是指从大量的数据中通过算法搜索隐藏于其中信息的过程。然而今年的课程并不是特别关注挖掘的算法而是概念。下面做个总结,也当为我的期末复习。
Introduction
数据挖掘过程的总体目标是从一个数据集中提取信息,并将其转换成可理解的结构,以进一步使用。除了原始分析步骤,它还涉及到数据库和数据管理方面、数据预处理、模型与推断方面考量、兴趣度度量、复杂度的考虑,以及发现结构、可视化及在线更新等后处理。数据挖掘是“数据库知识发现”(Knowledge-Discovery in Databases, KDD)的分析步骤 ,本质上属于机器学习的范畴。
The concept of extracting previously unknown and potentially usefull, interesting knowledge from large sets of data. analying data that wasn’t originally collected for analysis.
the big data
collect large amounts of data
administrative purposes
experience
goals
prediction/forecasting
diagnostics
optimization
2 streams
knowledge discovery
prediction