
智能大数据分析
文章平均质量分 97
智能大数据分析是指利用先进的技术和算法对大规模数据进行深入分析和挖掘,以提取有价值的信息和洞察。它结合了大数据技术、人工智能(AI)、机器学习(ML)和数据挖掘等多种方法,旨在通过自动化的方式分析复杂数据集,发现潜在的价值和关联性,实现数据的自动化处理和分析,从而支持决策和优化业务流程。
Francek Chen
征途漫漫,惟有奋斗!优快云大数据领域优质创作者,2024博客之星TOP47,阿里云社区专家博主,华为云云享专家。热爱学习大数据与人工智能的相关知识,专注Hadoop、Spark实战,打造了《大数据技术基础》《Python机器学习》等热门专栏,助力行业技术落地。多篇热文登榜TOP,开源项目解析广受好评。以代码为笔,记录成长;以博客为媒,传递价值。关注我,一起畅游于数据变化的世界中,发现更多精彩~~
展开
-
【人工智能 | 大数据】基于人工智能的大数据分析方法
本文主要讲解基于人工智能的大数据分析方法。介绍了大数据下的智能数据分析方法,包括基于机器学习、深度学习和计算智能的大数据分析方法。最后总结人工智能与大数据结合的必要性和具体案例。原创 2025-01-18 09:00:00 · 9581 阅读 · 49 评论 -
【机器学习 | 数据挖掘】离群点检测
本文首先介绍了离群点检测的相关概念和方法,接着详细讲解了离群点检测的具体方法,包括基于模型的离群点检测方法和基于聚类的离群点检测方法,最后在Sklearn中应用异常值的检测方法。原创 2025-01-14 09:00:00 · 2021 阅读 · 30 评论 -
【机器学习 | 数据挖掘】时间序列算法
本文首先介绍了常用的时间序列算法和时间序列的预处理,接着讲解平稳时间序列分析,包括AR模型、MA模型和ARMA模型,最后讲解基于ARIMA模型的非平稳时间序列分析。原创 2025-01-01 09:00:00 · 5278 阅读 · 57 评论 -
【机器学习 | 数据挖掘】智能推荐算法
本文首先介绍了智能推荐的概念、应用、评价指标,然后讲解了智能推荐常见的关联规则算法,包括Apriori和FP-Growth,最后讲解常见的协同过滤推荐技术,包括基于用户的协同过滤推荐和基于物品的协同过滤推荐。原创 2024-12-28 09:00:01 · 3320 阅读 · 53 评论 -
【大数据分析 | 深度学习】在Hadoop上实现分布式深度学习
本文介绍大数据和深度学习结合之路,即在Hadoop上实现分布式深度学习。主要讲解三个框架,包括Submarine(Hadoop生态系统),TonY(LinkedIn)和DL4J(deeplearning4j)。原创 2024-11-25 09:00:00 · 12731 阅读 · 79 评论 -
【大数据分析 | 机器学习】分布式机器学习
本文主要介绍分布式机器学习基础知识,并介绍主流的分布式机器学习框架,结合实例介绍一些机器学习算法。原创 2024-11-18 09:00:00 · 2545 阅读 · 61 评论 -
【智能大数据分析 | 实验四】Spark实验:Spark Streaming
智能大数据分析实验四,Spark实验:Spark Streaming。理解Spark Streaming的工作流程和工作原理,将Spark Streaming集群与Kafka集群对接,通过Java编程代码导出jar包并运行,实现SparkStreaming实时流处理。原创 2024-10-21 10:00:00 · 8816 阅读 · 65 评论 -
【智能大数据分析 | 实验三】Storm实验:实时WordCountTopology
智能大数据分析实验三,Storm实验:实时WordCountTopology。掌握如何用Java代码来实现Storm任务的拓扑,理解一个拓扑中Spout和Bolt的关系及如何组织它们之间的关系,最后将Storm任务提交到集群并实现实时词频统计。原创 2024-10-14 10:00:00 · 2005 阅读 · 52 评论 -
【智能大数据分析 | 实验二】Spark实验:部署Spark集群
智能大数据分析实验二,Spark实验:部署Spark集群。理解Spark体系架构,学会部署Spark集群,能够配置Spark集群使用HDFS。最后在master上提交并运行Spark示例代码WordCount,上传至HDFS。原创 2024-09-28 14:24:44 · 4119 阅读 · 43 评论 -
【智能大数据分析 | 实验一】MapReduce实验:单词计数
智能大数据分析实验一,MapReduce实验:单词计数。基于MapReduce思想,编写在Hadoop中依赖Yarn框架执行的MapReduce程序,并在Linux系统中运行程序,实现单词计数。原创 2024-09-21 13:20:58 · 2391 阅读 · 35 评论