
大数据系列
文章平均质量分 84
本专栏将深入剖析数据采集、存储、处理与分析全流程。涵盖 Hadoop、Spark 等核心技术,通过电商销售、社交平台等实际案例,助你理解大数据架构搭建、分布式计算运用。在这里,你能学会从海量数据挖掘价值,提升大数据实战能力,解锁数据驱动创新的无限可能。
程序员码龙
曾就职于菊厂、福报厂。现某金融国企技术leader。主要深耕支付&风控&AI模型领域。热爱分享,不定期分享JAVA技术干货;AI 技术干货,包括并不限于:AI资讯、AI智能体、AI数字人、AI工具、RPA、AI编程、AI大模型应用开发、AI绘画、AI视频、AI 实操变现等
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Centos7安装Flink+Kafka+Zookeeper并允许外部访问
组件默认端口外部可访问配置Zookeeper2181配置文件已支持Kafka9092Flink8081至此,你已经成功在 CentOS 7 上搭建好了一个基础的实时处理平台。如需添加为 systemd 后台服务、支持高可用(HA)、YARN 集成或 Docker 化部署,也可以继续深入。欢迎继续提问我帮你扩展文章!是否需要我将这篇内容生成 Markdown 文件或 .docx 文档?原创 2025-06-25 11:26:39 · 586 阅读 · 0 评论 -
实时反欺诈:基于 Spring Boot 与 Flink 构建信用卡风控系统
通过结合 Spring Boot 的快速开发和 API 服务能力,以及 Flink 强大的实时流计算能力,我们可以构建一个架构清晰、可扩展、高性能的实时反欺诈系统。该架构的核心在于将重度的、有状态的模式计算任务交由 Flink 异步处理,而将轻量级的、无状态的服务查询交由 Spring Boot 同步处理,并通过 Redis 作为高速缓存进行解耦。理解并接受这种异步架构带来的最终一致性,是设计和实施此类系统的关键。原创 2025-06-23 14:59:39 · 1212 阅读 · 0 评论 -
2.Hadoop集群搭建,前期准备(虚拟机方式)
前言:Mac-搭建Hadoop集群我用到了:VMware Fusion、CentOS7、FileZilla、jdk-8u181-linux-x64.tar.gz和hadoop-2.7.7.tar.gz安装VMware Fusion,下载centos7镜像,https://mirrors.aliyun.com/centos/7.7.1908/isos/x86_64/,选择everyth...原创 2019-12-23 11:06:39 · 246 阅读 · 0 评论 -
Hadoop环境搭建——前期准备
1, 基础环境准备准备三台服务器 centos7, 云服务器或者虚拟机配置好的 106.52.88.138 129.204.31.120 193.112.100.146修改主机名2.1 在 root 账号下用命令:vim /etc/sysconfig/network ![在这里插入图片描述](https://img-blog.csdnimg.cn/2019...原创 2019-06-28 19:18:01 · 342 阅读 · 0 评论