自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(32)
  • 收藏
  • 关注

原创 WisQuery 一套开箱即用、可 Docker 一键部署的 智能问数 + 知识库 + 智能问答 一体化平台

一套开箱即用、可 Docker 一键部署的一体化平台。后端 FastAPI + PostgreSQL(pgvector)+ pgvector 向量库,前端 React + Antd,遵循 OpenAI 兼容协议,可自由接入任何 OpenAI 兼容 LLM(OpenAI / DeepSeek / 通义千问 / 智谱 / Ollama / 自建网关…)。

2026-08-24 10:26:08 337

原创 Linux服务器挂载、分区

摘要:本文提供了两个Shell脚本,用于在12块磁盘(sdb到sdm)上执行分区和挂载操作。

2026-05-11 08:59:49 127

原创 Hive Udf函数AES加密

【代码】Hive Udf函数AES加密。

2026-05-11 08:45:50 119

原创 超详细!Linux 两台服务器 MySQL 主主同步(双主)配置教程

MySQL主主同步高可用配置指南 本教程详细介绍了在CentOS7/8环境下配置MySQL5.7/8.0主主同步的完整流程。通过双主架构实现两台服务器互为主从,均可读写,具备故障自动切换和负载分担能力。核心步骤包括:1)基础环境准备(关闭防火墙、配置主机名);2)修改MySQL配置文件(设置server-id、二进制日志、自增参数等);3)创建同步专用账号;4)互为主从配置;5)同步状态验证和功能测试。教程特别强调了避免主键冲突的关键配置(auto_increment_increment和auto_incr

2026-05-09 15:05:37 625

原创 Kubernetes Dashboard 官方图形面板国内安装

Kubernetes Dashboard是Kubernetes官方提供的Web管理界面,支持可视化查看集群资源、图形化运维操作、实时监控与排错等功能。安装时可通过阿里云镜像加速部署,创建admin用户并获取Token进行访问。通过kubectl proxy方式可在本地浏览器访问Dashboard界面,输入Token后即可管理Kubernetes集群。该工具简化了集群管理操作,支持RBAC权限控制,为运维人员提供了便捷的可视化操作界面。

2026-05-08 15:55:06 133

原创 DeepSeek+Ollama+AnythingLLM 免费搭建企业级共享知识库

零成本搭建企业级本地知识库,助力员工培训与发展,支持业务决策与问题解决,促进知识共享与传播

2025-03-04 15:01:39 1473 1

原创 Flink 操作 HDFS 报错 “hadoop is not in the classpath/dependencies“ 解决方法

Flink 操作 HDFS 报错 “hadoop is not in the classpath/dependencies“ 解决方法

2024-12-01 18:43:32 1127

原创 Flink 聚合函数(AggregateFunction)和全窗口函数数(full window functions)的结合使用示例

增量聚合函数处理计算会更高效。举一个最简单的例子,对一组数据求和。大量的数据连续不断到来,全窗口函数只是把它们收集缓存起来,并没有处理;到了窗口要关闭、输出结果的时候,再遍历所有数据依次叠加,得到最终结果。而如果我们采用增量聚合的方式,那么只需要保存一个当前和的状态,每个数据到来时就会做一次加法,更新状态;到了要输出结果的时候,只要将当前状态直接拿出来就可以了。增量聚合相当于把计算量“均摊”到了窗口收集数据的过程中,自然就会比全窗口聚合更加高效、输出更加实时。

2024-11-27 21:19:52 847

原创 大数据学习之路--IDEA flink写入 sink到kafka某个主题的数据(Java 版)

大数据学习之路--IDEA flink写入 sink到kafka某个主题的数据(Java 版)

2024-11-26 20:18:59 401

原创 大数据学习之路--IDEA flink读取kafka某个主题的数据并打印输出到控制台(Java 版)

flink读取kafka某个主题的数据并打印输出到控制台(Java 版)

2024-11-24 16:49:44 560

原创 Spark大数据学习之路--IDEA SparkStreaming读取kafka某个主题的数据并打印输出到控制台(Java 版)

IDEA SparkStreaming读取kafka某个主题的数据并打印输出到控制台 Java 版

2024-11-20 22:04:16 349

原创 Spark大数据学习之路八 -- RDD需求实验:根据某平台用户行为分析出Top10热销产品

【代码】Spark大数据学习之路八 -- RDD需求实验:根据某平台用户行为分析出Top10热销产品。

2024-10-09 16:28:57 345

原创 Spark大数据学习之路七 -- RDD的序列化

【代码】Spark大数据学习之路七 -- RDD的序列化。

2024-10-08 18:11:07 260

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 11--KV-sortByKey

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 11--KV-soutByKey。

2024-10-08 12:08:26 240

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 10--KV-reduceByKey

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 10--KV-reduceByKey。

2024-10-07 15:59:04 285

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 9.0--KV-groupByKey

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 9.0--KV-groupByKey。

2024-10-07 15:16:49 266

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 8.0--KV-wordCount

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 8.0--KV-wordCount。

2024-10-07 14:56:06 307

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 7.0--KV 方法 mapValues

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 7.0--KV 方法 mapValues。

2024-10-07 14:22:01 268

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 6.0--KV 类型数据

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 6.0--KV 类型数据。

2024-10-07 12:43:57 500

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动 5.0--distinct和 sortBy

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动 5.0--distinct和 sortBy。

2024-10-06 10:45:12 292

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动4.0--groupby

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动3.0--groupby。

2024-10-03 19:16:32 213

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动3.0--flatmap

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动3.0--flatmap。

2024-10-03 19:11:06 400

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动2.0--filter

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动2.0--filter01。

2024-10-03 14:48:53 351

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动1.0--map03(λ表达式)

【代码】Spark大数据学习之路七 -- RDD的方法两大类转换和行动1.0--map03(λ表达式)

2024-10-03 14:14:15 330

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动1.0--map02(λ表达式)

【代码】Spark大数据学习之路七 -- RDD的方法两大类转换和行动1.0--map02(λ表达式)

2024-10-03 13:52:25 388

原创 Spark大数据学习之路六 -- RDD的方法两大类转换和行动1.0--map01

【代码】Spark大数据学习之路六 -- RDD的方法两大类转换和行动1.0--map01。

2024-09-30 09:30:01 658

原创 Spark大数据学习之路五 -- RDD的方法两大类转换和行动1.0

【代码】Spark大数据学习之路五 -- RDD的方法两大类转换和行动1.0。

2024-09-29 20:28:51 249

原创 Spark大数据学习之路四 -- RDD分区及分区数设定

本次实验环境需要创建Win11上的hadoop 环境。

2024-09-28 19:11:35 468

原创 Spark大数据学习之路三 -- 对接文件数据源构建RDD对象

data:test.txt 本地文件数据。

2024-09-27 18:48:18 301

原创 Spark大数据学习之路二 -- 对接内存数据源构建RDD对象

【代码】Spark大数据学习之路二 -- 对接内存数据源构建RDD对象。

2024-09-27 18:37:18 243

原创 Spark大数据学习之路一--IDEA java代码Spark环境搭建 SparkConf JavaSparkContext使用示例

【代码】IDEA java代码Spark环境搭建 SparkConf JavaSparkContext使用示例。

2024-09-25 19:33:09 259

原创 超长超详细本地VMware搭建Centos.7.X+Ambari+HDP集群

挂载mount -o loop /usr/local/centos/openEuler-24.03-LTS-x86_64-dvd.iso /var/www/html/centos。初始化成功(下载的connector-java*.jar,要改名为 mysql-connector-java.jar,放到/usr/share/java/目录)永久禁止SELinux 自动启动,编辑/etc/selinux/config 文件, (vi /etc/selinux/config)

2024-09-22 12:30:08 4050

hbase2.x hbck2

hbase

2023-12-21

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除