- 博客(692)
- 资源 (19)
- 收藏
- 关注
原创 【备考神器推荐】智考通 StudyFlow:一个把「艾宾浩斯记忆曲线」用到极致的打卡学习系统
如果已经计划考试,但学习没有动力,拆解的计划没有完成,没有人督促的情况下,可以使用这款智考通系统,能够根据计划督促自己,跟踪进度,沉淀题库,找到同行者。
2026-07-25 18:12:07
405
原创 Apache SeaTunnel详解与部署(最新版本2.3.13)
SeaTunnel是一个非常易用、超高性能的分布式数据集成平台,支持实时海量数据同步。每天可稳定高效同步数百亿数据,已被近百家企业应用于生产。Apache SeaTunnel是中国开发者主导的项目,也是Apache基金会中第一个诞生自中国的数据集成平台项目。SeaTunnel原名Waterdrop,于2017年由乐视创建,并于同年在GitHub上开源2021年10月改名为SeaTunnel2021年12月9日SeaTunnel进入Apache孵化2023年6月1日。
2026-06-25 11:49:57
1412
原创 Windows系统下Claude Code/CodeX+GLM 5.2编程实践
是 AI 公司 Anthropic 于正式推出的,基于 Claude Sonnet / Opus 大模型打造,区别于传统 IDE 代码补全插件,是一套可自主完成全流程开发的命令行编程工具。简单理解:它是能直接操作本地文件、运行命令、自主规划开发任务的,而非仅提供单行代码提示的补全工具。
2026-06-24 11:26:46
1960
原创 Apache Doris 软件部署(2.1.7版本)
如果有返回值,则是支持avx2,如果没有返回值则需要下载no avx2。vim /etc/fstab 注释掉带swap分区。如果没有返回,则不支持avx2,后续下载包有影响。修改虚拟内存区域至少2000000。编辑fe.conf文件。编辑be.conf文件。
2025-01-01 19:26:24
2579
原创 Apache Celeborn详解与部署应用
Apache Celeborn 源于自研的 EMR Remote Shuffle Service,旨在解决中间数据遇到的及问题。
2024-10-26 12:06:36
2893
原创 Apache Linkis介绍与部署
Apache Linkis 计算中间件项目,是由微众银行大数据平台团队在2019年7月进行开源,并于2021年8月正式捐献给全球顶级开源社区 Apache 软件基金会(ASF),成为 ASF 孵化项目。Apache 软件基金会(ASF)孵化器于2022年12月03日,通过了 Apache Linkis 计算中间件项目的孵化毕业投票。2023年01月18日,Apache 软件基金会官方宣布 Apache Linkis 顺利毕业,成为 Apache 顶级项目(TLP)。
2024-10-17 09:15:39
2412
原创 Apache Livy介绍与部署
Apache Livy 是一个为 Apache Spark 提供的强大而灵活的 RESTful 接口,旨在让开发者无论在何处,都能轻松地与 Spark 进行交互。这个开源项目支持执行代码片段或程序,并且可以在本地 Spark 环境或 Apache Hadoop YARN 集群中运行。应用场景总的来说,Apache Livy 是一个强大、开放且易于使用的工具,对于那些希望在 Spark 上构建更高效、更灵活的数据处理系统的开发者而言,它是一个理想的选择。
2024-10-16 11:14:01
2328
原创 Apache Spark4.1.3 一键部署与卸载脚本
本文介绍了一套基于三台主机(node11/node12/node13)的Spark 4.1.3集群一键部署与卸载方案。在已配置主机名、SSH免密、JDK17及Hadoop 3.5.0的前提下,通过spark_deploy.sh脚本自动完成Scala 2.13.16与Spark的安装、配置分发、集群启动及进程验证。脚本支持重复执行,避免配置重复。配套的spark_uninstall.sh可安全卸载Spark与Scala,保留JDK和Hadoop环境。整个过程自动化程度高,适用于教学与生产环境快速搭建与清理。
2026-11-02 20:23:57
71
原创 Apache Flink 2.3.0(最新版本)
Flink是一个用于无界与有界数据流的有状态分布式处理引擎,具备内存级执行速度和弹性扩展能力。其核心特性包括“边来边算”的无界流处理、统一批流处理的有界流模型,以及高效的状态管理。Flink起源于柏林的Stratosphere研究项目,2014年成为Apache顶级项目,阿里巴巴的Blink分支在SQL性能与支持方面贡献显著,推动了Flink SQL的发展。Flink 2.0引入存算分离、物化表等重大更新。学习者可通过官方文档、安装包(如阿里云镜像站)获取资源,掌握从架构到部署的全链路知识。
2026-11-02 20:15:55
277
原创 Postgres高版本不支持MD5处理方式
解决方案:修改 PostgreSQL 服务端,降级为 MD5 认证(临时兼容老驱动,安全性下降)只改参数不改密码,原有密码 hash 还是 SCRAM,不生效)PG10+ 默认就是 scram-sha256,低版本第三方依赖库不支持。,对应客户端 IP 行,把。
2026-10-16 20:53:37
177
原创 LiteLLM 介绍与部署
LiteLLM是开源的统一LLM网关,支持100+模型通过OpenAI兼容接口调用。本教程介绍其核心概念(MasterKey、VirtualKey等),并通过pip与Docker两种方式部署,实现模型管理、虚拟密钥创建、连通性测试及代码调用。实验环境需配置Linux服务器或WSL,开放4000端口,安装PostgreSQL,获取上游APIKey(如DeepSeek)。重点掌握Docker部署流程:生成密钥、启动服务、登录Web界面,添加模型并测试,最终使用VirtualKey通过curl或OpenAI SD
2026-10-13 16:00:34
383
原创 YARN介绍与实战
本讲义系统讲解YARN原理与实践,涵盖其在Hadoop 2.0中的核心作用——解耦资源管理与计算框架,实现多任务共享集群资源。重点解析YARN四大组件(RM、NM、AM、Container)的职责与协作机制,对比FIFO、Capacity、Fair三种调度器特性,掌握yarn-site.xml关键配置及常用命令。通过“单词计数”实验,实现数据上传、作业提交、状态监控与结果查看全流程操作,强化对资源调度、任务执行与集群管理的理解,具备独立部署与运维YARN集群的能力。
2026-10-13 07:46:08
325
原创 Window环境MySQL8 部署与远程访问设置
本文详细介绍了MySQL 8.0.22在Windows系统上的安装与配置流程,包括选择Serveronly类型安装、设置root密码、配置防火墙及服务启动等步骤。随后通过Navicat连接测试本地MySQL,并指导如何设置远程访问:创建允许任意主机登录的root用户,获取服务器IP地址,实现局域网内其他设备远程连接。最后提供常见连接失败排查方法,涵盖网络连通性、权限授权、防火墙规则和服务状态等问题,确保部署成功。
2026-10-12 14:25:55
269
原创 Hive介绍与部署(Java17+Docker+MySQL+Hive4.1.0)
Hive是基于Hadoop的数据仓库工具,本质为将HQL转换为MapReduce任务,实现海量结构化数据的类SQL分析。其数据存储于HDFS,计算依赖MapReduce,运行在Yarn上。优点包括易用性强、降低开发门槛、支持自定义函数;缺点为执行延迟高、不支持实时查询与迭代算法。适合离线大数据分析,不适合小数据或实时场景。架构核心组件包括Client、Metastore(元数据存MySQL)、Driver(解析/编译/优化/执行)和HiveServer2。与传统数据库相比,Hive面向分析、读多写少、延迟高
2026-10-12 10:20:06
426
原创 浏览器开发者工具使用
本文以Chrome浏览器为例,介绍如何使用开发者工具(DevTools)分析网页请求。通过F12或菜单打开DevTools,进入Network面板,刷新页面后可捕获浏览器与服务器间的网络请求。重点查看请求头(Headers),获取请求地址、方式、状态码及关键请求头如User-Agent、Cookie等,为编写爬虫程序模拟浏览器行为提供依据。结合Filter、Fetch/XHR等功能,可高效定位动态加载数据,提升爬虫开发效率。
2026-10-10 11:32:40
376
原创 Python环境安装与PyCharm的第一个项目
本文详细指导Python环境安装与PyCharm首个项目创建流程:先卸载旧版Python,再通过安装包或控制面板彻底清除;接着安装Python 3.13.3,务必勾选“添加到PATH”和管理员权限选项;安装后在CMD中验证python与pip命令,成功则安装完成;最后在PyCharm中新建工程,配置Python解释器为本地Python313路径,创建demo01.py文件并编写代码,使用requests库获取百度首页源码,运行成功即完成首个项目。
2026-10-10 11:29:48
379
原创 【Python爬虫】02 网页请求原理
本文系统讲解了浏览器加载网页的全过程,涵盖域名解析、请求发送、服务器响应与页面渲染。深入剖析HTTP基础,包括URL结构、请求/响应格式及GET/POST区别。介绍了网页开发技术(HTML/CSS/JavaScript)、结构(DOM树)、分类(静态/动态)及数据格式(XML/JSON)。重点掌握Fiddler抓包工具的安装、HTTPS解密配置与会话分析,以及Chrome开发者工具中网络面板的使用方法,为理解网络爬虫原理奠定坚实基础。
2026-10-09 19:30:13
390
原创 【Python爬虫】01认识网络爬虫
本文系统介绍了网络爬虫的基础知识,涵盖其概念、分类(通用、聚焦、增量式、深层爬虫)及工作原理。阐述了爬虫在搜索引擎、电商监控、舆情分析等场景的应用,强调遵守Robots协议的重要性,并列举了请求伪装、代理设置、动态页面处理等防反爬策略。重点介绍使用Python实现爬虫的优势及三步流程:抓取、解析、存储。最后结合AIGC工具如CodeGeeX,展示如何通过自然语言快速生成和优化爬虫代码,提升开发效率。
2026-10-09 19:23:35
1390
原创 解决Idea项目中文编码问题
在pom.xml中配置maven-compiler-plugin插件,指定源码和目标版本为8,编码格式为UTF-8,确保项目编译时使用正确的字符集,避免中文乱码问题。
2026-09-29 12:12:45
173
原创 01、Android基础入门
本章系统介绍Android开发基础,涵盖1G至5G通信技术演进、Android发展历程与体系结构。重点讲解AndroidStudio环境搭建(含SDK下载、模拟器创建),并完成首个HelloWorld程序的创建与运行。通过资源管理(字符串、颜色、尺寸、图片、主题等)实践,掌握XML与Java中资源引用方式。结合单元测试与Logcat日志调试,实现程序功能验证与问题排查,为后续开发奠定坚实基础。
2026-09-18 13:19:01
189
原创 serv-u ftp server v15.5.2软件使用
是一款功能强大的 FTP 服务器软件,由 SolarWinds 公司开发,广泛应用于 Windows 平台。它支持 FTP、FTPS(FTP over SSL/TLS)以及 SFTP(SSH File Transfer Protocol)等多种文件传输协议,能够帮助企业和个人快速搭建安全、稳定的文件共享与传输服务。Serv-U 的核心优势在于其易用性和安全性:通过图形化管理控制台,管理员可以直观地完成域创建、用户账户管理、目录权限分配、带宽限制以及 SSL 加密证书配置等操作。
2026-09-18 12:40:10
70
原创 云途物流API开发实战:寄件下订单接口完整实现
在跨境电商、ERP物流系统开发中,物流对接是核心刚需环节。云途物流(YunExpress)作为主流跨境物流服务商,提供了成熟的开放API接口,支持在线创建物流订单、获取运单号、轨迹查询等核心能力。本文基于Java,完整实现云途物流寄件下单接口,包含参数校验、本地草稿落库、API请求体组装、响应解析、异常容错、数据回写全流程。代码可直接商用,同时解决了官方文档字段兼容、空值过滤、多格式响应解析等开发痛点。核心实现思路参数合法性前置校验,拦截无效请求;订单先以草稿状态落库,避免API调用失败数据丢失;
2026-07-09 15:55:49
711
原创 AI 编程智能体IDE-ORCA介绍与使用
专为 AI 编程智能体打造的工作区 IDE。可并行运行 Claude Code、Codex 与 OpenCode 三大模型,支持工作树隔离、极速预览、代码差异评审以及智能体实时状态监控。并排运行 Claude Code、OpenClaude、Codex 或 OpenCode — 每个都在自己的 worktree 中运行,并在一个地方统一跟踪。
2026-07-07 10:12:29
1242
原创 解决Claude Code使用第三方大模型变慢问题(CLAUDE_CODE_ATTRIBUTION_HEADER)
你用的是映射自定义模型名称,归因头部里原生 Claude 的计费标识会干扰网关的模型路由逻辑,关闭后网关能正常识别并分发到对应 GLM 编码模型。关闭 Claude Code 自带的官方计费归因请求头,专门用于对接 GLM 等第三方模型,解决报错、提速、降低 token 消耗,是你当前自定义模型场景的必配参数。
2026-07-07 10:02:28
787
原创 Claude Code基础使用
Auto-accept 用于样板代码和测试,Plan mode 用于生产关键文件,Normal 用于其他场景。这是 Claude Code 的主配置文件,用于管理基本设置和 MCP 服务。时,如果使用了第三方模型,它会让你变慢、变卡,进而多消耗很多 token。如果你使用的是第三方模型、本地模型或中转网关,建议直接关闭这个归属信息。4. CLAUDE.md 一次配好,每次会话省 10-15 分钟。这是项目级别的配置文件,用于管理环境变量和项目特定设置。不打断上下文就能提问,放心多用。,不是等到 95%。
2026-07-06 10:09:51
554
原创 Flume1.11.0配置与简单使用(Java17环境)
将apache-flume-1.11.0-bin.tar.gz软件包上传至/usr/local/soft文件夹下二、添加系统环境变量编辑环境变量添加如下内容使环境变量生效三、修改Flume环境变量拷贝环境变量文件添加内容四、配置文件客户端(Source):收集信息拷贝配置文件:配置文件内容:#分别指定agent的sources,sinks, channels的名称 名称可以自定义五、启动其中:-n:agent名称-c:配置文件路径conf-f
2026-06-25 09:13:24
300
原创 Linux环境下Spark-4.1.2(最新版本)集群部署
Apache Spark 是一个快速的,通用的集群计算系统。它对 Java,Scala,Python 和 R 提供了的高层 API,并有一个经优化的支持通用执行图计算的引擎。它还支持一组丰富的高级工具,包括用于 SQL 和结构化数据处理的 Spark SQL,用于机器学习的 MLlib,用于图计算的 GraphX 和 Spark Streaming。Apache Spark是一个开源的分布式计算框架,最早由加州大学伯克利分校AMPLab团队在2012年发布。
2026-06-25 09:10:44
474
原创 Linux环境下部署Zookeeper3.9.5(最新版)集群部署
在 ZooKeeper 中,启动时看到 "Client SSL: false" 的信息,意味着 ZooKeeper 服务器没有启用客户端 SSL/TLS 加密。在 ZooKeeper 中,启动时看到 "Client SSL: false" 的信息,意味着 ZooKeeper 服务器没有启用客户端 SSL/TLS 加密。进入到每个节点,修改/usr/local/soft/apache-zookeeper-3.9.5-bin/data/myid值。)中,你需要设置几个属性来启用 SSL。
2026-06-23 17:07:37
320
原创 Linux环境下Hive 4.1.0(最新版本)部署
重大变化:Hive4.0.0中,HiveCLI已经被弃用了,代替它的是Beeline。所以,启动Hive4.0.0时,会默认进入Beeline命令行界面,而不是HiveCLI,同理Hive4.1.0,截止到2024年10月8号Hive3.x系列版本已不再维护!下载路径:Index of /dist/hive将apache-hive-4.1.0-bin.tar.gz上传至linux系统/usr/local/soft/路径下3、修改系统环境变量添加内容:保存:4、修改hive环境变量
2026-06-23 17:07:05
592
原创 Linux环境下Hadoop3.5.0(最新版本)集群部署
本文详细记录了Hadoop 3.5.0集群的部署过程:1. 通过虚拟机克隆创建node12和node13节点,修改主机名及静态IP配置;2. 配置三节点间SSH免密登录;3. 同步Hadoop配置文件至所有节点;4. 格式化HDFS并在主节点启动集群。关键步骤包括:workers文件配置、集群文件拷贝、namenode格式化及防火墙检查。常见问题解决方案涵盖:集群ID不一致处理、权限问题修正、端口状态检查等。最后可通过9870和8088端口访问HDFS和YARN的Web界面验证集群状态。部署中需特别注意配置
2026-06-22 22:24:56
469
原创 Linux环境下Hadoop3.5.0(最新版本)单机部署
本文详细介绍了Hadoop 3.5.0在Linux环境下的安装配置过程。主要内容包括:环境准备(虚拟机部署、CentOS安装、网络配置等)、JDK17安装、Hadoop软件包上传解压、关键配置文件修改(hadoop-env.sh、core-site.xml、hdfs-site.xml等)、环境变量设置、HDFS格式化以及启动验证等步骤。文章提供了完整的配置示例和参数说明,并强调了格式化操作的注意事项。最后通过浏览器访问HDFS和YARN的Web界面进行验证,确保Hadoop集群成功运行。该教程适用于单节点部
2026-06-22 21:41:08
517
原创 全网最强自建服务清单 Awesome-Selfhosted 完整入门指南
自托管领域公认权威开源清单。简单定义:Self-host(自托管)指不使用阿里云、百度网盘、Google 相册、Notion 等第三方 SaaS 云服务,把应用部署在自己的服务器、旧电脑、树莓派、NAS 上,数据 100% 归自己掌控。Awesome-Selfhosted 是全球社区持续维护的免费开源自托管软件大全,收录超 2000 款工具,按场景精细分类,替代所有商用云服务。数据完全私有,不存在平台封号、文件和谐长期使用无订阅费用,硬件一次性投入高度自定义,功能按需修改、拓展。
2026-06-19 14:42:29
527
原创 【大模型-Skill】-文章去AI味工具
去除文本中的AI写作痕迹,让文字读起来更像人类写作。当用户要求'去AI味'、'降AI味'、'让回复更像人话'、'润色'、'改写得更自然'时使用。检测并修复:AI高频词汇、过度结构化、虚假客观性、机械化连接词、完美主义陷阱、公式化结尾、过度修饰、情感缺失等问题。
2026-06-19 14:41:22
2103
odjbc6g.jar sdoapi-11.2.0
2018-06-22
hellocharts-library-1.5.8.jar
2017-11-06
hibernate-spatial-4.3
2017-09-12
机器学习资料
2018-06-19
HarmonyOS NEXT-给应用添加通知和提醒
2024-07-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅