- 博客(13)
- 收藏
- 关注
原创 day01-大数据技术之计算框架Spark-4.0.0环境搭建(本地模式,Standalone模式,Yarn模式)
最新IT资源:cowcowit.com。
2025-03-02 14:16:18
246
原创 Elasticsearch-7.8.0安装最全(mac、Linux、window、centos7.5集群、docker)
Elasticsearch安装localhost、Kibana安装localhost适用于mac、window、linux单机测试。
2024-03-12 01:49:13
1611
1
原创 mac 防止.Ds_store 生成
在Mac上,.DS_Store文件是macOS系统自动在文件夹下生成的,用于保存该文件夹的一些属性,如排序方式、图标大小等。这些文件在macOS下是隐藏的,但在其他系统(如Windows)下可能会显示出来,并且可能被视为不必要的文件或甚至恶意文件。如果你在开发过程中使用Git来管理代码库,可以在代码库的根目录中创建一个名为.gitignore的文件。在这个文件中,你可以添加.DS_Store来防止这些文件被提交到代码库中。在打开的编辑器中,添加一行.DS_Store,然后保存并关闭文件。
2024-03-12 01:43:51
2224
1
原创 2024.02最新版DataX源码编译(解决踩坑)
最常见的报错就是缺少依赖问题:org.pentaho:pentaho-aggdesigner-algorithm:jar:5.1.5-jhyde: Could not find artifact org.pentaho:pentaho-aggdesigner-algorithm:jar:5.1.5-jhy也可能遇到其他jar包问题。解决方案:下载官网编译好的安装包。注意1:生成到maven仓库地址是.m2/repository 建议配置maven的时候仓库是.m2/repository。
2024-02-03 14:45:38
1837
1
原创 Structured Streaming 基于 event-time 的窗口(Java语言)
在 Structured Streaming 中, 可以按照事件发生时的时间对数据进行聚合操作, 即基于 event-time 进行操作。我们现在想计算 10 分钟内的单词, 每 5 分钟更新一次, 也就是说在 10 分钟窗口 12:00 - 12:10, 12:05 - 12:15, 12:10 - 12:20等之间收到的单词量。注意, 12:00 - 12:10 表示数据在 12:00 之后 12:10 之前到达.单词应该增加对应于两个窗口12:00 - 12:10和12:05 - 12:15的计数。
2024-01-28 14:13:33
470
1
原创 启动bin/spark-shell警告:WARN NativeCodeLoader: Unable to load native-hadoop library for your platform.
启动bin/spark-shell警告:WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable。原因:spark告诉你系统无法加载本地的Hadoop库,但仍然会使用内置的Java类来代替。
2024-01-20 21:00:32
858
1
原创 cpu处理器ARM架构和amd架构
当你下载软件的时候就可用到,先查看电脑CPU的架构类型。windowd电脑查看:`我的电脑`-> `属性`->`处理器`Linux(mac)电脑查看:uname -a。cpu处理器ARM架构和amd架构。
2023-12-20 01:24:04
867
1
原创 Python-3.12.0源码包编译安装安装到centos7.5
Python-3.12.0源码包编译安装安装到centos7.5(其他版本类似原理相同)
2023-12-15 20:50:45
1769
原创 MySQL8.0.34安装到centos7.x
官网下载MySQL:https://downloads.mysql.com/archives/community/# MySQL服务器,这是安装了mysql服务器程序,用于运行MySQL数据库服务器。# MySQL库文件,包含了一些用于链接MySQL库的静态和动态库文件。# MySQL服务器调试信息,包含用于调试MySQL服务器的调试信息。# MySQL测试文件,包含了一些用于测试MySQL功能的测试文件。配置文件存放路径:/usr/share/和/etc/mysql。
2023-12-12 15:00:44
991
原创 iOS底层项目班2023
iOS底层开发是指在iOS操作系统中,通过Objective-C或Swift语言,使用Core Foundation、Core Graphics、Core Animation等底层框架进行开发,实现对系统底层的控制和操作。Core Foundation是一套基于C语言的框架,提供了许多基础的数据类型和函数,如字符串、数组、字典、集合等,以及内存管理、线程管理等底层功能。总之,iOS底层开发是一项非常重要的技能,它可以让程序员更加深入地了解iOS操作系统的底层结构,实现更加高效、精细的应用程序。
2023-08-22 10:54:15
96
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人