- 博客(17)
- 收藏
- 关注
RSS订阅原创 IntelliJ IDEA Community闪退，电脑C盘突然爆满标红问题求解
前段时间清理了内存，C盘D盘都有几十个G的可用内存(我以计算机专业发誓所言为真)，今天打开了一下IntelliJ idea出现闪退，以管理员身份运行开始卡顿(任务管理器也不好使)，再然后就是电脑卡顿，内存不足，电脑C盘突然爆满标红（最近下载的文件都安装在D盘）。在网上搜索了idea闪退教程，修改 idea64.exe.vmoptions的内存设置，重启电脑，发现总内存不变，我实在想不到还能怎么清理C盘(QQ文件已清，VX在D盘)检查了电脑病毒问题，感觉没什么大问题。
2024-12-03 17:03:34
233
原创 Android Studio网络编程
Android 9.0 9.09.0 之后不允许使用 HTTP, 只能使用 HTTPS , 如果要使用 HTTP , 必须在 application 节点的 android:networkSecurityConfig 属性中配置 节点的 XML 配置文件;出现的部分低版本的写法在高版本jar中不存在的情况。okio下载地址：http://mvnrepository.com/artifact/com.squareup.okio/okio。
2024-11-18 21:05:55
476
原创 Spark Streaming输入源
/这个topic叫wordsendertest，2181是zookeeper默认的端口号，partition是topic里面的分区数，replication-factor是备份的数量，在kafka集群中使用，这里单机版就不用备份了。logfile中新建日志文件：请打开另外一个终端窗口2，在当前目录下再新建一个log1.txt文件(复制粘贴之前的文件无效)，停止监听程序，否则它一直在k窗口中不断循环监听，影响下一次开启，停止的方法是，按键盘Ctrl+D，或者Ctrl+C。
2024-11-18 20:58:24
1156
原创 Spark的Structured Streaming输入源
/ 再次开启新的终端或者直接按CTRL+C退出。安装python3的内置Kafka。数据源终端窗口出现运行结果。Ctrl+C停止运行。
2024-11-18 20:40:42
215
原创 Spark配置MySQL
修改配置文件/etc/mysql/mysql.conf.d/mysqld.cnf， 把bind-address = 127.0.0.1注释，即在bind-address = 127.0.0.1前面加‘#’1.导入mysql版本的mysql-connector-j-8.0.33.jar包。1.修改配置文件/etc/mysql/mysql.conf.d/mysqld.cnf。1.开启mysql shell。2.mysql旧版本语句 --2.启动mysql服务器。1. 启动MySQL数据库。
2024-11-18 20:38:48
615
原创 jupyter notebook安装插件
在终端/cmd/powershell/conda中运行一下命令： 二、添加到工具栏三、启用扩展四、安装插件 将第一行方框一栏去掉勾选，勾选选择插件，自动安装，在ipynb文件中刷新。Highlight selected word，字符选中高亮；Variable Inspector，变量视图；在ipynb文件中Edit选项卡下点击nbextensions config（或在浏览器中输入） 显示空白页（转步骤七链接）转步骤六 取消勾选，降级jupyter notebook六、
2024-09-28 11:12:18
3274
原创 Spark关于RDD的二次排序
1.这段SecondarySortKey()代码是什么意思，若接收数据为(B,6)，(A,4)，(A,1),说明SecondarySortKey()处理过程？2.为什么(A,1) 和 (A,4) 会被先比较，明明（B,6）是第一个数据？
2024-04-18 19:56:28
231
原创 Ubuntu20.04从“0”开始配置spark完整教程
PYTHONPATH这一行有个py4j-0.10.4-src.zip，这个zip文件的版本号一定要和“/usr/local/spark/python/lib”目录下的py4j-0.10.4-src.zip文件保持版本一致。Hadoop 的配置文件位于 /usr/local/hadoop/etc/hadoop/ 中，gedit ./etc/hadoop/core-site.xml或vim。inputFile = "file:///home/zzp/桌面/word.txt"。
2024-04-18 19:53:26
334
原创 Spark3.4.0(local模式) + Hbase(伪分布式)2.5.4 时报错
在我的版本上spark/jars/目录下没有htrace-core-3.1.0-incubating.jar，因此另外下载了htrace-core4-4.1.0-incubating.jar，在上述链接下载了。开启了hdfs以及hbase，创建了student表并已put插入数据；在Spark 2.0版本上缺少相关把hbase的数据转换python可读取的jar包，需要我们另行下载。在开始编程操作HBase数据库之前，需要对做一些准备工作。仁者见仁智者见智，在此希望得到各位指点，不胜感激。
2024-04-18 19:42:39
875
1
原创 ＜大数据平台与架构＞学习笔记（Hdfs、Hbase、Hive、MapReduce、Eclipse、Spark）
1 cd2 ls3 mkdir4 rmkdir5 cp6 mv7 rm8 cat9 touchvimgedit10 tar配置环境变量,使得每次输入shell命令可以省略（./bin/ 和 ./sbin）geditweb文件管理页面1进入hadoop安装目录jps连续两次开启hdfs后报错：没有数据节点,不能上传含内容的本地文本文件解决：关闭两次hdfs（删除tmp临时文件,格式化namenode）命令：./sbin/stop-dfs.sh # 关闭。
2023-12-30 07:56:12
564
原创 Hbase javaAPI编程（数据操纵）
（1）修改代码，创建名为“姓名缩写+学号后两位”的表；（3）实现增加数据；（2）修改代码，列族为姓名、成绩、所在院系；（1）增加数据为个人及个人学号前后学生信息；（2）成绩列族中包括至少两门课程的成绩；
2023-12-29 10:57:59
192
原创 Android Studio 安装并添加逍遥模拟器
血的教训，但我还记不住，我Android Studio 安装了两次，逍遥模拟器也安装了三次重新安装Android Studio前一定要把之前的Android Studio文件下载干净，包括但不限于控制面板的卸载程序，主要的是删除 C:\Users\用户名目录下的一些.开头的文件以及其隐藏文件夹AppData目录下的一些文件，具体跟着教程走安装sdk卡这了，跟网上的教程结果不一样，只能点cancel，但退不出去，最后在任务管理器强制关掉Android Studio正常的是这样式儿的~
2023-11-27 14:58:23
5893
2
hadoop-eclipse-plugin-3.3.1.jar
2024-01-03
Android Studio程序开发jar包
2024-01-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人