
Big Data
文章平均质量分 58
小蓝的程序猿生活
学生
记录所学知识
展开
-
PySpark中mapPartitionsWithIndex等map类算子生成器函数问题 - return\yield
顾名思义,本文讲述了的相关问题——return 和 yield的使用。首先先讲结论,在使用map等迭代生成的算子时最好使用。原创 2025-02-28 16:15:30 · 441 阅读 · 0 评论 -
Spark-hadoop集群中8020:Connection refused
前提条件,使用standalone模式下的Spark,使用spark-shell运行example中的相关测试案例spark-examples_2.12-3.0.0.jar,来。通过netstat查看8020端口,发现该端口不存在,是属于hadoop集群中一个内部通讯的端口。经过查看端口8020的使用情况发现,8020端口一般作为hadoop2.x系列的内部通讯端口使用。通过查看namenode端口的使用发现,hadoop3.x默认使用9820端口,因此,发现问题所在是在。,但是8020端口拒绝连接。原创 2023-07-29 00:30:00 · 3337 阅读 · 0 评论 -
CentOs7-本地ping不通虚拟机
网关、子网、子网掩码均配置没问题,vi /etc/sysconfig/network-scripts/实际上,在尝试之后本机均ping不通。发现网络的处于NAT模式下,需要选择下方的自定义方法,自定义为为VMnet8,点击“确定”。在确保vmware网络虚拟编辑器配置正确的前提下,查看虚拟机的网络适配器。但是主机无法ping到虚拟机的ip:192.168.10.111。虚拟机ping 127.0.0.1可以ping通。修改之后即可从本机ping通到虚拟机,之后即可通过。等软件连接到虚拟机。原创 2023-07-25 01:45:00 · 2481 阅读 · 3 评论 -
sql server2019安装详细教程
原创 2021-04-04 17:24:19 · 1134 阅读 · 0 评论