- 博客(18)
- 收藏
- 关注
RSS订阅原创 Spark SQL ---结构化数据文件处理
创建DataFrame的两种基本方式：•已存在的RDD调用toDF()方法转换得到DataFrame。•通过Spark读取数据源直接创建DataFrame。若使用方式创建DataFrame，可以使用spark.read从不同类型的文件中加载数据创建DataFrame。spark.read的具体操作，在创建Dataframe之前，为了支持RDD转换成Dataframe及后续的SQL操作，需要导入._包启用隐式转换。若使用。
2024-05-13 16:45:07
960
原创 Spark编程基础与进阶
1.parallelize()方法有两个输入参数，说明如下。•要转化的集合，必须是Seq集合。Seq表示序列，指的是一类具有一定长度的、可迭代访问的对象，其中每个数据元素均带有一个从0开始的、固定的索引。•分区数。若不设分区数，则RDD的分区数默认为该程序分配到的资源的CPU核心数。makeRDD()方法有两种使用方式。•第一种方式的使用与方法一致；•第二种方式是通过接收一个是Seq[(T,Seq[String])]参数类型创建RDD。
2024-05-13 16:16:19
1321
原创 Scala基础
中国移动、中国联通和中国电信这3种类型的手机号码都有特定的手机号码段。•中国移动的手机号码段有1340～1348、135～139、150～152、157～159、182～184、187、188、178、147、1705等；•中国联通的手机号码段有130～132、155、156、185、186、176、145、1709等；•中国电信的手机号码段有133、1349、153、180、181、189、1700、177等。本节的任务如下。
2024-05-13 14:39:28
1395
原创 应用实战：无人售货机零售项目ECharts展现
2.可视化展示销售情况总分析了解无人售货机零售项目背景可视化使用到的数据表如表所示。2.可视化展示销售情况总分析。
2024-05-13 09:38:14
2146
2
原创 Echarts——异步数据加载案例
这段代码创建了一个柱状图来展示月度销售数据，使用了ECharts进行数据可视化处理，并模拟了异步加载数据的过程。
2024-04-24 17:22:26
462
原创 多表联动图练习
绘制一个多表联动图主题是专升本目标院校报率比并采取echarts的事件和行为锁定目标院校的专业官网。要求：1.标题2.触发3.事件行为
2024-04-22 11:32:25
373
原创 动态切换主题及自定义ECharts主题
以做到个性化定制。4.ECharts是一款原生js写的图表类库，ECharts为打造一款数据可视化平台提供了良好的图表支持。百度Echarts团队提供了几种风格的主题。
2024-04-15 10:41:51
1152
1
原创 Spark-Scala算法例题
val p1 = ppp.toList // 将数组转换为列表println(p1) // 输出: List(4, 10, 6, 88, 66)
2024-03-27 09:15:32
337
原创 大数据处理与分析
6.右键单击“此电脑”图标，选择“属性”选项，在弹出的窗口中选择“高级系统设置”选项。在弹出的对话框中选择“高级”选项卡，并单击“环境变量”按钮，在环境变量对话框中，选择“Path”变量并单击“编辑”按钮，在Path变量中添加Scala安装目录的bin文件夹所在路径，如“D:\Program Files (x86)\spark\scala\bin”。此外，Hadoop 可以使用廉价的、异构的机器来做分布式存储与计算，但是，Spark 对硬件的要求稍高一些，对内存与 CPU 有一定的要求。
2024-03-06 12:45:46
1454
原创 Jennie教你安装VS Code.docx
默认是英语，所以需要在打开VS Code之后再安装中文扩展。在左边的工具栏点击扩展，搜索框中搜索“Chinese”,选择第一个“中文（简体）”，点击“安装”。13.在已添加的工作区，新建文件夹：css-image-js,并将js下两个文件复制粘贴。开始安装VS Code。在安装时，首先出现“许可协议”对话框，选择“我同意此协议”2. 进入“选择附加任务”界面，可以根据自己的偏好进行选择。5.稍等片刻，系统就会完成VS Code软件的安装。点击“安装”按钮，系统就开始安装。9. 安装html，如图所示。
2024-03-04 14:41:53
621
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人