- 博客(6)
- 收藏
- 关注
原创 大数据生态与Spark介绍
大数据生态与Spark介绍 三次信息化浪潮 一、Spark介绍 Spark是当前热门的大数据处理技术,Spark支持采用Scala、Java、Python和R语言进行编程。 二、主要特点:运行速度快:使用DAG执行引擎以支持循环数据流与内存计算。 容易使用:支持使用Scala、Java、Python和R语言进行编程,可以通过Spark Shell进行交互式编程 。 通用性:Spark提供了完整而强大的技术栈,包括SQL查询、流式计算、机器学习和图算法组件。 运行模式多样:可运行于独立的集群模式中,可
2021-03-01 12:21:52
167
原创 第五次
字典和集合 定义:字典(散列表)是一种通过”键”来引用”值”的数据结构. 字典中的值没有特殊的顺序, 但都是存储在一个特定的键(key)下.{“key”:None,”1”:”a”} 键可以是数字, 字符串, 也可以是元组 键只能是不可变数据类型. 变量名 = {key:value} 创建字典: items = [(‘name’, ‘Gumby’),(‘age’,42)] 将列表转换成字典 d = dict(items) print(d) 删除元素: adict = {‘name’: ‘Ben’, ‘age
2020-11-29 21:20:26
124
原创 第四次
参数 def 函数名(参数1=数据1,参数2=数据2):# 默认值参数 pass 函数名(参数1=数据1) # 关键字参数 可变长参数 *args星号操作符之后的形参将作为元组传递给函数,元组保存了所有传递 **kwargs 用于接收0个或者任意个的关键字参数,这里的关键字就是参数名 在函数执行时,定义的形参没有实参就会报错! 命名参数:执行函数时,形参名=值(实参)方式赋值 查看函数帮助信息help(函数名), 可变长度参数:在参数名前加* 形参会将接收到的所有参数放在第一个。 Pytho
2020-11-29 20:55:15
133
原创 第三次
函数 定义:函数就是一段具有特定功能、被封装,可重用的语句块,通常用来实现某一特定的功能。函数对程序逻辑进行结构化或过程化的一种编程方式,写函数的目的是为了代码的重用。 def 函数名([形参]): # 定义函数 ‘’‘注释’’’ 函数体 函数名([实参]) # 执行函数 自定义函数 函数代码块以 def 关键词开头,后接函数标识符名称和圆括号() 任何传入参数和自变量必须放在圆括号中间。圆括号之间可以用于定义参数 函数的第一行语句可以选择性地使用文档字符串(用于存放函数说明) 函数内容以冒号起始
2020-11-29 20:34:32
118
原创 第二次
.字符串 1,字符串或串(String)是由数字、字母、下划线组成的一串字符。它是编程语言中表示文本的数据类型。 2,我们可以使用单引号 ’ 双引号" 或三引号 来创建字符串。 ,3,python程序中的字符串在计算机内存中,统一使用Unicode编码,当需要保存到硬盘或者需要传输的时候,就转换为UTF-8编码。 切片 1,Python 访问子字符串,可以使用方括号来截取字符串(切片),方括号里的数字是字符串的索引(index),从0开始。 ,2,String[开始索引 : 结束索引 : 步长] 3,使用切
2020-11-29 20:05:58
339
原创 第一次
Python算术运算符 Python语言支持以下类型的运算符: 算术运算符 1.比较(关系)运算符 2.赋值运算符 3.逻辑运算符 4.位运算符 5.成员运算符 6.其他运算符 7.运算符优先级 1…比较(关系)运算符: 比较运算符,也成关系运算符,用于对常量、变量或表达式的结果进行大小、真假等比较,如果比较结果为真,则返回 True;反之,则返回 False 2.赋值运算符: 赋值运算符主要用来为变量(或常量)赋值,在使用时,既可以直接用基本赋值运算符“=”将右侧的值赋给左侧的变量,右侧也可以在进行某些
2020-11-04 12:05:21
234
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人