- 博客(6)
- 收藏
- 关注
RSS订阅原创 大数据生态与Spark简介
大数据生态与Spark简介 大数据概念 大数据(big data,megadata)或称巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。 在维克托·迈尔·舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数据进行分析处理。 大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（价值密度）、Veracity（真实性）。 大数据的不同层面及
2021-03-04 17:32:30
177
1
原创 2020-11-29
Python笔记-5文件读写、文件操作和简单电子词典 文件读写 文件：被持久化存储在磁盘上的字符串。 读操作：将文件中的字符串加载进内存。 写操作：将字符串写入到磁盘中的操作。 open函数：用于读写文件。 print(help(open)) 参数： file:文件名 注意路径：绝对路径 r"C:\test\hello.txt" 相对路径： next\a.next encoding:指定open函数在读写文件使用时的字符集。 windows 默认字符集是gdk。 notepad++ 默认字符集
2020-11-29 18:25:58
171
原创 2020-11-27
Python笔记-4生成器函数和内置高阶函数 生成器函数 定义：包含yield关键字的函数。 生成器函数使用yield返回返回值。函数并没有结束，还可以继续执行。 当我们处理大量数据时，一个个获取数据，以节省内存空间。 执行生成器函数时，返回生成器对象。 只有使用next()函数执行生成器对象或循环生成器对象时，才会一个个返回数据。 元祖生成器 生成器的使用场景 产生或处理大量数据，使用生成器一个一个的处理（生成），用于节省内存空间。 range(100) 产生某个范围内的整数。 使用生成器实现斐波那契
2020-11-27 15:02:47
129
原创 2020-11-27
Python笔记-3匿名函数和装饰器函数 匿名函数 lambda[形参]：返回值 三目运算 值1 if 条件 else 值2，条件为真结果为值1，结果为假，结果为值2 高阶函数：将函数作为参数或返回值的函数。 函数的返回值也是函数 函数的柯里化 装饰器函数 定义：在不修改原函数代码的前提下，给原函数增加或修改功能，可以使用装饰器函数。 它是一个高阶函数。 将原函数作为参数，放到装饰器内部定义的函数中执行。 在内部函数中增加新的功能。 返回内部函数用于替换原函数。 获取某个函数运行n次的平均时间
2020-11-27 13:15:00
147
1
原创 2020-11-11
Python笔记-2函数和参数的类型 函数 函数：一个被封装好的具有特定功能的代码段，可以被重复使用。 函数名：给封装好的代码段（函数），起个别名。 自定义函数：通过def关键字定义。如： 形参：本质上一个局部变量，由于接收函数外部数据。它是定义函数时，定义的。 实参：在函数调用执行时，传递的数据。 返回值：将函数中的局部变量传递到函数外部。 （return返回值）（return语句一旦执行，函数就会终止。） 全局变量：在整个函数中都可以被调用的变量。一般定义在函数的外部，或者用global关键字在函数内
2020-11-11 18:50:04
224
原创 2020-11-03
Python笔记 由于老师要求，通过写博客来完成作业，所以我来了✌✌ 有不对的地方请多多指教 相互学习，蟹蟹???????? 一、python的定义 ：Python 是一个高级动态、解释性、编译性、互动性和面向对象的脚本语言。 二 、python的特点： 1、简单灵活 2、 开源免费 3、 跨平台 4、 高级动态 5、 支持命令式编程 6、函数式编程 7、 面向对象编程 三、Python有五个标准的数据类型 Numbers（数字） String（字符串） List（列表） Tuple（元组） Diction
2020-11-03 13:22:44
225
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人