- 博客(6)
- 收藏
- 关注
RSS订阅原创 2021-02-28
大数据生态与Spark大数据时代的技术支撑：1.存储设备容量不断增加 2.CPU处理能力大幅提升 3.网络宽带不断增加大数据不仅仅是数据的“大量化”，而是包含“快速化”、“多样化“、和”价值化“等多重属性。大数据技术的层面以及功能Spark简介：Spark最初由美国加州大学伯克利分校的AMP实验室于2009年开发，是基于内存计算的大数据并行计算框架，用于构建大型的、低延迟的数据分析应用程序。Spark特点：运行速度快、容易使用、通用性、运行模式多样、**Hadoop与Spark的对比
2021-02-28 15:53:24
854
原创 笔记5
异常处理一、异常类1、NameError：标示符(变量名、函数名、类名)未定义 print (a)2、TypeEtror ：类型错误 print (3+"abc”)3、IndexError ：下标越界错误 lix=[“香蕉”，“苹果”，“橘子”] print (lis(3))4、TeroDivis2onError: divimon by zero 零除错误 print (2/0)二、异常处理1、try:必选 尝试可能会出错的代码，不出错时，正常执行print( hello try)要有
2020-12-05 12:55:03
122
原创 2020-11-30
os模块os.makedirs(‘dirname1/dirname2’) 可生成多层递归目录os.removedirs(‘dirname1’) 若目录为空，则删除，并递归到上一级目录，如若也为空，则删除，依此类推os.mkdir(‘dirname’) 生成单级目录；相当于shell中mkdir dirnameos.rmdir(‘dirname’) 删除单级空目录，若目录不为空则无法删除，报错；相当于shell中rmdir dirnameos.listdir(‘dirname’) 列出指定目录下的所
2020-11-30 18:16:06
90
原创 2020-11-20
模块：.py文件所有的python脚本都可以作为python模块被调用的包。包: 存放有相互关联的一组pyhthon模块的文件夹。_int_.py文件。 pyc :经过Python编译后的by模块文件， 执行速度更快。 导人模块的方式通过import句或from…mport语句，在一个程序中每个模块只高要导入一次。import语句的语法为import module1[, modue2[,…moduleN] 1，improt 模块名 调用：模块名.功能名 2，import 模块名 as 别名
2020-11-20 12:37:58
126
原创 2020-11-08
装饰器函数：在不修改其他函数代码的前提下，给其他函数增加(修改)功能的函数。1.装饰器函数高阶函数器函数2.将原函数作为装饰器函数的参数3.在装饰器函数中定内部函数，在内部函数中执行原函数4.将新增的功能添加到内部函数中5.将内部函数返回6.将返回的内部函数替代原函数。装饰器的应用场量:登录验证， 写日志、执行时间、权限管理装饰器是代码的一种设计模式。文件操作读操作：将磁盘文件中的字符串加载进内存。写操作：将内存中的的字符串存储到磁盘中。1.open(file,mode=“r",e
2020-11-08 20:14:41
136
原创 2020-11-03
**函数**就是一段特定功能、被封装、可重用的语句块，通常用来实现某一个特定的功能。两个重要概念：定义和调用。自定义函数def 函数名 （参数）：语句块 （函数体）匿名函数：作为高阶函数的参数使用a = (lambda 参数1,参数2:返回值)(实参1,实参2)形参和实参定义函数时，在函数名后圆括号内的参数叫形参，如果有多个形参，需要通过逗号隔开，这个形参并不是具体的值，它相当于一个变量名。调用函数时可以通过参数给函数传值，通过参数赋值的过程叫传参。而调用函数时这个参数就叫实参，通常.
2020-11-03 21:24:28
126
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人