- 博客(6)
- 收藏
- 关注
RSS订阅原创 学习Spark笔记
大数据生态大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有各的用处，互相之间又有重合。你可以用汤锅直接当碗吃饭喝汤，你可以用小刀或者刨子去皮。但是每个工具有自己的特性，虽然奇怪的组合也能工作，但是未必是最佳选择。大数据，首先你要能存的下大数据。传统的文件系统是单机的，不能横跨不同的机器。HDFS（Hadoop Distributed FileSystem）的设计本质上是为了大量的
2021-02-28 17:31:40
106
原创 2020-12-09
异常处理及程序调试在Python语言中，只有在程序运行后才会执行语法检查。所以，只有在运行或测试程序时，才会真正知道该程序能不能正常运行。因此，掌握一定的异常处理语句和程序调试方法是十分必要的。异常概述在程序运行过程中，经常会遇到各种各样的错误，这些错误统称为“异常”。这些异常有的是由于开发者一时疏忽将关键字敲错导致的，这类错误多数产生的是SyntaxError: invalid syntax（无效的语法），这将直接导致程序不能运行。这类异常是显式的，在开发阶段很容易被发现。还有一类是隐式的，通常和使
2020-12-09 14:01:47
263
原创 2020-12-08
字典与集合其中，字典这种序列结构就像电话通讯录，可以将联系人姓名和电话号码关联起来，在需要时可以直接通过姓名找到对应的电话；而集合就像是收集了很多表情的表情包，里面的所有表情都是唯一的。字典字典（dictionary）和列表类似，也是可变序列，不过与列表不同，它是无序的可变序列，保存的内容是以“键-值对”的形式存放的。字典的主要特征如下。通过键而不是通过索引来读取字典有时也称为关联数组或者散列（hash）。它是通过键将一系列的值联系起来的，这样就可以通过键从字典中获取指定项，但不能通过索引来获取
2020-12-08 22:56:03
663
原创 2020-11-24
python 流程控制语句 前言提示：这里可以添加本文要记录的大概内容：做任何事情都要遵循一定的原则。程序设计也是如此，需要利用流程控制实现与用户的交流，并根据用户的需要决定程序做什么，怎么做例如：本文就介绍了Python 中的流程控制语句...
2020-12-08 22:12:36
1063
原创 2020-11-27
python 流程控制语句这里可以添加本文要记录的大概内容：做任何事情都要遵循一定的原则。程序设计也是如此，需要利用流程控制实现与用户的交流，并根据用户的需要决定程序做什么，怎么做。本文就介绍了Python 中的流程控制语句本文的知识点如下：结构化编程If条件语句if… else…条件语句while 循环语句for 循环语句中断语句1. 结构化编程结构化程序设计就是用高级语言编写的具有分支、循环结构的程序。要完成一件工作。需要先设计。再将设计具体实现。现实世界的事物是复杂的，为了方便
2020-12-08 17:33:23
135
原创 2020-11-22
python 字符串学习内容：字符串是 Python 中最常用的数据类型。我们可以使用引号( ’ 或 " )来创建字符串。概念：qwe字符串是以单引号'或双引号"括起来的任意文本，比如'abc'，"q'we"等等。请注意，''或""本身只是一种表示方式，不是字符串的一部分，因此，字符串'abc'只有a，b，c这3个字符。如果'本身也是一个字符，那就可以用""括起来，比如"I'm OK"包含的字符是I，'，m，空格，O，K这6个字符。 1. 创建字符串var = 'mi'var = 'chu
2020-11-22 12:01:02
93
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人