- 博客(5)
- 收藏
- 关注
原创 大数据框架概论
大数据框架:批处理框架流处理框架混合框架批处理框架批处理框架数据特征:有界、持久、大量优势:处理大量数据任务缺点:处理时间要求高 紧急的任务例如:Apache Hadoop流处理框架流处理模式框架特征:数据无边界 适合用来处理必须对变动或者峰值做出响应优势:处理几乎无限量的数据缺点:同一时间只能处理一条或很少量的数据例如:Apache Storm 和 Apache Samza混合处理框架混合处理模式框架特征:可以同时处理批处理和流处理工作负载优势:提供一种数据处理的通用解
2021-12-02 16:26:19
1966
原创 java必备基础知识
Java概述1.java是一种相对简单的编程语言2.java语言不支持指针,一切对内存的访问都必须通过对象的实例变量来实现,更加安全3.java只支持类之间的单继承,但支持接口之间的多继承,支持类与接口之间的实现机制,java语言全面支持动态绑定4.java语言可运行于Linux系统,并且支持多线程JDK:SUN公司提供了一套java开发环境,简称JDK(Java Development Kit),包括java编译器,运行工具,文档生成工具,打包工具。java程序运行时,必须经过编译和运行两个
2021-12-01 14:56:50
487
原创 MySql数据库 SQL语言|函数 基础一篇够用
MySql相比较于SQL server具有体积更小,使用更方便等优点,并且MySql开源,主表采用索引组织表,使用物理复制。MySql的默认路径: C:\Program Files 默认密码rootchar是定长字符串类型 varchar是变长字符串类型 比char类型更节省空间4.0版本以下,varchar(20),指的是20字节,如果存放UTF8汉字时,只能存6个(每个汉字3字节)5.0版本以上,varchar(20),指的是20字符,无论存放的是数字、字母还是UTF8汉字,都可以存放20个,最
2021-11-30 16:57:46
607
原创 python查找0~10000黑洞数详解,reduce函数,lambda用法
python查找0~10000黑洞数详解,reduce函数,lambda用法黑洞数求法:黑洞数:将一个数各个位次上的数字打乱重新组合,得到一个最大数和一个最小数,最大数减最小数如果等于原来数字本身,这个数就是黑洞数如495:打乱后 重新组合 max=954 min=459 954 -459 =495 495就是黑洞数from functools import reducefor i in range(0,10000): x=str(i) #列表推导式 x=[int(y) f
2021-04-25 16:56:45
956
1
原创 python新手 小白也能懂 简单开放网站的爬虫小妙招 简单数据分析#爬取豆瓣Top250#爬取斗鱼首页热度排行
python新手 小白也能懂 简单开放网站的爬虫小妙招 简单数据分析#爬取豆瓣Top250#爬取斗鱼首页热度排行豆瓣网和斗鱼都是日常常用网站之一,但由于信息的公开性,对于反爬和防爬的防范力度都不是很强,可以简单爬取我们所需要的信息。python很强大的一个功能就是有许多开放的库,因此想要做好爬虫和分析,需要安装几个库帮助我们。1.requests2.pandas3.lxml4.BeautifulSoup如果安装失败,可以尝试用Tsinghua的路径在终端台Terminal中输入 pip in
2021-02-26 18:38:00
845
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人