- 博客(4)
- 收藏
- 关注
原创 搭建Hadoop完全分布式集群
(可以不写dfs.namenode.name.dir和dfs.datanode.data.dir配置,这样的话就不会额外定制name、data的路径,会使用core-site.xml的/var/log/hadoop/tmp的路径,如/var/log/hadoop/tmp/hdfs/name。:进入/usr/local/hadoop-3.1.3/etc/hadoop/,修改core-site.xml文件,添加以下部分,注意,在/usr/local/hadoop-3.1.3/etc/hadoop/路径下,
2024-05-08 21:01:37
758
2
原创 网络爬虫:爬取网页数据
基于爬虫的实现原理,进入爬虫的第一阶段:爬取网页数据,即下载包含目标数据的网页。爬取网页需要通过爬虫向服务器发送一个HTTP请求,然后接收服务器返回的响应内容中的整个网页源代码。利用Python 完成这个过程,既可以使用内置的urllib库,也可以使用第三方库requests。使用这两个库,在爬取网页数据时,只需要关心请求的URL格式,要传递什么参数,要设置什么样的请求头,而不需要关心它们的底层是怎样实现的。
2023-12-26 16:49:36
5691
1
原创 在Python中使用pyecharts图形画可视化大屏
使用pyecharts进行数据可视化是一种非常有效的方式,它能够将复杂的数据转化为直观的图表,帮助我们更好地理解和分析数据。简洁易用:pyecharts的API设计非常简洁,使用起来非常方便。交互性强:pyecharts支持图表之间的交互,比如可以通过鼠标悬停在某个数据点上,显示更多的信息。可扩展性强:pyecharts支持自定义主题,我们可以根据需要调整图表的样式。同时,它也支持与其他Python库的集成,比如使用pandas进行数据处理,使用matplotlib进行数据预处理等。
2023-12-21 11:25:22
5863
2
原创 java的类(Class)和对象(Object)
目录 引言一.类的定义及对象的创建1.对象的创建编辑3.访问对象的成员4.访问修饰符5.程序举例二.getter与setter方法1.getter与setter的定义(1)getter方法(2)setter方法三.构造方法1.构造方法的定义2.构造方法的重载四. 静态成员1.静态方法的定义与调用2.举例一个简单明了的静态成员方法的代码
2023-11-15 23:05:31
544
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人