- 博客(6)
- 收藏
- 关注
RSS订阅原创 【linux】CentOS8 Hadoop伪分布式环境搭建（三台节点机）
文章目录前言一、伪分布式集群分别是什么？二、安装Hadoop三、伪分布式环境搭建四、启动Hadoop五、添加两个节点机前言1.本篇文章主要参考博客：点击进入，整合了伪分布的环境搭建和一些踩坑事项。2.环境搭建的节点机一共三台：pc1，pc2，pc3 ，其中pc1为管理机，三台节点机都使用用户Sillyhumans，如果你三台机器的用户名不一样，下面配置地址的时候可能要略作修改。3.关闭防火墙后操作一、伪分布式集群分别是什么？简单来说就是一台机器上模拟多台机器的集成分布（假装自己有多台服务器）.
2021-11-05 08:58:05
3744
4
原创 【linux学习】gcc建立动态链接库并引用
创建项目文件 创建一个计算三角形面积的c语言项目 1.启动linux服务器后进入自己的账号 (su + 用户名) 2.进入用户目录: cd ~ 3.建立一个项目文件: mkdir+文件名(triangle) 4.进入项目文件并创建lib文件夹: cd triangle mkdir lib 5.返回项目目录编写c语言代码： cd .. vi triangle.c 方法的实现文件 vi triangle.h 头文件 vi myTest 主函数文件建立动态链接库
2021-10-07 10:45:53
543
原创 【爬虫】利用协程爬取百度小说中的西游记
网址如下：http://dushu.baidu.com/pc/detail?gid=4306063500小说采用异步加载的方式，返回的数据格式为jsonimport requestsimport asyncioimport aiohttpimport osasync def getPage(title, cid): url = 'http://dushu.baidu.com/api/pc/getChapterContent?data={"book_id":"4306063500","
2021-08-09 15:56:33
1743
2
原创 【爬虫】关于携程和asyncio库的简单使用
协程 简单来说就是在一个线程执行多个任务时，当某个任务进入阻塞状态，系统会记住该位置并去执行别的任务，当阻塞结束又回来执行这个任务，这样做能充分利用cpu资源，从而提升效率。引入库 这里利用两个库来实现协程爬取图片：import asyncio import aiohttp库函数分析
2021-08-06 17:52:34
778
原创 【爬虫】批量爬取免费简历模板
目的 初学爬虫进程池练习，批量爬取网站免费简历模板：点击跳转爬取网站分析 先利用网页抓包工具可以找到每个模板所在的 div，可以看见每个模板都在一个class = “clearfix mt20 downlist” 的 div 中进入单个模板页面可以看见下方有很多下载链接：利用抓包工具获取一个链接即可。Codeimport requestsfro
2021-08-04 22:14:45
1415
原创 2020年团体程序设计天梯赛 L3-1 那就别担心了 (30分)
下图转自“英式没品笑话百科”的新浪微博 —— 所以无论有没有遇到难题，其实都不用担心。博主将这种逻辑推演称为“逻辑自洽”，即从某个命题出发的所有推理路径都会将结论引导到同一个最终命题（开玩笑的，千万别以为这是真正的逻辑自洽的定义……）。现给定一个更为复杂的逻辑推理图，本题就请你检查从一个给定命题到另一个命题的推理是否是“逻辑自洽”的，以及存在多少种不同的推理路径。例如上图，从“你遇到难题了吗？”到“那就别担心了”就是一种“逻辑自洽”的推理，一共有 3 条不同的推理路径。输入格式：输入首先在一行中给出
2020-11-29 21:27:36
2916
6
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人