- 博客(16)
- 收藏
- 关注
原创 scrapy框架实现网络爬虫
网络爬虫可以自动抓取 web 上的数据,并且分析其结构, 将感兴趣的部分进行保存。Scrapy 是个健壮(robust)的网络框架,它可以从各种数据源中抓取数据。Scrapy 已经发展多年,能够稳定而高效的抓取大量数据,其结构是基于事件的。
2023-09-11 19:42:32
1181
原创 python 安装pandas遇到Could not find a version that satisfies the requtrement pandas
如果使用pycharm,还需要在file--settings--Python Ierpreter中,同步进行添加库(点加号,然后输入需要的库)解决方法:首先确保有pip3,然后使用国内源并且保证下载时间,就可以直接下载了。
2023-09-07 16:39:33
1823
1
原创 云运营工程师-知识点复习
一、传统IT运维面临哪些挑战?1、业务上线慢:采购、部署周期长等原因,导致新有的业务上线慢2、扩展困难:集中式架构扩展性差,纵向扩展只能实现增加单机的处理性能 3、可靠性不强:传统硬件设备孤立存在,可靠性只能依靠软件侧实现4、生命周期管理复杂:企业内设备种类多,厂商多,导致管理十分复杂,对运维人员的技能水平要求高5、I/O瓶颈导致的延迟:单个设备的性能是有限的6、TOC居高不下:设备的整体利用率不高,企业总成本支持居高不下
2022-11-14 15:08:21
988
原创 安全设备-防火墙
防火墙起源于建筑领域,用来隔离火灾的,阻断火势从一个区域蔓延到另一个区域。引入到通讯领域中,用通讯的语言来定义,防火墙主要用于保护一个网络区域免受来自另外一个网络区域的网络攻击和网络入侵行为。因其隔离、防守的属性,灵活的用于网络的边界、子网隔离等位置。具体的如企业网络的出口、大型网络内部子网隔离、 数据中心边界等等。
2022-10-31 17:13:00
925
原创 租户云上安全诉求及解决方案
在云化数据中心中,安全设备需要适应云的弹性扩容、快速上线、自助服务等特点,同时还需要应对网络边界模糊,安全威胁升级等挑战。防火墙作为云华数据中心中的安全执行器,需要采集网络流量,并于安全的分析器和控制器进行联动,完成基于大数据的安全检查和只智能分析,生成对应的安全策略执行对应的安全功能,满足云数据中心边界、租户边界和租户内网的安全防护需求。
2022-10-25 17:30:57
2125
原创 区块链前世今生及未来(颠覆互联网?)
区块链的核心思想是去中心化,在人与人、点与点、端与端之间不相识的时候,可以通过计算机技术(区块链技术)建立信任,节约了大量的成本,提高了办事的效率。区块链的特性是它不会被伪造,信息高度透明。 区块链不仅会重塑货币市场、支付系统、金融服务及经济形态的方方面面,而且会改变人类生活的每个领域。区块链去中心化的特性与整个网络的流动性能将所有人连接在一起,无须中间人或身份信息交流中心的参与就可以实现所有权和信息的处理;提供了一种通用技术和全球化的解决方案,自动化地实现物理资源和人力资源的分配,解放了过去由人力来完
2022-10-21 17:19:51
2499
原创 大数据应用-数据挖掘(人工智能&机器学习&深度学习)
Def.数据挖掘从大量的数据中挖掘那些令人 感兴趣的 、 隐含的 、先前未知的和可能有用的模式或知识。找出人们可以解释,并能够描述数据的模式。
2022-10-19 11:03:29
1617
原创 Web Services技术详解(+实例代码)
WebService是一种跨编程语言和跨操作系统平台的远程调用技术。通过Web Services可以使运行在不同机器上的不同应用无须借助附加的、专门的第三方软件或硬件,就可以相互交换数据或进行集成。因此,无论应用之间采用什么语言、平台或内部协议,都可以方便地进行数据的交换。Web Services是基于一些常规的产业标准和已有的成熟技术,如XML和HTTP等开放式Web规范技术,因此,它具有很好的开放性和互操作性。
2022-09-26 15:04:57
1108
原创 云计算cloud computing 的前世今生~
2007年诞生了云计算(cloud computing)的概念,关注度至今一直居高不下 。云计算包括互联网上各种服务形式的应用,以及这些服务所依托数据中心的软硬件设施。云计算是一种面向效用的和因特网为中心的按需交付IT服务的方式。
2022-09-22 11:53:54
448
原创 大数据应用
在大数据时代,必须从基础研究做起,增强学科内、学科之间以及学术界和工业界之间的合作与交流,群策群力解决大数据时代面临的新挑战,获取大数据所蕴含的巨大价值。
2022-09-20 14:55:06
2958
原创 软件开发的形式化方法(Formal Method)之前世今生~
对典型的软件开发过程和现状进行分析,明确软件质量的评价体系,然后阐述了软件失效的机理,思考如何提高软件质量
2022-09-08 16:11:01
746
原创 npm错误以及恢复
之前运行正常的项目报错,是npm缺少关键文件,网上看到删除node_module然后重新npm install等方法均没有解决,于是重新下载node文件,替换掉npm,然后重新运行可以解决。包替换掉,一定是自己node_mpdules路径下的npm,然后在命令行重新npm,重新运行项目即可。
2022-08-24 14:39:18
1924
原创 前端vue+后端Django通信实例,传递json数据
将前端 Vue 项目和后端 Django 框架联系起来,让他们之间可以通过AXIOS进行通信并且传输数据
2022-08-19 15:41:51
4315
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人