- 博客(1425)
- 收藏
- 关注
RSS订阅
原创 什么是大数据、有什么用以及学习内容
大数据（Big Data）是指通过不同来源汇集的大规模、多样化、动态变化的数据集，通常无法通过传统的数据处理方法进行有效的存储、管理和分析。随着信息技术的进步，特别是互联网、物联网（IoT）和社交媒体的兴起，数据的生成速度呈指数级增长。大数据不仅仅是数据量的大幅增加，还包含数据类型的多样化和处理速度的提升。Volume（数据量大）：大数据的主要特征之一是其庞大的数据量，通常从TB级别扩展到PB级别或更多。传统的存储系统和数据库往往难以应对如此巨大的数据量，因此需要采用分布式存储和计算技术。
2026-06-03 10:43:18
440
原创 大数据系列——什么是hive？hive用来干什么的？hive常见问题是啥？
类SQL语法1、Hive中所有的数据都存储在 HDFS 中，没有专门的数据存储格式（可支持Text，SequenceFile，ParquetFile，RCFILE等）2、只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符，Hive 就可以解析数据。3、Hive 中包含以下数据模型：DB、Table，External Table，Partition，Bucket。db：在hdfs中表现为${hive.metastore.warehouse.dir}目录下一个文件夹。
2026-06-03 10:37:22
253
原创 Hive内容分享(一)：Hive介绍
Hive是基于Hadoop的一个数据仓库（Data Aarehouse，简称数仓、DW），可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。是用于存储、分析、报告的数据系统。使用HQL作为查询接口；使用HDFS存储；使用MapReduce或其它计算框架计算；执行程序运行在Yarn上。Hive的本质是：将Hive SQL转化成MapReduce程序，其灵活性和扩展性比较好，支持UDF，自定义存储格式等；适合离线数据处理。Hive相关网站。
2026-06-02 15:07:49
241
原创 零基础也能学会！2026最全Python入门教程（图文详解）
编程入门阶段，不用花时间学习和记忆细枝末节，这样会分散新手去理解核心逻辑的精力，而且很常用的知识也很容易被遗忘。真实世界里的编程不是闭卷考试，不需要把语言的细节全部记住，因为随时可以上网搜索和查阅技术文档。写多代码的人最后都会意识到，更重要的是具备搜索问题、发现答案和高效解决的能力，而不是成为记忆大师。入门编程语言选择，建议Python、Java、JavaScript、C。其中优先选择Python，Python容易教，容易学，其一：语法简洁；
2026-06-02 15:00:06
1236
原创 Web安全入门基础知识（笔记）
域名就是网站地址的名称，例如顶级域名 baidu.com yuque.com 只有一个.域名二级域名 news.baidu.com tieba.baidu.com 加在顶级域名前的域名多级域名 test.news.baidu.com 加在在二级域名前的域名DNS是域名系统服务协议，主要用于域名和IP地址的相互切换例如在cmd命令控制台中可以通过 ping将域名解析成IP地址攻击者在得到权限后，留下后门文件方便下次进入；服务器后门，网站后门等等web使用的比较广web网站了漏洞相对较多。
2026-06-02 14:22:33
203
原创 认识运维(运维的概念与职责）非常详细的，从零基础到精通，收藏这篇就够了！
服务器是一种专门设计用于在网络环境中提供服务、存储、管理数据或执行计算任务的计算机系统。与普通个人电脑相比，服务器通常具备更高的性能、可靠性、存储容量和更强的数据处理能力，就是给用户提供服务的机器（电脑）。服务器可以分为几大类：塔式服务器、机架式服务器、刀片服务器。普通台式机/笔记本能否充当服务器来使用？硬件性能：对于一些小型的应用场景，如个人网站、小团队内部的文件共享等，普通台式机或笔记本的硬件配置（CPU、内存、存储空间等）可能已经足够。
2026-06-02 14:18:14
266
原创 ansible从入门到精通（完整篇）
Ansible是一款自动化运维工具，基于Python开发，集合了众多运维工具（puppet、cfengine、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。Ansible是基于模块工作的，本身没有批量部署的能力。真正具有批量部署的是Ansible所运行的模块，Ansible只是提供一种框架。主要包括：(1) 连接插件connection plugins：负责和被监控端实现通信；
2026-05-31 22:13:23
395
原创 C语言编程软件汇总与推荐（15款，新手必看）
之所以列出这么多C语言编程软件，主要是让大家有所了解，实际开发中熟悉一两款即可（根据“使用建议”中推荐的来选择），千万不要挨着尝试，太浪费时间了。《网络安全从零到精通全套学习大礼包》
2026-05-31 22:09:29
565
原创 前端开发指南（从入门到前沿）
此博客包括前端基础（HTML、CSS、JavaScript）、流行框架（如React、Vue、Angular）、开发工具、前端性能优化、Web安全以及2025年前端技术趋势。
2026-05-31 22:06:40
312
原创 初识大数据，一定要知道的知识！
大数据平台的普及，也催生了更多的大数据应用场景。新问题也不断的产生，如：为了快速实现业务需求，烟囱式开发模式导致了不同业务线的数据是完全割裂的，这样造成了大量数据指标的重复开发，不仅研发效率低、同时还浪费了存储和计算资源，使得大数据的应用成本越来越高。1、Hadoop 最早起源于Nutch项目， Nutch 的设计目标是构建一个大型的全网搜索引擎，包括网页抓取、索引、查询等功能，但随着抓取网页数量的增加，遇到了严重的可扩展性问题——如何解决数十亿网页的存储和索引问题。
2026-05-31 22:04:26
198
原创 Apache Hive SQL-入门快速上手-学习清单
分桶表也是一种优化表，可以减少join查询时笛卡尔积的数量、提高抽样查询的效率。分桶表的字段必须是表中已有的字段；分桶表需要使用间接的方式才能把数据加载进入：insert+select在join的时候，针对join的字段进行分桶，可以提高join的效率 减少笛卡尔积数量。
2026-05-31 21:57:31
228
原创 hive一次加载多个文件_Hive总结
1.架构图2.Hive架构解析1）用户接口CLI：cli即shell命令。CLI最常用CLI启动的时候会同时启动 一个Hive 副本Client： Client是Hive的客户端，用户连接HiveServer，并指出Hive Server 所在的节点以及在该节点启动它WUI：WUI是通过浏览器启动Hive2）元数据Hive将元数据存储在数据库中，如mysql、derby。Hive的元数据信息包 括，表的名字、表的列、分区机器及其属性、表的属性、表的目录等3）Driver。
2026-05-29 16:01:42
214
原创 主流开发语言和开发环境介绍
开发语言，也称为编程语言（Programming Language）是指用于编写计算机程序的一组符号和规则。这些符号和规则定义了数据的类型数据的结构数据的操作以及如何组织程序来解决问题。开发语言是人与计算机之间通信的桥梁，通过编写程序，开发者可以指示计算机执行特定的任务。开发语言可以分为多种类型低级语言：如机器语言和汇编语言。机器语言是计算机能够直接理解和执行的二进制代码，而汇编语言则是将机器语言中的指令和操作码用助记符表示，使得编程更加易于理解和记忆。
2026-05-29 15:59:04
210
原创 对C语言的理解
就是我们人类与计算机进行交流的媒介。我们可以使用编程语言对计算机下达命令，从而让计算机完成我们所需要的功能。语言 = 语法 + 逻辑计算机语言有很多种。如：C 、C++、Java、Go、JavaScript、Python，Scala等。2.计算机语言简史。
2026-05-29 15:54:43
239
原创 Mac升级python3版本
一、下载Python官网下载地址：https://www.python.org/downloads/如果安装了Homebrew，直接通过命令brew install python3安装即可。注：该方法会比较慢，如一直在卡在Updating Homebrew…
2026-05-29 15:50:58
270
原创 半夜被磁盘告警吵醒？用 Ansible + Cron 自动化清理后我睡踏实了
Ansible是一款开源的自动化运维工具，旨在简化配置管理、应用部署、任务编排和IT编排等操作。其核心设计理念是“简单、可靠、无侵入”，通过声明式语言实现对大规模基础设施的高效管控。在传统运维模式下，面对数百台服务器的批量操作，往往依赖脚本循环执行SSH命令，不仅效率低下，还难以保证执行的一致性与可追溯性。Ansible的出现有效解决了这一痛点，使运维人员能够以一条命令完成跨节点的标准化操作。无代理架构。
2026-05-29 15:48:47
241
原创 Hadoop安装与配置
这是master中的，在slave0和slave1中同样也是进行一样的操作，需要注意的是ip地址的最后要和主机不一样，比如master的ip地址最后是110，slave0就是111，slave就是112，完成之后先按esc，退出编辑模式，在按住shift+：，输入wq 保存并退出。输入wq保存退出 可以输入ping slave0 或者slave1 ping通一下，如果能够ping通，代表第三步也配置完成了。
2026-05-28 18:05:08
351
原创 PHP基础一【PHP简介和开发环境搭建】
即“PHP：超文本预处理器”，是一种通用脚本开源语言。2）PHP 脚本在服务器上执行，可以和用户灵活交互。PHP的执行，必须要有一个服务器（PHP代码在服务器上执行），有服务器，就有客户端（客户端实现浏览和交互），这就是说PHP是一个网站语言，是基于网站运行的。和HTML不同，HTML又称静态语言，不像PHP一样，可以写很多动态函数，让我们的网站更灵活，可以和用户实现交互。3）对初学者而言比较简单，也为专业人员提供了很多先进功能。
2026-05-28 17:55:14
395
原创 论网络安全的重要性
OneDNS 互联网安全接入服务是北京微步在线科技有限公司提供的具备安全防护能力的 DNS 递归解析服务， 该服务可以保护任何一台终端、任何一个办公职场、任何一个家庭均可安全地接入到互联网， 为企业和家庭用户有效防护：恶意软件、勒索病毒、APT 攻击、钓鱼链接、非法站点。并且屏蔽各类广告骚扰和欺诈类网站，净化网络环境，保护数据安全。
2026-05-28 17:52:08
386
原创 Python 数据分析基础入门：《Excel Python：飞速搞定数据分析与处理》学习笔记系列（附录 C 高级 Python 概念）
本附录会更细致地研究以下 3 个主题：类和对象、带时区的 datetime 对象，以及可变与不可变对象。这些主题相互独立，可以以任意顺序阅读。本节我们会编写自己的类，以便更好地理解类和对象之间的关系。类定义了一类新的对象：一个类就像是你用来烤蛋糕（比如巧克力蛋糕或者起司蛋糕）的模具。用模具 （类）制作蛋糕（对象）的过程就叫作实例化。这就是为什么对象也被称为类实例（class instance）。无论是巧克力蛋糕还是起司蛋糕，它们都是一类（type）蛋糕：类（class）可 以让你定义新的数据类型，这些类型将
2026-05-28 17:42:50
361
原创 网络安全的重要性与防护措施
互联网已经成为我们日常生活、工作和学习的必需品。无论是通过社交媒体与朋友互动，还是在网上进行银行交易，网络已经渗透到我们生活的方方面面。然而，随之而来的是各种网络安全问题，包括数据泄露、网络诈骗、身份盗用等，越来越多的用户和企业因此遭受严重损失。如何保障网络安全，已经成为全球关注的焦点。，分析当前面临的主要网络安全威胁，并提出有效的防护措施，帮助企业和个人提高网络安全意识，避免安全风险。二、
2026-05-27 14:56:20
37
原创 HADOOP的配置
-a 显示所有文件及目录（.开头的隐藏文件也会列出）-l显示详细的信息（如文件型态，权限，拥有者）以下为二者的组合，显示所有的文件的纤细信息ps:~：表示用户目录，如果是root用户就在root目录下/：表示根目录…表示当前目录的上一级目录mkdir命令:用于在指定目录下创建目录。-p 确保父目录名称存在，不存在的就创建一个touch命令：创建一个空文件，无任何内容。rm命令:用于删除一个文件或目录。-f 强制删除，无需用户确认-r 将目录及以下所有递归逐一删除cp命令：用于复制文件或
2026-05-27 14:39:03
139
原创 c 语言开发什么,c语言能开发什么
c语言能开发有：1、多平台通用软件。所谓多平台通用软件，就是指这个软件可以在很多系统上使用。例如，同一个程序很好地运行在DOS、Windows 98、Windows XP、Windows CE、Linux、UNIX等多个操作系统上。Apache是一个开源Web服务器工程，其中的HTTP服务器可以运行于很多平台，Windows、Linux和UNIX都是可以的，这个服务器就是用C语言开发的。2、操作系统。
2026-05-27 14:29:09
107
原创 PHP语言基础
/ 变量就是用来存放数据的容器PHP变量是指在程序执行过程中数值可以变化的量，变量通过一个名字（变量名）来标识。系统为程序中的每一个变量分配一个存储单元，变量名实质上就是计算机存储单元的命名，因此可借助变量名访问内存中的数据。（1）变量可以改变的（2）变量是存储信息的容器（3）变量是通过名字来访问其中的数据的将一个变量赋值给另一个变量称之为变量传递变量传递一共有两种方式： 值传递 与 引用传递（地址传递）
2026-05-27 14:21:32
340
原创 【C语言】什么是C语言
什么是语言呢？在我们的生活中，人与人交流所用的中文，英语，日语等。那人和计算机交流的语言则可理解为计算机语言，比如：C/C++/JAVA/Python/Go那什么是C语言呢?
2026-05-27 14:20:09
207
原创 Hadoop
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。主要解决，海量数据的存储和海量数据的分析计算问题。广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。Hadoop创始人Doug Cutting，为 了实 现与Google类似的全文搜索功能，他在Lucene框架基础上进行优化升级，查询引擎和索引引擎。2001年年底Lucene成为Apache基金会的一个子项目。对于海量数据的场景，Lucene框架面对与Google同样的困难，存储海量数据困难，检索海量速度慢。
2026-05-27 14:15:44
369
原创 Hive详解（一篇文章让你彻底学会Hive）
Hive存储文件存储格式概述在Hive中，主流的文件存储格式主要是6种：textfile，RCFile，avro，orc，parquet以及sequencefile形式。其中，textfile和sequencefile采用的是行存储形式，orc和parquet采用的是列存储形式。如果不指定，那么Hive默认采用textfile形式将数据落地到HDFS上。textfile格式。
2026-05-27 14:09:37
369
原创 详解数据仓库和数据库的区别
对于从来没有接触过网络安全的同学，我帮大家准备了从零基础到精通学习成长路线图以及学习规划。如果你也想通过学网络安全技术去帮助就业和转行，我可以把我自己亲自录制的96节 从零基础到精通的视频教程以及配套学习资料无偿分享给你。2.也许大家觉得这没什么，但是我会认真对待，把它当成我的笔记、心得、这样才能提升自己。学习网络安全必看的书籍和文章的PDF，市面上网络安全书籍确实太多了，这些是我精选出来的。1.如有错误欢迎大家指出，我会及时更正，有什么不懂也可以留言提问，互相交流吗。想要学习 网络安全，作为新手一定要。
2026-05-27 14:07:30
423
原创 100条必背网络安全知识点，你都掌握了吗？
1988年，一款名为“莫里斯蠕虫”的程序悄然传播，它最初是康奈尔大学研究员的实验项目，目的是测量互联网规模。可谁也没想到，这个程序失控后感染了数千台电脑，成为史上首个大规模网络攻击事件。从那时起，网络安全不再是实验室的玩具，而演化成了抵御黑客风暴的现实盾牌。网络安全（Cyber Security）一词中的“Cyber”源自希腊语“Kubernetes”，意为“舵手”，象征掌控数字海洋的航行。就像舵手守护船只安全，网络安全专家保护着数据世界。
2026-05-27 14:04:53
348
原创 什么是网络安全，网络空间安全有哪些安全？
网络空间安全的 16 大种类并非孤立存在，而是相互关联、协同防护的有机整体 —— 例如，物联网安全依赖基础网络安全保障传输，数据安全需要密码学支撑加密，应急响应则需要所有技术领域的日志数据用于溯源。实战中，需根据业务场景（如企业、医疗、工业）确定核心防护领域，结合 “技术防御 + 管理流程 + 人员意识” 构建纵深防御体系，才能有效应对复杂多变的网络威胁。《网络安全从零到精通全套学习大礼包》
2026-05-25 18:22:04
428
原创 Linux概述与系统部署
Linux是一个开源的、免费的操作系统内核，起源于1991年，由芬兰学生林纳斯·托瓦兹创建。它通常与GNU项目的工具结合，形成完整的GNU/Linux操作系统（常简称为“Linux”）。GNU软件+Linux内核=GNU/Linux操作系统，很多人错误地简称为"Linux"。前身为Unix系统，诞生于贝尔实验室；谭宁邦教授开发mini Unix系统用于教学;斯托曼创立GNU项目（GPL协议）;托瓦兹开发Linux内核（1991年）协作关系。
2026-05-25 18:18:54
530
原创 【2025】AWVS安装保姆级教程（最新25.1.2可用）
一个是可能没有做hosts重定向，一个是可能在安装exe时点击finish同时，浏览器已经启动了AWVS，导致已经向外访问，这边建议直接卸载AWVS重装（注意清目录，有两个目录），安装exe的时候先不点finish ，避免启动AWVS。我们首先到 C:/Windows/System32/drivers/etc 目录 下找到hosts文件，然后右键属性，点击安全，点击编辑，然后选中Users组，将修改勾选，这样我们才能修改hosts文件。可以说是最科学最系统的学习路线，大家跟着这个路线图学习准没错。
2026-05-25 18:16:13
397
1
原创 php有什么版本,php语言有几个版本
PHP的大版本主要分四支：PHP4/PHP5/PHP6/PHP7其中，PHP4由于太古老、对OO支持不力已基本被淘汰，请无视PHP4。PHP6由于基本没有生产线上的应用，还基本只是一款概念产品，很多功能已在PHP5.3.3上实现，所以也不详述，请无视PHP6。PHP5的版本主要分四支：PHP5.2之前的版本、PHP5.2.X、PHP5.3和日前发布的PHP5.4。php7目前最新的稳定版本是7.2.10，目前还有不少项目是用5.6甚至更早的版本。
2026-05-25 18:11:29
412
原创 【C语言】C 语言为什么叫 C 语言呢？
笔记改自于王道训练营资料其实是因为先有高级语言ALGOL 60，简称 A 语言，后来经过简化，变为 BCPL 语言，简称 B 语言，而 C 语言是在 B 语言的基础之上发展而来的，所以就称为 C 语言。所以世界上第一个 C 语言的编译器是用 B语言编写的。目前主流的编译器是微软的(Microsoft Visual Studio 使用的)，还有就是Linux 使用的。
2026-05-25 18:08:35
353
原创 web安全是什么 主要分为哪几部分 _什么是web安全
作为拥有着 10 年经验的渗透安全测试工程师，一路也是从小白历经磨难成长起来的我，给现在的新手小白一些建议。渗透安全的范围其实要学习的东西很广泛的，比如系统安全、移动安全、无线安全、web 安全等很多方向。作为小白呢，这里建议大家可以从 web 安全入手，web 安全领域相对来说比较好入门，对于小白来说呢，入门是相对来说友好一些的。我刚开始的时候也是从 web 安全开始入手的，web 安全的知识有哪些呢，我给大家简单的梳理一下知识轮廓。
2026-05-23 14:22:40
282
原创 2026版最新AWVS安装使用教程（非常详细）零基础入门到精通，收藏这一篇就够了
前言这是大白给粉丝盆友们整理的网络安全渗透测试入门阶段渗透测试工具第3篇。
2026-05-23 11:50:17
1257
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人