a1234556667的博客

本章详细介绍了PCA 主成分分析算法基本原理、python 实现PCA 算法方法以及sklearn实现方法等内容。降维是对数据高维度特征的一种预处理方法。降维是将高维度的数据保留下最重要的一些特征，去除噪声和不重要的特征，从而实现提升数据处理速度的目的。在实际的生产和应用中，降维在一定的信息损失范围内，可以节省大量的时间和成本。假设三维空间中有一系列点，可用自然坐标系xyz来表示这组数据。若这些点都分布在一个过原点的斜面上，可以尝试把xyz坐标系旋转一下，使数据所在平面与xy平面重合。......

本章详细介绍了特征词转文本向量的方法、词袋模型与词集模型的计算方法、词频与逆词频的计算方法等内容。由于原始数据往往并不是数值型的（如字词列表），为满足数学模型的处理要求，这样就需要将文本特征词的数据进行向量化处理，即转换为数值向量格式。假设现有如下文档需转换为数字向量形式。文档1：“我来到成都，成都春熙路很开心”文档2：“今天在宽窄巷子耍了一天”文档1：[2, 0, 0, 1, 1, 0, 1]文档2：[0, 1, 1, 0, 0, 1, 0]...

本章详细介绍了中文分词以及清洗的常用方法、中文词频统计方法以及词云可视化方法等内容。中文分词指的是将一个汉字序列切分成一个一个单独的词。分词就是将连续的字序列按照一定的规范重新组合成词序列的过程。结巴分词（jieba分词）是基于Python 的中文分词工具，其分词功能强大且安装方便。全模式分词，把句子中所有的可以成词的词语都扫描出来，速度非常快，但是不能解决歧义；精确模式分词，试图将句子最精确地切开，适合文本分析；...

本章详细介绍了Word 文本信息提取方式、PDF 文本信息提取方式等内容。通过数据采集获取的数据信息往往五花八门、杂乱无章，因此需要对这些不同类型的数据进行集成，并将集成数据传入到电脑中，然后通过算法模型挖掘其潜在的价值，作为智能应用的支撑。使用在线格式转换工具转换。使用office内置格式进行转换。自己开发文本抽取工具进行文本抽取。作为优秀的程序员，本章将针对第三种方式展开讨论。...

本章详细介绍了数据缺失的原因、影响及处理方式、数据归一化处理的方法等内容。缺失值定义百度百科：缺失值是指粗糙数据中由于缺少信息而造成的数据的聚类、分组、删失或截断。它指的是现有数据集中某个或某些属性的值是不完全的。简单来说就是：部分数据缺失了缺失值产生原因无意的：信息被遗漏，比如由于工作人员的疏忽忘记而缺失；或由于数据采集器故障等原因造成的缺失，比如系统实时性要求较高的时候，机器来不及判和决策而造成缺失；...

本章详细介绍了Pandas 安装及基本数据结构、Pandas 文件读写、Pandas 数据处理与可视化操作等内容。Pandas 是一个开放源码的Python 库，为Python 编程语言提供了高性能，易于使用的数据结构和数据分析工具。在Pandas 之前，Python 主要用于数据迁移和准备，对数据分析的贡献更小。官网 https://pandas.pydata.org/Pandas 是从Panel Data（面板数据）缩写而来，用于广泛的领域，包括金融，经济，统计，分析等学术和商业领域。...

本章详细介绍了Scrapy框架的安装，通过Scrapy框架架构，讲解了Scrapy各个组件的作用。Scrapy是用python实现的一个为了爬取网站数据，提取结构性数据而编写的应用框架；用于抓取web站点并从页面中提取结构化的数据，用于数据挖掘、监测和自动化测试。...

本章详细介绍了 XPath 安装创建方法、XPath 路径的获取方法及节点选择方法等内容。XPath，全称 XML Path Language，即 XML 路径语言，它是一门在 XML 文档中查找信息的语言。最初是用来搜寻 XML 文档的，但同样适用于 HTML 文档的搜索。所以在做爬虫时完全可以使用 XPath 做相应的信息抽取。安装BeautifulSoup 时已安装。...

本章详细介绍了BeautifulSoup 的安装、 BeautifulSoup 对象创建、BeautifulSoup 对象相关节点选取等内容。Beautiful Soup 是一个HTML/XML的解析器，主要的功能也是如何解析和提取 HTML/XML 数据。通过解析文档为用户提供需要抓取的数据，已成为和lxml、html6lib 一样出色的python 解释器，为用户灵活地提供不同的解析策略或强劲的速度。简单来说，就是把HTML/XML生成规范性文档，方便查找目标元素。...

本章详细介绍了网络数据采集基本流程，selenium 基本操作方法等内容。网络数据采集定义网络数据采集器（俗称爬虫、网页蜘蛛）就是一个探测机器，它的基本操作就是模拟人的行为去各个网站溜达，点点按钮，查查数据，或者把看到的信息背回来。就像一只虫子在一幢楼里不知疲倦地爬来爬去。采集到的数据将会以文本文件、数据库等形式存储起来。selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。...

​ 本章介绍了Maven的相关技术点，对于Maven的作用、特性、如何搭建本地Maven环境、如何配置IDEA Maven环境进行了一 一说明，同时对于thymeleaf模板引擎进行了详细的说明和讲解，提供了SpringBoot集成thymeleaf模板的操作演示，最后对于SpringBoot项目中如何引入静态资源进行了详细的描述和说明。什么是项目构建？清理、编译、测试、打包、部署什么是理想的项目构建？高度自动化、跨平台、可重用的组件、标准化的。...

计算总金额和积分特效此特效需要确定的变量有商品金额总计、可获商品积分、每一行商品的单品积分、每一行商品的单价、每一行商品的数量、每一行商品的小计，然后通过DOM操作找到这些变量，再使用算术运算符计算出最终总金额或积分，最后通过innerHTML把结果赋值给总金额或积分for(var i=1;i<myTableTr.length;i++){//从1开始，第一行的标题不计算 if(myTableTr[i].getElementsByTagName("td").length>2){ /.

轮播图常位于首页，用作活动推广的大图，其可以自动播放，点击左右切换按钮播放，也可以点击图片上的小圆点播放Tab切换用于点击不同的标签或标题，显示不同的内容表单验证常位于注册和登录页面，其用来在数据被送往服务器前对HTML表单中的输入数据进行验证。若输入的数据不正确，则会提示错误什么是JavaScriptJavaScript（简称“JS”） 是一种具有函数优先的轻量级，解释型或即时编译型的编程语言 其常用来为网页添加各式各样的动态功能，为用户提供更流畅美观的浏览效果Ja...