<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[Pizza_great的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/Pizza_great</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; Pizza_great]]></copyright><item><title><![CDATA[（史上最全傻瓜式教程）CM+CDH安装搭建全过程]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/118407897</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/118407897</guid><author>Pizza_great</author><pubDate>Fri, 02 Jul 2021 11:32:47 +0800</pubDate><description><![CDATA[一、安装前准备

1.1、官网教程

文档地址：


https://docs.cloudera.com/documentation/enterprise/6/6.3/topics/install_cm_cdh.html




1.2、安装环境


			主机名
			
			
			操作系统
			
			
			角色
			
			
			IP地址
			
		
			cdh100
			
			
			Centos 7.6
			
			
			主节点
			
			
			192.168.3.10]]></description><category></category></item><item><title><![CDATA[CM+CDH安装搭建全过程（总结版）]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/118407153</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/118407153</guid><author>Pizza_great</author><pubDate>Fri, 02 Jul 2021 10:44:44 +0800</pubDate><description><![CDATA[目录



第一次搭建CM、CDH

第二次搭建CM、CDH

搭建环境：

搭建过程：

报错过程：

总结复盘：

第三次搭建CM、CDH

搭建环境：

搭建过程：

报错过程：

总结复盘：

第四次搭建CM、CDH

搭建环境：

搭建过程：

报错过程：

总结复盘：

第一次搭建CM、CD...]]></description><category></category></item><item><title><![CDATA[Hadoop安全保护机制（Kerberos&LADP）详解]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/109300287</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/109300287</guid><author>Pizza_great</author><pubDate>Mon, 26 Oct 2020 22:34:36 +0800</pubDate><description><![CDATA[第一章 信息安全理论基础

CIA模型：机密性、完整性和可用性

CIA模型能够帮助建议一些信息安全原则，但该模型并不是一个需要严格遵守的规划

Hadoop平台可能涉及多个CIA模型组件，也有可能一个也涉及不到

1.1、机密性

机密性：信息只应该被期望的接收者看到

身份标识：使A和B参与机密信息传递的属于自己的唯一标志

身份验证：证明自己的身份

加密：将数学算法应用于信息片段，使加密后输出内容对于非预期接收者不可读

解密：只有期望的接收者能对加密消息进行解密，从而得到原始信息

   ...]]></description><category></category></item><item><title><![CDATA[大数据简史（从结绳记事到如何成为数据科学家）]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/109280581</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/109280581</guid><author>Pizza_great</author><pubDate>Sun, 25 Oct 2020 23:08:40 +0800</pubDate><description><![CDATA[目录



第一章 从结绳记事说起

第二章 古代数据分析学科的发展

赌博催生了概率论

人口社会调查催生了数理统计

数据分析与统计的应用——格朗特与死亡公报

数据分析与统计的应用——斯诺与霍乱

第三章 近代美国计算技术的发展与应用

数据库的起源——打孔卡

美军海军面对日本飞机自杀性攻击

第四章 商业智能与营销管理理论的兴起

罗伯特-麦克纳马拉

关系型数据库之父——埃德加-科德

商业智能的出现

商业营销理论的发展

第五章 大数据出现的标志性事件

第六章 大数据时代

大数据的时代.]]></description><category></category></item><item><title><![CDATA[大数据、云计算和物联网的关系]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/102953825</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/102953825</guid><author>Pizza_great</author><pubDate>Thu, 07 Nov 2019 14:03:18 +0800</pubDate><description><![CDATA[目录

云计算

大数据

物联网

大数据、云计算和物联网的关系

云计算



云计算实现了通过网络提供的可伸缩的、廉价的分布式计算能力，用户只需要在具备网络接入条件的地方，就可以随时随地获得所需的各种IT资源



起源：1996年康柏电脑公司使用CloudComputer

发展：2006年亚马逊的AWS服务



云计算特点

共享资源池：计算、网络、存储等资源的池化和共享
	快速...]]></description><category></category></item><item><title><![CDATA[Spark中Standalone、Yarn和Mesos三种资源管理和任务调度框架的对比]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101523962</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101523962</guid><author>Pizza_great</author><pubDate>Fri, 27 Sep 2019 12:05:44 +0800</pubDate><description><![CDATA[Spark on Standalone：

Standalone是SparkCore自带的集群资源管理框架，类似于MR V1.0采用的模式（JobTracker），内部实现了容错性和资源管理。

内部架构：Client、Master、Worker

                     

Spark on Standalone的运行流程是将程...]]></description><category></category></item><item><title><![CDATA[机器学习之聚类详解]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101351033</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101351033</guid><author>Pizza_great</author><pubDate>Wed, 25 Sep 2019 10:56:49 +0800</pubDate><description><![CDATA[聚类：试图将数据集中的样本划分为若干个通常是不相交的子集，每个子集称为一个“簇”。通过这样的划分，每个簇可能对应于一些潜在的概念（类别），这些概念对聚类算法而言事先是未知的，聚类过程仅能自动形成簇结构，簇所对应的概念语义需要由使用者来把握和命名。

聚类既能作为一个单独过程，用于寻找数据内在的分布结构，也可以作为分类等其他学习任务的前驱过程。



1.基于距离的聚类算法

K-均值算法：k-m...]]></description><category></category></item><item><title><![CDATA[大数据之Hadoop生态圈学习笔记]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101224481</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101224481</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 20:42:00 +0800</pubDate><description><![CDATA[目录

第一章大数据发展趋势

第二章 HDFS技术原理

第三章 MapReduce分布式离线批处理

第四章 YARN资源管理器

第五章 ZooKeeper集群分布式协调服务

第六章 HBase分布式NoSQL数据库

第七章Hive数据仓库

第八章Kafka

第九章Flume

第十章Loader

第十一章Streaming

第十二章Spark

第十三章Flink...]]></description><category></category></item><item><title><![CDATA[机器学习之关联规则（支持度和置信度、Apriori算法）]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101224098</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101224098</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 20:34:18 +0800</pubDate><description><![CDATA[关联规则及其基础：


表1：购物篮例子的分析



关联分析：用于发现隐藏在大型数据集中的有意义的联系。所发现的联系可以用关联规则或频繁项集的形式表示。

例如，从表1中可以提取出：{尿布} ⟹ {啤酒}（该规则表明尿布和啤酒的销售之间存在着很强的联系）。

在对购物篮进行关联分析的时候，需要处理以下两个问题：


   1、从大型事务数据集中发现模式可能在计算上要付出很高的代价；

...]]></description><category></category></item><item><title><![CDATA[通俗易懂—机器学习之支持向量机（SVM）]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101223163</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101223163</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 20:17:41 +0800</pubDate><description><![CDATA[SVM的目标：找出能够最大化训练集数据间隔的最优分类超平面。

例如，我们可以描绘一条直线然后所有代表男人的点都在直线的上边，代表女人的点都在直线的下边。这条黑色直线被称为分类超平面（如图0所示）。


图0：分类超平面



                                          ...]]></description><category></category></item><item><title><![CDATA[机器学习之朴素贝叶斯计算全过程]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101222549</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101222549</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 20:04:29 +0800</pubDate><description><![CDATA[朴素贝叶斯计算





下面我们用上图数据集训练一个朴素贝叶斯分类器，对测试例X进行分类：


X={age=youth，income=medium，student=yes，credit=fair}




首先估计类先验概率P(Ci)：






P(buys_computer=yes)=9/14=0.643

P(buys_computer=no)=5/14=0.357




然...]]></description><category></category></item><item><title><![CDATA[机器学习之决策树算法中：信息熵、信息增益、信息增益率和基尼指数的计算]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101222370</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101222370</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 19:59:56 +0800</pubDate><description><![CDATA[决策树算法中：信息熵、信息增益、信息增益率和基尼指数的计算



节选自周志华《机器学习》P75-P79页

文末附上本人手工计算过程，方便理解




























...]]></description><category></category></item><item><title><![CDATA[一文掌握SQL语言基础入门]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101222169</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101222169</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 19:54:36 +0800</pubDate><description><![CDATA[目录

1、SQL语言入门

1.1 SQL命令一般分为DQL、DML、DDL

1.2 DDL语句

1.3 DML语句和DQL语句

1.4 其他SQL语句

1、SQL语言入门

1.1 SQL命令一般分为DQL、DML、DDL



SQL：声明式编程语言

DQL：数据查询语句；SELECT查询命令，用于数据查询。

DML：数据操纵语句；INSERT、UPDATE、DELETE三种语...]]></description><category></category></item><item><title><![CDATA[PostgreSQL入门基础]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101221963</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101221963</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 19:49:31 +0800</pubDate><description><![CDATA[1、psql入门

目录

1、psql入门

2、逻辑结构管理

2.1 数据库基本操作

2.2 模式

2.2.1 模式的定义

2.2.2 公共模式

2.2.3 模式的权限

3、表

3.1 创建表

3.2 临时表

3.3 约束

3.4 修改表结构

3.5 表继承

3.6 分区表

4、 触发器

5、表空间

6、视图

7、索引

8、用户及权限管理

8.1 用户和角色...]]></description><category></category></item><item><title><![CDATA[学习Linux中遇到的bug（持续更新）]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101220366</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101220366</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 19:17:22 +0800</pubDate><description><![CDATA[1、VM虚拟机中的Centos7系统无法上网！

问题原因：没有与物理机共享网络（虚拟机与物理机共享一个IP地址）

解决办法：将虚拟机网络适配器改为（自定义：VMnet8【NAT】）；再将物理机上的网络共享给VMnet8；最后将虚拟机系统上的网络有线连接打开即可。



2、Firefox浏览器无法播放视频！

问题原因：缺少Adobe flash players

解决办法：1.先将Cent...]]></description><category></category></item><item><title><![CDATA[Linux私房菜]]></title><link>https://blog.youkuaiyun.com/Pizza_great/article/details/101219948</link><guid>https://blog.youkuaiyun.com/Pizza_great/article/details/101219948</guid><author>Pizza_great</author><pubDate>Mon, 23 Sep 2019 19:15:02 +0800</pubDate><description><![CDATA[Linux设计概念:


所有的程序或系统装置都是文件（一切皆文件） 不管构建编辑器还是附属文件，所写的程序只有一个目的，且要有效的完成目标。




LINUX目录树：

   详细的参照【FHC标准】

/：根目录，位于Linux文件系统目录结构的顶层，一般根目录下只存放目录，不要存放文件，/etc、/bin、/dev、/lib、/sbin应该和根目录放置在一个分区中。

/bin，/...]]></description><category></category></item></channel></rss>