cpc_haikuotiankong的博客

原创 Hive查询指定字段之外的所有字段

hive查询指定字段之外所有字段

原创 ClickHouse技术分享PPT

原创 Hadoop中yarn节点任务资源配置

set mapreduce.map.memory.mb=4096;// 每个Map Task需要的内存量set mapreduce.map.java.opts=-Xmx3276M; // 每个Map Task 的JVM最大使用内存set mapreduce.reduce.memory.mb=4096; // 每个Reduce Task需要的内存量set mapreduce.reduce.java.opts=-Xmx3276M; // 每个Reduce Task 的JVM最大使用内存set mapre

原创 ClickHouse深度总结

一、简介1.1ClickHouse是什么ClickHouse 是一个用于联机分析 (OLAP)的列式数据库管理系统( DBMS)，来自于俄罗斯本土搜索引擎企业 Yandex 公司，是为世界第二大web分析平台（Yandex.Metrica）所开发 2016年开源，开发语言是C++,是一款PB级的交互式分析数据库。ClickHouse的性能超过了目前市场上可比的面向列的DBMS，每秒钟每台服务器每秒处理数亿至十亿多行和数十千兆字节的数据。1.2CK的热度与其他开源分析数据库的受欢迎程.

原创 大数据平台安装部署（适用虚拟机级真实服务器，亲测）

大数据集群搭建一、基础环境准备（虚拟环境or服务器环境）1. 虚拟环境准备（服务器安装跳过此步骤）1.1 安装vmware[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-f1N35Du3-1612505654356)(C:\Users\sthq\AppData\Roaming\Typora\typora-user-images\image-20210204135642876.png)]注意：安装centos8系统及以上需要高版本vmware,实测vmware12.x

原创 java程序员等级一览：

凡人：买本书凑凑热闹，听得多写的少，过段时间就把老师教的都忘了。这个阶段是刷掉人最多的阶段，也是从凡人到程序员本质区别的阶段。你的日后成就在于你的习惯与态度。隔一段时间整理自己的知识体系是重中之重。如果你做得多于看代码，那么恭喜你，你进入下一阶段。筑基：评价标准：懂了怎么配置环境变量，懂得bin目录下都有什么，java命令行基本懂点。明白了变量类型，也碰过几个坑，知道java的值传递，引用传...

原创 记录一个io流引起的tcp连续传输阻塞问题

tcp客户端通过字节数组传输一个图片到服务端，服务端数组接收并写到本地文件；重点是Client继续发送数据流到Server端。然后产生了问题：客户端代码：public class Client { public static void main(String[] args) throws Exception, IOException { System.out....

原创 && 和＆以及｜和｜｜的区别

一．概念：按位与：a&b是把a和b都转换成二进制数然后再进行与的运算；逻辑与：a&&b就是当且仅当两个操作数均为 true时，其结果才为 true；只要有一个为零，a&&b就为零。二、＆与＆＆的区别：&和&&都可以用作逻辑与的运算符，表示逻辑与（and），当运算符两边的表达式的结果都为true时，整个运算结果才为true，否则，只要有一方为false，则结果为false。&&还

转载 tcp udp的区别

TCP和UDP是OSI模型中的运输层中的协议。TCP提供可靠的通信传输，而UDP则常被用于让广播和细节控制交给应用的通信传输。UDP(User Datagram Protocol)        UDP不提供复杂的控制机制，利用IP提供面向无连接的通信服务。并且它是将应用程序发来的数据在收到的那一刻，立刻按照原样发送到网络上的一种机制。        即使是出现网络拥堵的情况下，UDP也无法进

转载 怎样自动生成makefile

由于毕业设计开发的平台是Linux, 为了在Linux进行,Makefile的编写是必不可少的,为偷懒,我想使用autotools来进行Makefile的自动生成,在阅读大量的资料后,在理解的基础之上,做了一个小实验,过程记录得非常详细!我的平台是:HP 6510B NotebookFedora 8 32 位的Autotools工具的版本均为Fedora 8 完全自带的,尚未进行过

原创 Windows red5 安装配置

red5安装配置 一.安装 jdk。     1.下载jdk安装，记住安装路径。jdk与jre要在同一路径。        2.配置环境。