原创 NOTEPAD++自动对齐语句的功能键

全部选中-------》CTRL+A左对齐-------》CTRL+ALT+L右对齐------》CTRL+ALT+R向vC6里面的ALT +F8功能一样

原创 c++封装的http/https类 基于libcurl vs编译器

最近做软件需要用访问网页，本来可以自己用socket写一个，但是感觉挺麻烦，要涉及到管理cookie之类的，不如就直接使用libcurl来封装一个，支持http和https 访问网页。类的功能GET方式访问网页POST 提交数据将网页保存到本地，图片，文件都可以。自动管理cookie信息，轻松实现用户登陆，发帖之类的功能全部源代码打包，包括libcurl编译好的

原创 spark 1.1.0 on hadoop 2.4.1 安装笔记 (resourcemanager ha 支持)

java高级交流群：37341439 ，， 如果文章看不懂的，可以加群问我哦~~一起学习。由于spark1.1.0还没正式发布只是v1.1.0-snapshot2 版本。但是hadoop2.4.1的resourcemanager ha 在spark 1.0.2版本还不支持（提交spark到yarn的时候。applicationmaster老是会请求本地的8030端口

原创 oozie on yarn oozie 4.0.1 hadoop2.3.0 安装笔记

oozie 需要编译哦~~ 编译下载的依赖有800多m呢，，所以得找台网络好点的机器去编译。。。1：下载地址：http://mirror.bit.edu.cn/apache/oozie/  2：ext2.2.zip下载地址：http://oozie.apache.org/docs/4.0.1/DG_QuickStart.html  oozie的quick start页面

原创 hbase on yarn 安装笔记，私货，浅显易懂

java高级交流群：hbase不需要编译，只需要选择需要的hadoop版本对应的hbase就可以。比如hbase-0.98.2-hadoop2-bin.tar.gz1：集群机器间要建立ssh互信先到所有机器执行下面代码创建rsamkdir ~/.sshchmod 700 ~/.sshssh-

原创 spark on yarn 安装笔记，私货总结！浅显易懂！

1：需要在各个机器安装scala ，安装taz包2：需要编译spark记得编译的用户要安装scala 并且设置SCALA_HOME变量如果报protobuf错误，可能是因为protobuf和pom.xml的版本不一致，可以修改pom.xml里面的protobuf版本号2.5.0用maven编译：编译命令如下：export MAVEN_OPTS

原创 storm on yarn 最简单安装笔记！！！私货哦！！！

下载地址：https://github.com/yahoo/storm-yarn下载好的storm-yarn-master.zip 得放到linux进行解压，在windows解压的话，lib目录下的软连接会丢失1:storm on yarn 需要编译unzip storm-yarn-master.zip然后进入 storm-yarn-

转载 storm on yarn 安装

原文地址：http://hortonworks.com/kb/storm-on-yarn-install-on-hdp2-beta-cluster/This is the installation instructions for Storm on YARN. Our work is based on the code and documentation provided by Yah

原创 hadoop2.0 yarn 之 资源调度器 基于hadoop2.2.0

资源调度器是 hadoop yarn中最核心的组件之一，是resourcemanage中一个插拔式的服务组件，负责整个集群资源（container）的管理和分配。     背景：          hadoop最初设计目的是支持大数据批处理作业，如日志挖掘，web索引等作业，为此，hadoop仅提供了一个非常简单的调度机制：FIFO，即先来先服务，在该调度机制下，所有作业被统一提交到一个队

原创 hadoop2.0 yarn 之 mapreduce on yarn (MRv2) 基于hadoop2.2.0

java高级交流群：37341439 欢迎所有学习hadoop2.2.0的朋友加入讨论交流，分享实战经验！我们群无下限哦~~mapreduce on yarn (MRv2)mapreduce on yarn 与MRv1在编程模型和数据处理引擎方面的实现是一样的，唯一的区别是运行时环境，mapreduce on yarn的运行时环境由 yarn 和applicationmaster构成。

原创 hadoop2.0 yarn 总结 基于hadoop2.2.0

java高级交流群：37341439 欢迎所有学习hadoop2.2.0的朋友加入讨论交流，分享实战经验！我们群无下限哦~~  hadoop 2.0hadoop2.0的组成：1：计算框架：MRv2:（与mrv1有相同的编程模型和数据处理引擎（优化过），唯一不同的是运行时环境。）          编程模型：新旧api，新api兼容旧api方面还存

转载 hadoop2.2.0安装与启动

Setup newest Hadoop 2.x (2.2.0) on UbuntuIn this tutorial I am going to guide you through setting up hadoop 2.2.0 environment on Ubuntu.Prerequistive$ sudo apt-get install openjdk-7-jdk

转载 Java 多线程设计模式

转帖地址:http://blog.sina.com.cn/s/blog_4ab8aca40100flyl.htmlJava 多线程设计模式基础知识：java内存模型：主存储器，工作存储器主存储器就是实例位置所在区域，所有的实例都位于主存储器内。尤其实例所拥有的字段即位于主存储器内的区域。主存储器为所有的线程所共有。工作存储器为各个线程所拥有的作业区，，所有的线程都用其专用的

原创 jvm垃圾回收器中使用的算法

java高级交流群 37341439     无下限，不搞歧视，欢快的交流~1：引用计数法（经典，古老）     有对象引用count+1，当count为0时，回收。     当a引用b，b引用a时，就会出现无法回收的情况，所以java垃圾回收器没有使用这种算法。2：标记-清除算法     缺点：造成空间碎片     从根节点找所有可达对象，然后清除所有不可

原创 jvm性能调优，垃圾回收器详细说明。

java高级交流群 37341439     无下限，不搞歧视，欢快的交流~1:新生代串行收集器：(默认收集器)     算法：复制算法     -XX:+UseSerialGC 指定使用新生代串行收集器和老年代串行收集器     优点：效率高，久经考验     缺点：串行，如果回收对象过多，或者堆过大，停顿时间会过长。2：老年代串行收集器（cms收集器的备

转载 上传进度ProgressListener

如果上传大文件，那么上传进度的显示就比较重要，那么如何实现进度条的显示呢？ 显示文件上传进度，可以使用apache下的FileUpload组件，它的下载地址是：http://commons.apache.org/fileupload/它的UserGuide里http://commons.apache.org/fileupload/using.html有详细的使用的例子和说明。我的实

转载 oracle 数据字典试图种类说明

ORACLE数据字典视图的种类分别为：USER,ALL 和 DBA.　　USER_*:有关用户所拥有的对象信息，即用户自己创建的对象信息　　ALL_*:有关用户可以访问的对象的信息，即用户自己创建的对象的信息加上　　其他用户创建的对象但该用户有权访问的信息　　DBA_*:有关整个数据库中对象的信息　　(这里的*可以为TABLES,INDEXES,OBJECTS,USERS等。)

原创 oracle中的段区块的说明

段：segment一个段建立以后，oracle会给它分配一个区，这个区一般是8个块（空块）。em建立表空间：创建表空间要考虑的事项有：1：数据文件个数2：段的管理方式          自动：表空间中的对象将自动管理其空闲空间，这将提高空闲空间管理性能（毫无疑问选择自动管理）          手动：表空间中的对象将使用空闲列表来管理其空闲空间，这是为了确保向后

原创 eclipse 添加web开发工具

java高级重口交流群（1000人）欢迎各位朋友加群讨论 37341439单击“Help(帮助)”-“Software Updates(更新)”-“Add Site(添加网址)”输入 http://download.eclipse.org/webtools/updates/ 单击确定。因为下载的不是javaee版本的eclipse，所以不能创建web工程，需要添加eclipse的

原创 linux中quota的使用教程

java高级交流群：37341439（1000人群）欢迎各位技术朋友，互相帮忙，互相学习。1先得确认要限制的目录是单独的文件系统df -h /home 测试2如果是单独的文件系统。就需要对该目录添加quota支持，a：临时方案，电脑重启失效：mount -o remount,usrquota,grpquota /home     b:重启还能用：编辑fs

转载 linux下文件的安装方法与卸载方法。~

转帖地址：http://blog.163.com/saintatgod@126/blog/static/3594799820110132580842/验证下载的文件是否有问题[root@test/root]# md5sum [-bct]filename [root@test/root]# md5sum [--status|--warn]--check filename -b ：使用

原创 CheckPerf.sh

topCount=15pid=`pgrep java`echo "pid:$pid   topCount:$topCount    cpu:$cpu">top>stacktop -b -n 1 -Hp $pid | grep java | awk '{ printf("%x\t%s\t%d\n", $1, $11, $1) }' | sort -rnk2 >ttop_l

转载 jvm 文章，日志说明

转帖地址：http://blog.youkuaiyun.com/kangojian/article/details/5289410堆大小搭配要注意JVM堆内存实际分成好几种，可以详细配置 吞吐量  暂停（垃圾回收的时候经常带来程序暂停）选择 并行垃圾回收能大大降低暂停时间，稍微提高一点CPU使用先看看堆内存种类：垃圾回收主要是对Young Generation块和Old Generation块

转载 jvm 日志输出说明

转帖地址：http://www.iteye.com/topic/603347在大型的java运用中，要进行程序调优，指定一个合适的垃圾回收机制是必不可少的，那如何可确定某gc是否使得程序最优化呢？我们可以查看jvm打印出的gc日志来分析，并做出进一步优化，而目前并没有一篇文章明确的指明java中各种gc算法打印出日志的格式，以及如何阅读。所以接下来本文将试着边介绍各种垃圾回收机制边

转载 jvm调试工具说明

本文转自：http://blog.youkuaiyun.com/kelly859/article/details/5827365 jstack -- 如果java程序崩溃生成core文件，jstack工具可以用来获得core文件的java stack和native stack的信息，从而可以轻松地知道java程序是如何崩溃和在程序何处发生问题。另外，jstack工具还可以附属到正在运行的java程序中

转载 jmap和jhat查看java启用的http端口

打印heap信息Java代码  D:\>jmap -histo 4636 > d:log.log  生成heap信息并生成二进制文件Java代码  D:\>jmap -dump:live,format=b,file=d:\log.log 4636  Dumping heap to D:\log.log ...  Heap dump f

转载 jstat 说明

显示java进程内存使用的相关信息jmap pid #打印内存使用的摘要信息 jmap –heap pid #java heap信息 jmap -histo:live pid #统计对象count ，live表示在使用 jmap -histo pid >mem.txt #打印比较简单的各个有多少个对象占了多少内存的信息，一般重定向的文件jmap -dump:format=b,file=

转载 jvm gc说明

转帖地址：http://hi.baidu.com/mailluzhou/item/98052fdc701baade241f4008一、相关概念基本回收算法引用计数（Reference Counting）比较古老的回收算法。原理是此对象有一个引用，即增加一个计数，删除一个引用则减少一个计数。垃圾回收时，只用收集计数为0的对象。此算法最致命的是无法处理循环引用的问题。标记-

转载 jvm参数说明

转忒地址：http://www.cnblogs.com/wenfeng762/archive/2011/08/14/2137810.htmlJVM参数说明做了这么多年java，自以为算是熟悉，其实还差得远，啥也别说了，还是踏踏实实地学吧。今天总结一下常用的JVM的启动参数。参数类别参数项说明标准参数（-，所有的JVM实现都必须

转载 ubuntu安装eclipse

转帖地址：http://www.linuxidc.com/Linux/2011-02/32753.htmUbuntu 10.10下Eclipse+ADT(Android)开发环境搭建[日期：2011-02-27]来源：Linux社区 作者：red_g123[字体：大 中 小]系统环境：Ubuntu 10.10桌面环境：gn

转载 ubuntu安装jdk （openjdk）

文章的最后是我设置JAVA_HOME时用的方法，测试成功，可直接按照我的方法设置快捷键1，ctrl+H，Ubuntu下显示隐藏文件 Ubuntu java环境配置方法1：修改/etc/profile 文件所有用户的 shell都有权使用这些环境变量在 shell终端执行命令：vi /etc/profile在 profile文件末尾加入：JAVA_HOME=/usr/

转载 apt-get

apt-get install vim openssh-server rsync rdate bzip2 gcc flex bison sysstat nmap portmap make psmisc lrzsz gcc gdb g++ libxml2-dev libncurses5-dev automake1.9 libtool dnsutils rcconf  apt-get up

转载 mysql 启动相关命令

一、启动方式1、使用 service 启动：service mysqld start2、使用 mysqld 脚本启动：/etc/init.d/mysql start3、使用 safe_mysqld 启动：safe_mysqld&二、停止1、使用 service 启动：service mysqld stop2、使用 mysqld 脚本启动：/etc/i

转载 mysql数据库内容比较

http://www.maatkit.org/doc/mk-table-checksum.html

转载 mysql my.cnf文件说明

转帖地址：http://blog.chinaunix.net/uid-20639775-id-154429.html 调整MySQL运行参数，修改/etc/my.cnf文件调整mysql运行参数重启MySQL后生效，在MySQL4版本以后，一部分内部变量可以在MySQL运行时设置，不过重启MySQL就失效了。mysqld程序--目录和文件basedir      = path

转载 Mysql常用命令行大全

原帖地址：http://www.chinaz.com/program/2009/0115/62526.shtml第一招、mysql服务的启动和停止net stop mysqlnet start mysql第二招、登陆mysql语法如下： mysql -u用户名 -p用户密码键入命令mysql -uroot -p， 回车后提示你输入密码，输入12345，然后回车即

转载 ubuntu 安装mysql

安装MySQL sudo apt-get install mysql-server 这个应该很简单了，而且我觉得大家在安装方面也没什么太大问题，所以也就不多说了，下面我们来讲讲配置。 配置MySQL 注意，在Ubuntu下MySQL缺省是只允许本地访问的，如果你要其他机器也能够访问的话，那么需要改变/etc/mysql/my.cnf配置文件了！下面我们一步步地来：默认的My

原创 aaa

1  ll    2  apt-get install htop    3  yum list htop*    4  man yum    5  rpm qa htop    6  rpm -qa htop    7  apt-get install rpm    8  man rpm    9  rpm -qa htop   10  rpm q htop

原创 yum 命令详细说明

原创 rpm 命令详细说明