<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[jgzd1124的专栏]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/jgzd1124</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; jgzd1124]]></copyright><item><title><![CDATA[LVS三种负载均衡方式（VS/NAT、VS/TUN、VS/DR）和 调度算法介绍]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/95319668</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/95319668</guid><author>jgzd1124</author><pubDate>Wed, 10 Jul 2019 11:41:56 +0800</pubDate><description><![CDATA[LVS

LVS是一种集群(Cluster)技术，采用IP负载均衡技术和基于内容请求分发技术。调度器具有很好的吞吐率，将请求均衡地转移到不同的服务器上执行，且调度器自动屏蔽掉服务器的故障，从而将一组服务器构成一个高性能的、高可用的虚拟服务器。整个服务器集群的结构对客户是透明的，而且无需修改客户端和服务器端的程序。

一、LVS主要组成部分

  负载调度器(load balancer/ Direc...]]></description><category></category></item><item><title><![CDATA[集群session共享方案]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/79775978</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/79775978</guid><author>jgzd1124</author><pubDate>Sun, 01 Apr 2018 10:24:50 +0800</pubDate><description><![CDATA[转博友的比较有用参考文章：使用Spring Session做分布式会话管理，分布式应用session会话管理-基于redis说在前面：由于这篇文章参考了别人的，自己也总结了，所以很不要脸的把这篇文章标为了原创(捂脸)。但是参考的文章都写在最上面了。在Web项目开发中，会话管理是一个很重要的部分，用于存储与用户相关的数据。通常是由符合session规范的容器来负责存储管理，也就是一旦容器关闭，重启会...]]></description><category></category></item><item><title><![CDATA[pinpoint]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/78314941</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/78314941</guid><author>jgzd1124</author><pubDate>Mon, 23 Oct 2017 07:46:54 +0800</pubDate><description><![CDATA[http://blog.youkuaiyun.com/u014091123/article/details/74002463]]></description><category></category></item><item><title><![CDATA[CSV数据导入mysql数据库]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/60136948</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/60136948</guid><author>jgzd1124</author><pubDate>Fri, 03 Mar 2017 12:01:22 +0800</pubDate><description><![CDATA[1. 一个CSV文件2.5G 用excel打开直接死机，通过UltraEdit可以加载到文件里面，但是无法保存和拷贝。
2.将文件切分成几个文件，通过CVS拆分工具拆分（）
3.通过mysql data load file 命令将文件导入到mysql里面，但是文件编码格式和数据库的编码格式需统一
4.通过native 客户端导入]]></description><category></category></item><item><title><![CDATA[系统吞吐量、TPS（QPS）、用户并发量、性能测试概念和公式]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/46670831</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/46670831</guid><author>jgzd1124</author><pubDate>Sun, 28 Jun 2015 13:10:48 +0800</pubDate><description><![CDATA[一．系统吞度量要素：

  一个系统的吞度量（承压能力）与request对CPU的消耗、外部接口、IO等等紧密关联。单个reqeust 对CPU消耗越高，外部系统接口、IO影响速度越慢，系统吞吐能力越低，反之越高。

系统吞吐量几个重要参数：QPS（TPS）、并发数、响应时间

        QPS（TPS）：每秒钟request/事务 数量

        并发数： 系统同时]]></description><category></category></item><item><title><![CDATA[linux yum 安装]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/22734695</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/22734695</guid><author>jgzd1124</author><pubDate>Tue, 01 Apr 2014 15:11:20 +0800</pubDate><description><![CDATA[今天工作中，用yum源安装包时无意遇到的。

Loaded plugins: product-id, refresh-packagekit, security, subscription-manager

Updating certificate-based repositories.

Unable to read consumer identity

Existing lock]]></description><category></category></item><item><title><![CDATA[hadoop pig]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/22410437</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/22410437</guid><author>jgzd1124</author><pubDate>Fri, 28 Mar 2014 16:31:12 +0800</pubDate><description><![CDATA[本文可以让刚接触pig的人对一些基础概念有个初步的了解。
本文大概是互联网上第一篇公开发表的且涵盖大量实际例子的Apache Pig中文教程（由Google搜索可知），文中的大量实例都是作者Darran Zhang（website: codelast.com）在工作、学习中总结的经验或解决的问题，并且添加了较为详尽的说明及注解，此外，作者还在不断地添加本文的内容，希望能帮助一部分人。

Ap]]></description><category></category></item><item><title><![CDATA[linux 常用命令集]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/22068953</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/22068953</guid><author>jgzd1124</author><pubDate>Tue, 25 Mar 2014 16:00:51 +0800</pubDate><description><![CDATA[1、查看端口占用情况的命令：lsof -i
2、查看某一端口的占用情况：
 lsof -i:端口号




3、service iptables stop (不推荐)

　　开放8080端口的解决步骤如下：

　　1、修改/etc/sysconfig/iptables 文件，增加如下一行：

　　-A RH-Firewall-1-INPUT -m state --stat]]></description><category></category></item><item><title><![CDATA[做项目被log4j的输出格式化参数搞烦了，索性把API的相关部分大致翻译一下，原文参见 ----转载]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/22068787</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/22068787</guid><author>jgzd1124</author><pubDate>Tue, 25 Mar 2014 15:55:35 +0800</pubDate><description><![CDATA[http://logging.apache.org/log4j/docs/api/org/apache/log4j/PatternLayout.html
 

 




参数
说明
例子


%c
列出logger名字空间的全称，如果加上{}表示列出从最内层算起的指定层数的名字空间
log4j配置文件参数举例
输出显示媒介


假设当前logger名字空间是]]></description><category></category></item><item><title><![CDATA[log4j日志输出性能优化-缓存、异步]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/22066127</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/22066127</guid><author>jgzd1124</author><pubDate>Tue, 25 Mar 2014 15:51:53 +0800</pubDate><description><![CDATA[1、log4j已成为大型系统必不可少的一部分，log4j可以很方便的帮助我们在程序的任何位置输出所要打印的信息，便于我们对系统在调试阶段和正式运行阶段对问题分析和定位。由于日志级别的不同，对系统的性能影响也是有很大的差距，日志级别越高，性能越高。 



2、log4j主要分为error,warn,info,debug四个级别，也是使用最多的四种，日志级别从左至右依次增加。 

3、l]]></description><category></category></item><item><title><![CDATA[hadoop 编译jar包和运行]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/16881177</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/16881177</guid><author>jgzd1124</author><pubDate>Fri, 22 Nov 2013 11:40:31 +0800</pubDate><description><![CDATA[hadoop 编辑通过编译jar包方法：

1.建立存放编译java class类文件    

  mkdir wordcount_classes          

2.使用javac 编译 mapreduce java类  

  javac -classpath /home/Andy/hadoop/hadoop-1.0.1/hadoop-core-1.0.1.jar -d]]></description><category></category></item><item><title><![CDATA[淘宝HBASE基础介绍]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/16826833</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/16826833</guid><author>jgzd1124</author><pubDate>Tue, 19 Nov 2013 16:33:41 +0800</pubDate><description><![CDATA[hbase介绍


hbase 介绍


一、简介


history 


started by chad walters and jim


2006.11 G release paper on BigTable


2007.2 inital HBase prototype created as Hadoop contrib


2007.10 Fi]]></description><category></category></item><item><title><![CDATA[不错的数据收集]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/16823573</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/16823573</guid><author>jgzd1124</author><pubDate>Tue, 19 Nov 2013 14:07:56 +0800</pubDate><description><![CDATA[目录[-]


（一）hadoop 相关安装部署
（二）hive
（三）pig
（四）hadoop原理与编码
（五）数据仓库与挖掘
（六）Oozie工作流
（七）HBase
（八）flume
（九）sqoop
（十）ZooKeeper
（十一）NOSQL
（十二）Hadoop 监控与管理
（十三）Storm
（十四）YARN & Hadoop 2.0
附：

]]></description><category></category></item><item><title><![CDATA[WebRTC现状及实现概要]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/10133741</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/10133741</guid><author>jgzd1124</author><pubDate>Wed, 21 Aug 2013 09:43:55 +0800</pubDate><description><![CDATA[1 引言

1.1 编写目的

本文讲述浏览器引入 WebRTC（Web Real-Time Communication） 技术的必要性、WebRTC现状及实现方法。

2011 年以前，浏览器之间要实现实时通信需要私有技术，这些技术大部分都是通过插件和客户端来安装使用。对于许多用户来说，插件的下载、安装和更新是一个复杂、繁琐和容易出错的操作。对于开发人员来说，插件的的调试、测试、部署]]></description><category></category></item><item><title><![CDATA[ETL 工具下载全集 包括 Informatica Datastage Cognos( 持续更新)]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/10099429</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/10099429</guid><author>jgzd1124</author><pubDate>Tue, 20 Aug 2013 10:49:12 +0800</pubDate><description><![CDATA[随笔- 109  文章- 3  评论- 606 













Datastage 8.0
BT种子下载：http://files.cnblogs.com/taven/Datastage_8.0.rar
 
Informatica PowerCenter 8.6.0 for Win 32Bit
BT种子下载：http://files.cnblogs.]]></description><category></category></item><item><title><![CDATA[HBASE+HADOOP --2]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/10071477</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/10071477</guid><author>jgzd1124</author><pubDate>Mon, 19 Aug 2013 15:02:51 +0800</pubDate><description><![CDATA[hive-0.7.1


hbase-0.90.3          


hadoop-0.20.203.0   三个NODE


在有了HBASE+HADOOP之后，数据的统计成了问题，MAP REDUCE是我们想用的功能，借助HIVE来连接HBASE


一、准备 
为了能使HIVE多用户操作，在NAMENODE上建立MYSQL，

1、建立MYSQL DATA]]></description><category></category></item><item><title><![CDATA[linux 自动重启tomcat 脚本]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/9714713</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/9714713</guid><author>jgzd1124</author><pubDate>Fri, 02 Aug 2013 11:37:49 +0800</pubDate><description><![CDATA[Tomcat作为开源的服务器，性能与稳定性上比起一些商业服务器还是要差一些。将项目部署到Tomcat后隔段时间就会死掉，出现这种问题的主要原因可能是内存数据溢出,因为Tomcat容器在发生大量与数据库交互查询或者操作的时候很容易出现问题。定时重启是一个很好的补救措施，定时重启可以定时的清理内存也降低了Tomcat运行的风险，从而保持tomcat的最佳性能。 


一、写一个shell脚本my]]></description><category></category></item><item><title><![CDATA[sqoop 安装]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/9383991</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/9383991</guid><author>jgzd1124</author><pubDate>Fri, 19 Jul 2013 17:28:17 +0800</pubDate><description><![CDATA[运行环境  centos 5.6   hadoop  hive
sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具


在使用过程中可能遇到的问题：


sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sqoop-1.2.0-CDH3B4依赖hadoop-core-0.20]]></description><category></category></item><item><title><![CDATA[hbase 与 hive配置]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/9307425</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/9307425</guid><author>jgzd1124</author><pubDate>Fri, 12 Jul 2013 10:38:01 +0800</pubDate><description><![CDATA[环境： Hadoop1.0.4， Hbase0.94.0, Zookeeper 3.4.3， 这三个组件已经在3台机器master, s1, s2上以集群方式安装并运行。


1> 下载hive-0.9.0.tar.gz 并解压到/opt/hadoop/hive-0.9.0

2>  cd /opt/hadoop/hive-0.9.0/lib， 删除已有的hbase-0.92.0.jar]]></description><category></category></item><item><title><![CDATA[hadoop+hbase+zookeeper启动步骤]]></title><link>https://blog.youkuaiyun.com/jgzd1124/article/details/9302375</link><guid>https://blog.youkuaiyun.com/jgzd1124/article/details/9302375</guid><author>jgzd1124</author><pubDate>Thu, 11 Jul 2013 16:57:51 +0800</pubDate><description><![CDATA[1. hadoop 启动
./start-all.sh
或是
hadoop namenode -format
./start-dfs.sh
./start-yarn.sh
 jps
 查看启动情况


2.zookeeper启动
./zkServer.sh start


3.hbase 启动
./start-hbase.sh]]></description><category></category></item></channel></rss>