- 博客(71)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 flume Selector（复用与复制）测试
转载：https://blog.youkuaiyun.com/looklook5/article/details/40430965Flume支持从一个源发送事件到多个通道中，这被称为事件流的复用。这里需要在配置中定义事件流的复制/复用，选择1个或者多个通道进行数据流向。而关于selector配置前面也讲过：<Agent>.sources.<Source1>.se...
2019-03-13 15:10:22
750
原创 Kafka基础（二）
常用命令#启动服务 服务器上所有服务已启动。启动Zookeeper：> bin/zookeeper-server-start.sh config/zookeeper.properties启动Kafka:> bin/kafka-server-start.sh config/server.properties#创建topic （默认已进入kafka目录）./bin/kafk...
2019-03-03 11:29:33
319
原创 kafka 有序性和偏移量offset
Kafka分布式的单位是partition，同一个partition用一个write ahead log组织，所以可以保证FIFO的顺序。不同partition之间不能保证顺序。Apache Kafka官方保证了partition内部的数据有效性（追加写、offset读）；为了提高Topic的并发吞吐能力，可以提高Topic的partition数，并通过设置partition的repl...
2019-03-03 11:27:29
1662
转载 Kafka 基础（一）
官网：http://kafka.apache.org/最新：Apache Kafka is a community distributed streaming platform capable of handling trillions of events a day. Initially conceived as a messaging queue, Kafka is based on an...
2019-03-03 11:22:36
198
原创 flume基础（三）
flume启动进入flume客户端的bin目录，执行命令：./flume-ng agent --conf ../conf/ -f ../conf/flumeToKafka.conf -Dflume.root.logger=DEBUG,console -n agentDemo配置文件名：flumeToKafka，配置文件中agent的名称：agentDemo##关闭...
2019-03-02 19:06:24
205
原创 flume基础（二）
Flume 的 Source、Channel和Sink的内置类型如下：（可参考官网修改配置 http://flume.apache.org/FlumeUserGuide.html）Flume Source Source类型 说明 Avro Source 支持Avro协议（实际上是Avro RPC），内置支持...
2019-03-02 19:06:08
328
转载 flume基础（一）
官网：http://flume.apache.org/FlumeUserGuide.html概念：flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据; 同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 。1、Flume 的一些核心概念：组件 功能...
2019-03-02 19:05:44
286
原创 tomcat在linux启动应用慢解决方式
问题：o.a.c.util.SessionIdGeneratorBase - Creation of SecureRandom instance for session ID generation using [SHA1PRNG] took [2,741] milliseconds原因：拿Tomcat /dev/random做关键词，一堆详细说明。建议看wiki。https://www...
2019-02-01 17:13:41
494
转载 mysql服务设置远程连接 解决1251 client does not support ..问题
转：https://blog.youkuaiyun.com/qq_22211217/article/details/80415248一、前期准备1、虚拟机/物理机 mysql环境（非本机）2、本机 navicat软件（验证远程连接）二 、mysql配置1、在远程主机的本机 使用root用户连接mysqlmysql -u root -p备注 ： mysql -u 最高权限用户名 -p 再输入密码进...
2018-07-14 01:11:18
1103
1
转载 Hadoop MapReduce框架
参考资料：hadoop 学习笔记：mapreduce框架详解：www.cnblogs.com/sharpxiajun/p/3151395.htmlMR框架结构：https://blog.youkuaiyun.com/wf1982/article/details/6682427
2018-07-08 16:38:14
137
转载 hadoop集群高可用 (High Availability)
参考资料：大数据集群环境搭建——HDFS HA篇：https://segmentfault.com/a/1190000007239743Hadoop NameNode 高可用 (High Availability) 实现解析：https://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-name-node/...
2018-07-08 16:38:10
583
原创 hadoop token过期问题
1、Token 过期问题 Failed to Update HDFS Delegation Token for long running application in HA mode参见 https://issues.apache.org/jira/browse/HDFS-9276 https://github.com/apache/spark/pull/9168错误信息：org.apache.h...
2018-07-08 16:38:06
4423
原创 HDFS初步
HDFS是hadoop的分布式文件系统，全称：Hadoop Distributed Filesystem。由1个master(call me NameNode)和N个slaver组成（call me datanode）。其中namenode负责存储元数据,控制和协调datanode存储文件数据。通过写多份（可定义，默认1）的方式实现数据的可靠性和读取的高效性。主要特点： 1. 适合存储大文件...
2018-07-08 16:38:01
213
转载 Redis命令与配置
Redis 命令参考：doc.redisfans.comRedis Cluster 3.0.5 集群的命令、使用、维护：https://www.zybuluo.com/phper/note/205009redis配置详解：https://www.cnblogs.com/joshua317/p/5635297.htmlRedis详解与常见问题解决方案：https://blog.youkuaiyun.com/xy...
2018-07-08 16:37:51
136
转载 Jedis
参考资料Redis 单点模式和集群模式代码测试及问题记录：https://blog.youkuaiyun.com/boonya/article/details/49466003JedisCluster操作redis集群demo：https://www.cnblogs.com/lxcy/p/8120301.html Redis 单点模式和集群模式代码测试方式略有不同。1)cluster环境下redis的slav...
2018-07-08 16:37:47
803
转载 Redis 集群模式&管道模式
参考资料：Redis集群模式：redis集群 应该注意的问题：https://blog.youkuaiyun.com/zhang89xiao/article/details/51273970Redis连接池---jedis-2.9.0+commons-pool2-2.4.2：https://blog.youkuaiyun.com/wangshuang1631/article/details/54091673jedis连接...
2018-07-08 16:37:42
1556
转载 Redis常见错误
转载：redis:CLUSTER cluster is down 解决方法：https://blog.youkuaiyun.com/qq_35066345/article/details/79833609集成redis集群错误：redis.clients.jedis.exceptions.JedisDataException: ERR This instance has cluster support...
2018-07-08 16:37:38
889
转载 Redis读写分离
场景：Redis的主从架构，能帮助我们实现读多，写少的情况意义：读写分离主要是为了扩展读。你也可以理解为提高了并发吞吐和负载能力。读写分离一致性 读写分离： 为保证数据库数据的一致性，我们要求所有对于数据库的更新操作都是针对主数据库的，但是读操作是可以针对从数据库来进行。大多数站点的数据库读操作比写操作更加密集，而且查询条件相对复杂，数据库的大部分性能消耗在查询操作上了。主从复制数据是异步完成的，...
2018-07-08 16:37:34
1179
转载 JS 事件冒泡
参考：1、JavaScript事件冒泡简介及应用 http://www.cnblogs.com/webflash/archive/2009/08/23/1552462.html2、冒泡型事件、捕获型事件 https://blog.youkuaiyun.com/hzw2312/article/details/7260359 冒泡型事件的基本思想是、事件按照从最特定的事件目标到最不特定的事件目标(d...
2018-07-06 23:40:00
143
原创 window.close()
场景：Chrome 里，直接输入浏览器地址，使用window.close() 无法关闭页面。可参考解决：（chrome 最新版目前没看到完美解决方法）https://stackoverflow.com/questions/57854/how-can-i-close-a-browser-window-without-receiving-the-do-you-want-to-close-thi#Scr...
2018-07-06 23:39:51
936
原创 javascript文件上传下载
文件上传：1、同步上传使用 fileload 工具 http://blog.youkuaiyun.com/renfujiang/article/details/61989132、异步上传 A. 使用回调的方式，文件信息入库+文件上传。 这里使用模态框，部分核心代码： function UploadFile() { var fi...
2018-07-06 23:39:29
620
原创 AngularJS基础
angular源码分析：angular的源代码目录结构说明 http://www.cnblogs.com/web2-developer/p/angular-4.htmlGithub: https://github.com/angularAngularJS 教程：www.runoob.com/angularjs/angularjs-tutorial.htmlAngularJS 通过 ng-direc...
2018-07-06 23:39:23
148
原创 Angularjs 常用指令
ng指令太多了，参考官网：https://docs.angularjs.org/api/ng/directive常用的：ng-app 指令定义一个 AngularJS 应用程序。（如果移除了 ng-app 指令，HTML 将直接把表达式显示出来，不会去计算表达式的结果）ng-app 指令在网页加载完毕时会自动引导（自动初始化）应用程序。 ng-model 指令把元素值（比如输入域的值）绑定到应用程...
2018-07-06 23:39:18
325
原创 Angularjs 服务
AngularJS 服务(Service)：www.runoob.com/angularjs/angularjs-services.htmlAngularJS 内建了30 多个服务。 官网搜索service 吧 https://docs.angularjs.org/api/ng/service/$window$http 是 AngularJS 应用中最常用的服务。 服务向服务器发送请求，应用响应服...
2018-07-06 23:39:12
257
原创 Http中的Get、Post
HTTP请求报文和HTTP响应报文：www.cnblogs.com/biyeymyhjob/archive/2012/07/28/2612910.html浅谈HTTP中Get与Post的区别：www.cnblogs.com/hyddd/archive/2009/03/31/1426026.htmlAjax中Get请求与Post请求的区别：www.cnblogs.com/oneword/archiv...
2018-07-06 23:39:05
139
原创 Angularjs 模态窗口
对话框的两种类型：模态类型和非模态类型1 模态窗口打开模态窗口后，只要不关闭该窗口，鼠标焦点或者光标就会一直停留在该窗口上。只有关闭该窗口后，调用窗口才能继续。模态窗口关闭后，仍可以读取模态窗口中的信息，如窗口的返回状态等。2 非模态窗口打开非模态窗口后，仍可以操作调用窗口。关闭非模态窗口，该窗口将不复存在，会释放窗口的所有资源，所以无法得到该窗口的任何信息。常用插件：angular-ui-boo...
2018-07-06 23:38:59
712
原创 Angularjs 依赖注入
AngularJS 提供很好的依赖注入机制。以下5个核心组件用来作为依赖注入：• value• factory• service• provider• constantvalueValue 是一个简单的 javascript 对象，用于向控制器传递值（配置阶段）：// 定义一个模块var mainApp = angular.module("mainApp", []);// 创建 value...
2018-07-06 23:38:53
158
原创 Java基础（一）
Java基本类型和包装类型解析：www.cnblogs.com/xlturing/p/3584386.htmljava int与integer的区别：www.cnblogs.com/shenliang123/archive/2011/10/27/2226903.htmlString、StringBuffer与StringBuilder之间区别：www.cnblogs.com/A_ming/arch...
2018-07-03 09:27:17
158
原创 Java初级（一）
Java接口(interface)的概念及使用：www.weixueyuan.net/view/6009.htmlJava的GC机制：www.cnblogs.com/jasonteststudy/archive/2011/08/01/2123619.htmlJava中GC的工作原理：https://blog.youkuaiyun.com/han_348154920/article/details/553657...
2018-07-03 09:27:08
170
原创 Java 初级（三）
Java线程专栏文章汇总：https://blog.youkuaiyun.com/ghsau/article/details/17609747完全理解Gson（1）：www.importnew.com/16630.html阿里中间件团队博客：jm.taobao.org/categories/服务端是如何主动推送信息到客户端的：https://www.zhihu.com/question/24938934Web...
2018-07-03 09:26:44
147
原创 Java XML
Java文件操作①——XML文件的读取：https://www.cnblogs.com/Qian123/p/5231303.html#_label1Xml中SelectSingleNode方法，xpath查找某节点用法：https://www.cnblogs.com/love201314/p/5589784.htmlJSON与XML的区别比较：www.cnblogs.com/SanMaoSpace...
2018-07-03 09:26:23
335
原创 Scala
Scala 相比于 Java 的优势在哪里：https://segmentfault.com/q/1010000000671822【Scala】使用Option、Some、None，避免使用null：https://blog.youkuaiyun.com/jasonding1354/article/details/46788787for 循环集合的语法如下：for( var x <- List ){ ...
2018-07-03 09:26:12
221
原创 Java 初级（二）
JAVA设计模式之单例模式：https://blog.youkuaiyun.com/jason0539/article/details/23297037/Ant：ant 是一个将软件编译、测试、部署等步骤联系在一起加以自动化的一个工具ant 是Apache软件基金会JAKARTA目录中的一个子项目，它有以下的优点： 1、跨平台性：Ant是纯Java语言编写的，所以具有很好的跨平台性。 2、操作简单：Ant是由...
2018-07-03 09:25:46
168
原创 Java基础（二）
java的(PO,VO,TO,BO,DAO,POJO)解释：www.cnblogs.com/yxnchinahlj/archive/2012/02/24/2366110.html深入理解Java：SimpleDateFormat安全的时间格式化：www.cnblogs.com/peida/archive/2013/05/31/3070790.htmlBigDecimal详解：https://blo...
2018-07-03 09:25:34
145
转载 Java 初级 Log4j
官网： http://logging.apache.org/log4j/1.2/org.apache.log4j.Logger 使用：https://blog.youkuaiyun.com/killer_zr/article/details/7188140org.apache.log4j.Logger 详解：scau-fly.iteye.com/blog/2128492最详细的Log4j使用教程：www.co...
2018-07-03 09:24:38
132
原创 回车键搜索
一个搜索框，点击放大镜图标时候会调用搜索的js函数。希望在键盘输入回车时候，也可以调用搜索的js函数。参考$(document).keydown(function(event){ if(event.keyCode==13){ if ("zk_keywordDataPerm" == document.activeElement.id) { $('#search...
2018-06-30 19:21:33
1138
原创 JS常用函数
1、数组删除：splice(index,len,[item]) 注释：该方法会改变原始数组。splice有3个参数，它也可以用来替换/删除/添加数组内某一个或者几个值index:数组开始下标 len: 替换/删除的长度 item:替换的值，删除操作的话 item为空数组删除没有remove方法。2、数组查找示例：var test1 = [{id:1,name:1},...
2018-06-30 19:21:12
127
转载 CSS3 RGBA 用法详解
转载：http://www.cnblogs.com/lhb25/archive/2013/01/29/css3-rgba-tutorials.html RGBA 是代表Red（红色） Green（绿色） Blue（蓝色）和 Alpha（不透明度）的色彩空间。虽然它有的时候被描述为一个颜色空间，但是它其实仅仅是 RGB 模型附加了额外的信息从而形成了我们今天需要讨论的 RGBA。基本语法: ...
2018-06-30 19:21:03
957
转载 多行文本溢出显示省略号
转载：http://www.css88.com/archives/5206单行文本的溢出显示省略号大家应该都知道用text-overflow:ellipsis属性来实现，当然部分浏览器还需要加宽度width属性。css 代码:overflow: hidden;text-overflow: ellipsis;white-space: nowrap;但是这个属性并不支持多行文本溢出显示省略号，这里根据...
2018-06-30 19:20:43
228
转载 去除inline-block元素间间距的N种方法
转载：http://www.zhangxinxu.com/wordpress/?p=2357一、现象描述真正意义上的inline-block水平呈现的元素间，换行显示或空格分隔的情况下会有间距，很简单的个例子：<input /> <input type="submit" />间距就来了~~我们使用CSS更改非inline-block水平元素为inline-block水平，也...
2018-06-30 19:18:01
144
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人