JackLeeLive-优快云博客

Storm学习笔记Storm基础知识Storm 是一个分布式的，可靠的，容错的数据流处理系统。它会把工作任务委托给不同类型的组件，每个组件负责处理一项简单特定的任务。Storm 集群的输入流由一个被称作 spout 的组件管理，spout 把数据传递给 bolt， bolt 要么把数据保存到某种存储器，要么把数据传递给其它的 bolt。 Storm组件在 Storm 集群中，有两类节点：主节点 m...

2018-04-25 15:54:56 384

原创 find-grep用法

find 用来在系统中查找文件 find path -option [-print -exec -ok] 可以通过文件名、大小、权限、用户/组名等来查找相应文件 find ./ -name "a.txt" find ./ -size +100M find ./ -perm 500 find ./ -user root find ./ -name...

2018-04-21 17:16:28 290

原创 shell

1.shell 是什么？ shell 壳，Linux借鉴此意思，shell用于保护内核(kernel) 从用户角度来看：shell是用户与操作系统沟通的桥梁从程序员的角度看：shell本身就是用C语言编写的程序 shell担任翻译的角色，将用户输入的各种命令翻译成Linux能够识别的指令,称为命令解释器 shell还是一门编程语言2.shell类型 sh...

2018-04-21 17:15:04 251

原创 Linux基础与基本命令

Linux历史 Linux是一套免费使用的类Unix操作系统 linux创始人: 林纳斯·托瓦茨 UNIX系统是一个多用户，多任务的分时操作系统。Ubuntu的安装 (1)vmware tools：主要用于与宿主机共享文件的 sudo cp -rf /media/gec/VMware \Tools/ ~/ cd ~/ ...

2018-04-21 17:03:44 310

原创 Kafka学习笔记

Kafka学习笔记Apache Kafka概述Apache Kafka是一个分布式发布-订阅消息系统和一个强大的队列，可以处理大量数据，并将消息从一个端点传递到另一个端点。优点：A. 可靠性，分布式、分区、复制和容错B. 可扩展行，消息传递系统轻松缩放，不需要停机就能操作C. 耐用性，使用“分布式提交日志”，消息尽量保留在磁盘上D. 性能，对发布和订阅消息都具有高吞吐量且性能稳定Apache Ka...

2018-04-21 16:49:19 455

原创 Zookeeper学习笔记

Zookeeper概述：1.ZooKeeper是一种分布式协调服务，用于管理大型主机。ZooKeeper通过其简单的架构和API解决了这个分布式环境中协调和管理服务的复杂性问题。2.分布式应用有两部分， Server（服务器）和 Client（客户端）应用程序。3.分布式应用的优点l 可靠性 - 单个或几个系统的故障不会使整个系统出现故障。 l 可扩展性 - 可以在需要时增加性能，通过添加更多...

2018-04-21 16:47:38 263

JackLeeLive的博客

转载 log4j日志设置

原创 Storm学习笔记