- 博客(102)
- 收藏
- 关注
转载 docker之Dockerfile实践用dockerfile构建nginx环境
docker之Dockerfile实践上一篇介绍了Dockerfile中使用的指令,现在开始进行指令实践先查看下本地的镜像,选一个作为base image:[root@docker ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEwad...
2018-07-09 17:21:03
47890
转载 阿里云yum源下载与使用。
CentOS1、备份mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup2、下载新的CentOS-Base.repo 到/etc/yum.repos.d/CentOS 5wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun....
2018-07-09 11:36:26
16175
转载 Docker部署Tomcat及Web应用非常好转载挂载dockerfile等等
一、在线下载dockeryum install -y epel-releaseyum install docker-io # 安装dockerchkconfig docker on # 加入开机启动service docker start # 启动docker服务1234567二、docker安装Tomcat容器2.1.查找服务器的tomcat信息# docker ...
2018-07-05 15:39:10
4647
转载 大数据系列之Flume(1.6)+kafka 整合
大数据系列之Flume+kafka 整合 https://www.cnblogs.com/cnmenglang/p/6550427.html相关文章:大数据系列之Kafka安装 大数据系列之Flume--几种不同的Sources大数据系列之Flume+HDFS关于Flume 的 一些核心概念:组件名称 功能介绍Agent代理使用JVM 运行Flume。每台机器运行一个agent,但是可以在一...
2018-06-30 18:33:13
1369
2
转载 转发-Mysql双主部署
Mysql双主部署解释:所谓双主备份,其实也就是互做主从复制,每台master既是master,又是另一台服务器的slave。这样,任何一方所做的变更,都会通过复制应用到另外一方的数据库中。 要求:部署Mysql双主复制,部署期间生产服务器可正常访问,但无法进行登录/注册/退出等涉及到对Mysql写的操作。 环境:系统:centos 6.7mysql版本:5.6.28生产环境共2台mysql服务器...
2018-06-09 15:23:56
384
转载 mysql主从同步不一致后的解决方法
查看master的运行情况:[root@master] mysql -uroot -p************[root@master] mysql> show master status \G; *************************** 1. row *************************** File: mysql-bin.0...
2018-06-09 14:18:45
4667
转载 mysql的主从复制,从库设为只读,不能写。
mysql的主从复制,主要通过binlog日志来实现主要步骤:1 master授权从库连接(master上操作)grant replication slave on *.* to 'backup'(用户名)@'192.168.218.131(从库ip)' identified by 'backup'(密码);2 master上操作:show master status;记录master上的日志文...
2018-06-09 14:01:50
8730
转载 转载MySQL主从复制(Master-Slave)实践
MySQL主从复制(Master-Slave)实践MySQL数据库自身提供的主从复制功能可以方便的实现数据的多处自动备份,实现数据库的拓展。多个数据备份不仅可以加强数据的安全性,通过实现读写分离还能进一步提升数据库的负载性能。下图就描述了一个多个数据库间主从复制与读写分离的模型(来源网络):在一主多从的数据库体系中,多个从服务器采用异步的方式更新主数据库的变化,业务服务器在执行写或者相关修改数据库...
2018-06-09 13:53:14
277
转载 Flume安装配置简单版
Flume学习笔记(一)安装与简单使用2016年07月26日 13:56:46阅读数:11895本文环境如下: 操作系统:CentOS 7.2.1511 64位 Flume版本:1.6.01. 系统需求Flume需要Java 1.6及以上(推荐1.7),对Agent监控目录的读写权限。2. 下载软件包到Flume官网上http://flume.apache.org/download.html下载软...
2018-05-30 17:11:20
237
转载 Linux安装Sqoop(CentOS7+Sqoop1.4.6+Hadoop2.8.0+Hive2.1.1)
转载于:https://blog.youkuaiyun.com/pucao_cug/article/details/72083172 写的很赞~1下载Sqoop2上载和解压缩3一系列配置 3.1配置环境变量 3.2sqoop配置文件修改 3.2.1 sqoop-env.sh文件 3...
2018-05-24 14:50:44
1877
转载 Hive入门小结转发
HIve总结:首先要学习Hive,第一步是了解Hive,Hive是基于Hadoop的一个数据仓库,可以将结构化的数据文件映射为一张表,并提供类sql查询功能,Hive底层将sql语句转化为mapreduce任务运行。相对于用java代码编写mapreduce来说,Hive的优势明显:快速开发,人员成本低,可扩展性(自由扩展集群规模),延展性(支持自定义函数)。Hive的构架: Hive提供了三种用...
2018-05-24 11:02:35
722
转载 Hive 实战练习(一)—按照日期将每天的数据导入Hive表中
需求: 每天会产生很多的日志文件数据,有这么一种需求:需要将每天产生的日志数据在晚上12点钟过后定时执行操作,导入到Hive表中供第二天数据分析使用。要求创建分区表,并按照日期分区。数据文件命名是以当天日期命名的,如2015-01-09.txt一、创建分区表,以日期作为分区字段[html] view plain copyhive> CREATE TABLE storebyda...
2018-05-23 17:15:59
4474
转载 Linux上安装Hadoop集群(CentOS7+hadoop-2.8.0)
1下载hadoop2安装3个虚拟机并实现ssh免密码登录 2.1安装3个机器 2.2检查机器名称 2.3修改/etc/hosts文件 2.4 给3个机器生成秘钥文件 2.5 在hserver1上创建authorized_keys文件 2.6将authorized_keys文件复制到其他机器 2.7 测...
2018-05-23 17:13:38
863
转载 Linux中基于hadoop安装hive(CentOS7+hadoop2.8.0+hive2.1.1)
下载hive2安装 2.1上载和解压缩 2.2配置环境变量 2.3对hive进行配置 2.3.1 hive-site.xml相关的配置 2.3.1.1新建hive-site.xml文件 2.3...
2018-05-23 17:11:13
667
转载 hadoop下载地址与配置hadoop3.0集群
hadoop版本下载访问地址:http://mirrors.hust.edu.cn/apache/hadoop/common搭建hadoop集群访问地址:https://blog.youkuaiyun.com/qq_32808045/article/details/762291571.准备(搭建集群所用到的软件及系统前期配置):虚拟机 : VMwarelinux:CentOS 6.5 .vmxsun公司的 j...
2018-05-14 16:36:09
4312
转载 大数据系列(hadoop) Hadoop+Zookeeper 3节点高可用集群搭建
原文地址:https://www.cnblogs.com/YellowstonePark/p/7750213.html一、集群规划主机名ipNameNodeDataNodeYarnZooKeeperJournalNodenode01192.168.1.201是是否是是node02192.168.1.202是是否是是node03192.168.1.203否是否是是 注:所有操作都是在root用...
2018-04-02 17:21:33
1535
原创 Linux下查询80端口被哪些IP访问连接,以及查询异常连接IP地址可以封掉异常IP
netstat -tun列出的是所有连接netstat -tun | grep ":80" Linux下查询80端口被哪些IP访问连接。应该就能达到你的要求查询IP连接访问汇总,如发现异常IP则可以封掉异常的IP访问地址。netstat -tn 2>/dev/null | grep :80 |grep "ESTABLISHED"| awk '{print $5}' | cut -d...
2018-02-26 17:33:09
14254
转载 从零开始构建一个centos+jdk7+tomcat7的镜像文件 centos7系统下docker运行环境的搭建 准备centos基础镜像 docker pull centos 或者直接下载我准备
从零开始构建一个centos+jdk7+tomcat7的镜像文件centos7系统下docker运行环境的搭建准备centos基础镜像docker pull centos或者直接下载我准备好的镜像docker pull registry.cn-hangzhou.aliyuncs.com/repos_zyl/centos:0.0.1准备jdk7和tomcat7安装
2017-09-20 16:45:23
711
转载 CentOS6.x 安装 Docker 和 Docker Compose
零、前言本来,对于 CentOS 系列,Docker 官方要求要 CentOS7.0 及以上系统版本,但是有时候迫不得已,还是要在已有的 CentOS6.x 的系统上安装。比如我遇到的:要在一台已有的 CentOS6.5 的服务器上部署一个 Java 应用,该 Java 应用基于 Java8 和 Mysql5.6 开发,都用到了相应的特性。但是,已有的 CentOS6.5 上已经在跑着几个
2017-09-20 16:42:04
1533
转载 zabbix监控客户端mysql用自带的模板
分布式监控系统Zabbix-3.0.3-完整安装记录(2)-添加mysql监控 Zabbix3.0 Server以后就自带了MySQL插件来监控mysql数据库的模板,只需要配置好agent客户端,然后在web端给主机增加模板就行了。 以下是公司线上的zabbix3.0环境下添加mysql监控操作记录:Zabbix_agent客户端操作1)首先在客户端的mysq
2017-08-17 14:39:20
666
转载 Zabbix 报警邮件内容带附件解决方法
安装zabbix之后,设置邮件脚本报警的时候,发送的报警内容变成了tcmime.1278.1278.1724.bin或ATT00001.bin。yum -y install dos2unix //安装mailx工具和dos2unix转换工具以下是脚本内容:[root@localhost alertscripts]# cat sendmail.sh#!/bin/bas
2017-08-16 15:55:25
1594
转载 zabbix 配置邮件报警
一、安装邮件发送工具mailx这里我选择的是mailx,所以得关闭其他的邮件发送工具service sendmailstop #关闭chkconfig sendmailoff #禁止开机启动service postfixstopchkconfig postfixoffyum install mailx二、配置Zabbix服务端外部邮箱
2017-08-16 13:54:25
2405
转载 zabbix agent 端安装配置与监控
1、基础环境准备安装zabbix的yum源,这里有必要提一点,阿里的yum源已经提供了zabbix3.01.1、yum源配置?1rpm -ihv http://mirrors.aliyun.com/zabbix/zabbix/3.0/rhel/6/x86_64/zabbix-release-3.0-1.el6.noarch.rpm
2017-08-15 17:54:29
367
转载 Zabbix v3.0安装部署转载
zabbix3.0安装部署文档http://www.cnblogs.com/mrwang1101/p/5513158.htmlzabbix v3.0安装部署摘要:本文的安装过程摘自http://www.ttlsa.com/以及http://b.lifec-inc.com ,和站长凉白开的《ZABBIX从入门到精通v3.0.1 - 运维生存时间(2016)》一
2017-08-15 16:39:35
546
转载 阿里云搭建mysql数据库。
http://my.youkuaiyun.com/my/mycsdn我要在自己的阿里云服务器上搭建hadoop+hive+mysql+tomcat环境,以下为mysql的安装记录→_→大家都知道,centos自带的repo是不会自动更新每个软件的最新版本,所以无法通过yum方式安装MySQL的高级版本。所以,即使我使劲用yum -y install mysql mysq
2017-07-10 17:44:29
4704
1
原创 Redis集群搭建与简单使用
Redis集群搭建与简单使用介绍安装环境与版本用两台虚拟机模拟6个节点,一台机器3个节点,创建出3 master、3 salve 环境。redis 采用 redis-3.2.4 版本。两台虚拟机都是 CentOS ,一台 CentOS6.5 (IP:192.168.31.245),一台 CentOS7(IP:192.168.31.210) 。安装过程1. 下载并
2017-06-05 14:32:47
348
转载 Zabbix部署。
zabbix版本:Zabbix 2.2 LTS备注:Linux下安装zabbix需要有LAMP或者LNMP运行环境准备篇:一、Web环境:Nginx+MySQL+PHP参考博客的Nginx和mysql 与PHP的安装步骤。二、zabbix软件包下载zabbix-2.2.6http://jaist.dl.sourceforge.net/project/zabbix/ZAB
2017-06-01 15:27:25
222
转载 Hadoop三种安装模式:单机模式,伪分布式,真正分布式
Hadoop三种安装模式:单机模式,伪分布式,真正分布式 Hadoop三种安装模式:单机模式,伪分布式,真正分布式一 单机模式standalone单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要
2017-03-16 17:49:26
390
转载 CentOS7安装Hadoop2.7教程待实践。
CentOS7安装Hadoop2.7完整流程Hadoop2 2015-07-02 08:51:23 发布您的评价: 5.0收藏 1收藏总体思路,准备主从服务器,配置主服务器可以无密码SSH登录从服务器,解压安装JDK,解压安装Hadoop,配置hdfs、map
2017-03-16 17:37:29
379
原创 Hadoop家族学习路线图
Hadoop家族学习路线图2013-11-09 22:09 33824人阅读 评论(6)收藏举报本文章已收录于:分类: 大数据分析(6) 作者同类文章X版权声明:本文为博主原创文章,未经博主允许不得转载。主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, H
2017-03-09 14:03:55
213
原创 Oracle 创建定时计划备份数据库脚本。
1、创建一个bat后缀文件。 2、文件内容编辑如下:@echo offrem set backupfile=f_database_%date:~0,4%-%date:~5,2%-%date:~8,2%.dmprem set logfile=f_database_%date:~0,4%-%date:~5,2%-%date:~8,2%.logrem delete 30day
2016-09-01 14:28:28
776
转载 Docker的安装,包括内核的升级(centos6内核太低需要升级到3.1以上)
详情参阅http://my.oschina.net/huangyong/blog/3724911、升级内核2、之后用epel源安装docker 3、安装时候可能报错,可以查看日志文件解决 /var/log/docker文件报错信息。docker: relocation error: docker: symbol dm_task_get_info_with_defer
2016-06-21 16:56:25
19000
转载 springMVC两种方式实现多文件上传及效率比较
springMVC实现多文件上传的方式有两种,一种是我们经常使用的以字节流的方式进行文件上传,另外一种是使用springMVC包装好的解析器进行上传。这两种方式对于实现多文件上传效率上却有着很大的差距,下面我们通过实例来看一下这两种方式的实现方式,同时比较一下在效率上到底存在着多大的差距。1.下载相关jar包。需要引入的jar出了springMVC的jar包外,还需要引入com.springs
2016-05-13 14:31:22
351
转载 转载Java导入excel数据到数据库。
学资料总结 实现的功能:Java实现Excel导入数据库,如果存在就更新数据库中的数据导入到Excel 1、添加jxl.jar mysql-connector-java.1.7-bin.jar包到项目的lib目录下2、Excel文件目录:D://book.xls3、数据库名:javenforexcel4、表名:stu5、编写类:连接mysql的字符串方法、插入
2016-05-12 16:26:56
593
转载 Maven搭建Spring+SpringMVC+Mybatis详解,成功搭建me
文章来源:http://doc.okbase.net/fengshizty/archive/126397.html 前言 最近比较闲,复习搭建一下项目,这次主要使用Spring+SpringMVC+Mybatis。项目持久层使用Mybatis3,控制层使用SpringMVC4.1,使用Spring4.1管理控制器,数据库连接池使用druid数据源,该项数据库暂使用M
2016-04-13 17:13:32
1045
转载 Dubbo与Zookeeper、Spring整合使用.
From:http://blog.youkuaiyun.com/hejingyuan6/article/details/47403299 Dubbo与Zookeeper、Spring整合使用 Dubbo采用全Spring配置方式,透明化接入应用,对应用没有任何API侵入,只需用Spring加载Dubbo的配置即可,Dubbo基于Spring的Schema扩展进行加载。 一:
2016-03-25 10:44:36
1159
原创 Mysql数据库备份与还原语法。
DB backup:Single DB backup------- test为要备份的数据库mysqldump -uroot -pwueng test>test.mysqlAll DB backup------加 --all-databases及是全库备份mysqldump -uroot -pwueng --all-databases >alldb.mysqlDB reco
2016-03-12 18:36:57
593
原创 maven项目导入步骤。
maven 笔记: 1.到maven项目的pom.xml目录下面执行:E:\maven+springmvc+mybatis+log4jtwo\springmvc> mvn eclipse:clean eclipse:eclipse即可将maven项目转换成web项目 2、正常导入springmvc项目,不是maven导入,导入后maven4Myeclipse选择ena
2015-11-05 22:50:33
596
原创 plsql的安装,与plsql链接服务器的操作步骤。
1、安装完plsql后,最后一步需要注册,此时需要用注册机生成的用户名与密码进行注册。2、注册后,需要把oracle32位客户端解压放置到指定位置(随意放置)3、配置plsql再 tools-preferences下面配置4、配置plsql的链接信息(Database链接要配置IP地址详细如下 IP:端口 实例名称)如上完毕则实现了plsql远程连接数据库步骤。
2015-09-21 16:43:50
900
原创 windows与linux下apache+tomcat负载均衡部署。反向代理黏贴保证sessionID不变。
1 文档目的C4项目apache+tomcat负载整理windows部署。2 内容简介本文主要包括以下内容:Ø Apache的配置Ø Tomcat的配置3详细描述 3.1 Apache的配置首先在apache的conf目录下找到httpd.conf(apache的配置文件)文件在该文件里找到LoadModule proxy
2015-07-27 15:00:01
406
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人