- 博客(16)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 华为命令行基础
命令行视图命令行功能命令行帮助：查看命令作用以及当前视图下所有命令1.首字母+？2.？基本配置步骤配置系统名称--sysname配置系统时钟配置标题信息注：header （login/shelll） 可+文件名命令等级系统将命令进行分级管理，以增加设备的安全性。设备管理员可以设置 用户级别，一定级别的用户可以使用对应级别的命令行。...
2019-07-29 09:59:34
1227
原创 链路聚合技术
随着网络规模的不断扩大，用户对骨干链路的带宽和可靠性提出了越来越高的要求。在传统技术中，常用更换高速率的接口卡或者更换支持高速率接口板的设备的方式来增加带宽，但是这种方式往往需要付出高额的费用，而且不够灵活。 采用链路聚合技术可以在不进行硬件升级的条件下，通过将多个物理接口捆绑为一个逻辑接口，来达到增加链路带宽的目的。在实现增大链路带宽的同时，链路聚合技术采用备...
2019-07-23 21:27:02
2082
原创 电路交换与分组交换
交换：按照某种方式动态地分配传输线路的资源。1.电路交换建立连接（占用通信资源）-通信（一直占用通信资源）-释放连接（归还通信资源）。特点：通信的全部时间内，通信的两个用户始终占用端到端的通信资源2.分组交换分组交换采用分存储转发技术。分组交换的问题：1.分组在路由器存储转发时需要排队，会造成一定的时延。2.各分组必须携带的控制信息造成了一定的开销。3.分组交换需要专门...
2019-07-09 21:58:25
1048
原创 running sqoop:java.lang.NullpointerException错误解决
缺少java-json.jar的jar包，下载jar包，并将其放在hbase/lib 和sqoop/lib的文件夹下 下载路径:https://download.youkuaiyun.com/download/bd_ai_iot/10588012
2018-08-07 11:44:04
5338
7
原创 mysql数据导入hbase
下载sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz解压//配置环境变量export SQOOP_HOME=/home/hadoop/software/sqoop-1.4.6.bin__hadoop-2.0.4-alphaexport SQOOP_SERVER_EXTRA_LIB=$SQOOP_HOME/libexport PATH=$SQO
2017-11-19 17:37:46
1730
原创 json文件导入hbase
/*{"id":[{"_id":"https://img.alicdn.com/imgextra/i4/1677335387/TB2MNEhiXXXXXXwXXXXXXXXXXXX_!!1677335387.jpg","width":"750","商品标题":"【努比亚旗舰店】nubia/努比亚 Z9 max 移动联通双4G版智能手机","商品链接":"https://detail.tmall
2017-10-30 20:24:38
5992
1
原创 hbase存储照片的修改
//照片格式201603022112.jpg（年月日时分）import java.io.IOException;import java.util.Scanner;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import
2017-10-30 20:20:00
1447
原创 spark安装与配置
spark安装与配置1. 安装JDK下载jdk-8u144-linux-x64解压安装：rpm -ivh jdk-8u144-linux-x64.rpm配置环境变量：vi .bashrc export JAVA_HOME=/usr/java/jdk1.8.0_144export PATH=$PATH:$JAVA_HOME/bin 使环境变量生效2. 安装
2017-10-21 12:56:37
773
原创 hbase安装
hbase 1、上传hbase1.2.4上传hbase1.2.4压缩包2.解压[hadoop@master ~]$cd/home/hadoop/software[hadoop@master software]$tar xzvf hbase-1.2.4-bin.tar.gz配置环境变量[hadoop@master software]$cd[hadoop@m
2017-10-21 12:55:43
636
原创 zookeeper安装
Zookeeper为了搭建HBase完全分布式环境，前提就是搭建好zookeeper和Hadoop环境，zookeeper环境搭建第一步：准备环境zookeeper-3.4.6三台机器, 我的机器环境如下：192.168.6.250 master192.168.6.251 slave1192.168.6.252 slave2第二步：配置下
2017-10-21 12:53:55
481
原创 hive安装
Hive 2.1.0安装环境Hadoop2.6.4 jdk1.7安装Hive修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项hadoop.proxyuser.hadoop.hosts*hadoop.proxyuser.hadoop.groups*1.上传到/home/Hadoop/software,
2017-10-21 12:46:46
742
原创 Hadoop安装
（本例以安装Hadoop-2.6.4为例） 1、 配置主机名 Master 节点: masterSlave 节点: Slave1Slave 节点: Slave2*自定义：#vi /etc/sysconfig/networkNETWORKING=yes #启动网络 HOSTNAME=master #主机名#hostname master * Slave 节
2017-10-21 12:39:25
528
原创 Centos常用基础命令
常用指令功能ls显示当前文件夹内的内容ll -a显示当前文件夹下的详细内容mkdir+目录/文件夹名创建目录/文件夹mkdir -p +目录/文件夹名创建目录，若无父目录，则创建p(parent)cd到当前用户的根目录下cd + 目录切换目录
2017-10-21 12:22:03
478
原创 配置Centos的虚拟机网卡
配置网卡在界面处右击打开“open in terminal”su root 进入管理员vi /etc/sysconfig/network-scripts/ifcfg-eth0 1.修改BOOTPROTO=”none”2.在下方输入IPADDR=192.168.6.251（IP地址）DNS1=114.114.114.114DNS2=202.102.154.3GAT
2017-10-21 12:13:41
668
原创 hbase存取照片
import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache.
2017-10-21 12:02:30
4865
原创 Eclipse连接hbase并实现简单表的建立
Eclipse连接hbase并实现简单表的建立在安装启动环境之前要做的准备.1.JDK以及Eclipse软件2.Eclpse的Hadoop插件一份 点击下载3.hadoop压缩包一份,4.确保集群正在启动状态正常,node节点工作正常,宿主机可以ping通master主机,并可以连接SSH(测试防火墙是否关闭)5.复制hadoop集群中的hosts文件到windows的c
2017-10-19 17:29:47
10342
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人