
大数据学习
FreedomZzzzz
188的努力猿
展开
-
大数据项目之电商数仓(脚本篇)
脚本存放目录 /user/local/bin/1.xsync集群分发脚本参考这篇博客安装https://blog.youkuaiyun.com/yhblog/article/details/84066218#!/bin/bash#获取输入参数的个数.没有参数直接退出pcount=$#if((pcount==0));thenecho no args;exit;fi#2.获取文件名称p...原创 2020-05-05 09:26:13 · 6913 阅读 · 24 评论 -
大数据之sqoop的安装及简单使用
一.Sqoop简介Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。Sqoop项目开始于2009年,最早是作为Hadoop的一个第三方模块...原创 2020-01-06 19:31:02 · 426 阅读 · 0 评论