HPLSQL(Hadoop存储过程实现)的安装和简单应用

最新推荐文章于 2023-06-07 10:11:05 发布

CaseyChen5213

最新推荐文章于 2023-06-07 10:11:05 发布

阅读量2.5k

点赞数

CC 4.0 BY-SA版权

分类专栏： hadoop 文章标签： HPLSQL 存储过程 hadoop hive游标 hive循环

本文链接：https://blog.youkuaiyun.com/taochenibm2019/article/details/81781377

HPLSQL搭建所需环境：

Java 1.6 or higher
Hadoop 1.x. and 2.x

1.下载安装包并授权

Chmod +x <hplsql.dir>/hplsql

2.环境变量设置

vi hplsql 配置

Hadoop环境变量

和hadoopjar包的环境变量

export "HADOOP_CLASSPATH=/opt/cloudera/parcels/CDH/jars/*"

export "HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HADOOP_HOME/lib/*"

export "HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HADOOP_CONF_DIR/"

export "HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HADOOP_HOME/share/hadoop/mapreduce/*"

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

CaseyChen5213

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

hplsql安装

liuhongfang116的专栏

12-19

871

hive ——HPLSQL安装一、简要介绍目前版本的Hive中没有提供类似存储过程的功能，使用Hive做数据开发时候，一般是将一段一段的HQL语句封装在Shell或者其他脚本中，然后以命令行的方式调用，完成一个业务或者一张报表的统计分析。好消息是，现在已经有了Hive存储过程的解决方案（HPL/SQL –Procedural SQL on Hadoop），并且在未来的Hiv...

Hadoop学习（ HDFS实现分布式存储：

Java.慈祥

12-26

7517

Hadoop基础学习（ HDFS实现分布式存储：

1 条评论您还未登录，请先登录后发表或查看评论

Hive之HPLSQL安装手册

IT晓白

06-07

666

解压下载的hplsql-0.3.31.tar.gz压缩包，（注意。文件，后面只需要配置这俩个文件），上传到集群。（根据自己库表来查询测试）测试成功说明连接成功。

Hadoop之HDFS存储及读取机制

C_FuL的博客

08-02

862

什么是HDFS？首先HDFS称为分布式文件系统，是一个高容错性的系统。分布式文件系统，首先其中有几点。分别是：分布式。文件。系统即横跨在多台计算机上的同一个文件存储系统。存储在分布式文件系统上的数据自动分布在不同的节点上。由于是分布式文件系统，所以元数据与数据文件是分离存储的 NameNode DataNode

hadoop触发器，回滚，存储过程

QAQsuifeng的博客

04-03

2400

触发器 USE test; CREATE TABLE IF NOT EXISTS student ( username VARCHAR(20), PASSWORD VARCHAR(20), stuid INT AUTO_INCREMENT PRIMARY KEY, birthday DATE ); DROP TABLE student; SELECT * FROM student; #创建学生表 INSERT INTO student(username,PASSWORD...

1分钟了解基于Hadoop的数据仓库工具Hive(附超实用示例)

Pokemogo的博客

11-25

803

Hive功能 Hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据：可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能；可以将SQL语句转换为MapReduce任务运行，通过自己的SQL查询分析需要的内容，这套SQL简称Hive SQL，使不熟悉mapreduce的用户可以很方便地利用SQL语言查询、汇总和分析数据。而mapreduce开发人员可以把自己写的mapper和reducer作为插件来支持Hive做更复

基于 Antlr4 的 Hive SQL 解析.zip

04-29

Hive SQL是Hadoop生态系统中的一个重要组件，它提供了一种SQL-like的接口来查询存储在HDFS或者其他Hadoop兼容存储系统上的大规模数据。Hive SQL的语法在很大程度上与标准SQL兼容，但为了处理分布式计算和大数据环境...

大数据名词及基本原理

果汁华的博客

04-23

1537

介绍maxcompute、hadoop、hive、hbase、spark、flink、adb、clickhouse、presto、hawq、greenplum、dremio、kudu、kafka等大数据领域相关技术、工具。一、MaxCompute: MaxCompute以表的形式存储数据，支持多种数据类型版本说明(1.0, 2.0, Hive)，并对外提供SQL查询功能。您可以将MaxCompute作为传统的数据库软件操作，但其却能处理TB、PB级别的海量数据。二、hadoop Had.

大数据平台比较-CDH、HDP、CDP

热门推荐

Allenzyg的博客

08-24

5万+

说到大数据，不得不提一下Hadoop。先来谈一谈 Apache Hadoop与CDH、HDP的比较一、Hadoop版本综述不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称CDH）、Hortonworks版本(Hortonworks Data Platform，简称HDP），对于国内而言，绝大多数选择CD

HPL/SQL说明

houzhizhen的专栏

08-19

1033

HPL/SQL (HPLSQL, 之前也称为 PL/HQL) 是一个开源工具，可以在 Hive、SparkSQL、Impala 、其他在Hadoop 基础上的SQL 引擎、NoSQL 或者关系型数据库之上实现存储过程。 HPL/SQL 的源代码和 Hive 源代码放在一起，路径为 https://github.com/apache/hive/tree/master/hplsql/src/main ...

hplsql安装说明

nannan1232的专栏

06-09

1312

hplsql版本：hplsql-0.3.17.tar.gz 1、解压安装到根目录下：tar -zxvf hplsql-0.3.17.tar.gz -c / 2、配置环境变量（vim /etc/profile）： export PATH=$PATH:/hplsql/hplsql-0.3.17 source /etc/profi...

hadoop mysql 存储过程_mysql 存储过程

weixin_34885009的博客

01-19

356

是一组为了完成特定功能的SQL语句集，是利用SQL Server所提供的Transact-SQL语言所编写的程序。经编译后存储在数据库中,是在MySQL服务器中存储和执行的，可以减少客户端和服务器端的数据传输。存储过程是数据库中的一个重要对象，用户通过指定存储过程的名字并给出参数(如果该存储过程带有参数)来执行它。存储过程是由流控制和SQL语句书写的过程，这个过程经编译和优化后存储在数据库服务器中...

hplsql 连接mysql_PLSQL远程访问Oracle数据库配置

weixin_39816141的博客

01-27

134

PLSQL远程访问Oracle数据库的配置监听器(LISTENER) ：监听器是Oracle基于服务器端的一种网络服务，主要用于监听客户端向数据库服务器端提出的连接请求。既然是基于服务器端的服务，那么它也只存在于数据库服务器端，进行监听器的设置也是在数据库服务器端完成的。地服务名(Tnsname)：Oracle客户端与服务器端的连接是通过客户端发出连接请求，由服务器端监听器对客户端连接请求进行合法...

hive的存储过程 hplsql配置

welcome to zdsg's csdn

09-22

1158

hive2.x自带hplsql 如果用的hive1.x需要下载hplsql 1.配置 hplsql-site.xml 在hive的conf下新建 hplsql-site.xml 并添加以下内容 <configuration> <property> <name>hplsql.conn.default</name> <value&...

hive之hplsql学习

cclovezbf的博客

04-21

3494

最近需要搞这方面的工作，首先百度了一下，发现重复率太高，于是自己去官网查看了，附上官网地址 http://www.hplsql.org/doc 这个人应该最开始发表文章的，写的不错 http://lxw1234.com/archives/category/hive 这段话翻译一下注意时间是2016年2月就有了 1、hive2.0.0 实现了hpl/sql功能，实际上就是类似于mys...

安装HPLSQL 0.3.31

qq_32656857的博客

04-17

293

文档信息日期：2019年4月17日作者：朱小猛文档内容：安装HPLSQL 0.3.31 一、下载hplql 0.3.31 下载地址二、解压文件 [john@hadoop112 ~]$ tar -zxvf /opt/software/hplsql-0.3.31.tar.gz -C /opt/module/ 三、为hplsql增加执行权限 [john@hadoop112 hplsql-...

hive的hplsql安装使用

qq_25617289的博客

06-25

789

1：修改hpsql文件 #!/bin/bash CDH_HOME=/opt/cloudera/parcels/CDH/lib JAVA_HOME=/usr/java/jdk1.8.0_192-amd6 export PATH=$PATH:$JAVA_HOME/bin:$JAVA_HOME/lib export "HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$CDH_...

hplsql例子

liuhongfang116的专栏

12-19

1142

存储过程： vim test_prc2.sql create procedure sp_fi(in iv_dt string,out rlt string) i_dt string; begin i_dt = iv_dt; insert into table test.test_1 select customerid||current_date cust_id,i_dt from xx.info ...

hive sql——hplsql命令行

qq_41018861的博客

01-06

1014

PL/HQL主要是通过命令行工具来执行一个SQL查询语句或者是一个SQL脚本。进入$HIVE_HOME/bin/，执行./ hplsql即可显示命令行的用法： ./hplsql usage: hplsql -d,--define <key=value> 变量替换，例如-d A=B或——define A=B -e HPL/SQL命令行参数 -f HPL

实验五：Hadoop集群安装、部署和综合应用