进入HIVE语句

最新推荐文章于 2025-08-14 10:41:11 发布
最新推荐文章于 2025-08-14 10:41:11 发布
阅读量138 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： 大数据 运维
原文链接：http://www.cnblogs.com/ilxx1988/p/4177883.html

ssh tangjingxiao1@10.4.248.1 -p22

select group:BI

select 0,5,2

WHERE  t.ds = '2014-12-21' and hour<18

之后输入sql语句：

Drop table zyltest.tmp_cde_qianbao21;

create table zyltest.tmp_cde_qianbao21 AS

SELECT  '2014-12-21' as date_id,

COUNT(CASE

                WHEN (t.url LIKE

                     'http://cms.yhd.com/cmsPage/show.do?pageId=124341%')

                     AND t.link_position = '14818_13701762_1' THEN

                 t.id

                ELSE

                 NULL

             END) AS 1home_paeg_type1_firstban_pv,

       COUNT(DISTINCT(CASE

                         WHEN (t.url LIKE

                              ' http://cms.yhd.com/cmsPage/show.do?pageId=124341%')

                              AND t.link_position = '14818_13701762_1' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 1home_paeg_type1_firstban_uv,

       COUNT(CASE

                WHEN (t.url LIKE 'http://cms.yhd.com/cmsPage/show.do?pageId=124341%')

                     AND t.refpagetypeid = 63

                     AND t.refpagevalue = '100_1_-100_1'

                     AND t.link_position = '12125_13699486_3' THEN

                 t.id

                ELSE

                 NULL

             END) AS 2tuan_cms_paeg_pv,

       COUNT(DISTINCT(CASE

                         WHEN (t.url LIKE 'http://cms.yhd.com/cmsPage/show.do?pageId=124341%')

                              AND t.refpagetypeid = 63

                              AND t.refpagevalue = '100_1_-100_1'

                              AND t.link_position = '12125_13699486_3' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 2tuan_cms_paeg_uv,

       COUNT(CASE

                WHEN t.pagetypeid = 4

                     AND t.refpagetypeid = 4

                     AND t.refpagevalue = 11111

                     AND t.pagevalue = 124341

                     AND t.link_position = 'cms_pic_11111_1954534_1' THEN

                 t.id

                ELSE

                 NULL

             END) AS 3da_banner_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.pagetypeid = 4

                              AND t.refpagetypeid = 4

                              AND t.refpagevalue = 11111

                              AND t.pagevalue = 124341

                              AND t.link_position = 'cms_pic_11111_1954534_1' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 3da_banner_uv,

       COUNT(CASE

                WHEN t.url LIKE 'http://cms.yhd.com/cmsPage/show.do?pageId=124341%' THEN

                 t.id

                ELSE

                 NULL

             END) AS 4cms_paeg_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.url LIKE 'http://cms.yhd.com/cmsPage/show.do?pageId=124341%' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 4cms_paeg_uv,

      

       COUNT(CASE

                WHEN t.pagetypeid = 102100003

                     AND t.pagevalue = 243

                     AND t.refpagetypeid = 4

                     AND t.refpagevalue = 124341

                   ---  AND tpa = 740

                      THEN

                 t.id

                ELSE

                 NULL

             END) AS 5cms_chongzhi_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.pagetypeid = 102100003

                              AND t.pagevalue = 243

                              AND t.refpagetypeid = 4

                              AND t.refpagevalue = 124341

                            --  AND tpa = 740

                               THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 5cms_chongzhi_uv,

       COUNT(CASE

                WHEN (t.pagetypeid = 102100002

                     AND t.ext_field6 = 55)

                     or (t.pagetypeid = 102100004 and t.pagevalue =228 ) THEN

                ----目前只找到这个规律

                 t.id

                ELSE

                 NULL

             END) AS 6yihaoqianbao_pv,

       COUNT(DISTINCT(CASE

                         WHEN (t.pagetypeid = 102100002

                     AND t.ext_field6 = 55)

                     or (t.pagetypeid = 102100004 and t.pagevalue =228 )THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 6yihaoqianbao_uv,

       COUNT(CASE

                WHEN t.pagetypeid = 102100002

                     AND t.refpagetypeid = 1

                     AND t.refpagevalue = 1

                     AND t.link_position = '2704_13698995_9' THEN

                 t.id

                ELSE

                 NULL

             END) AS 7home_paeg_type2_jinrong_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.pagetypeid = 102100002

                              AND t.refpagetypeid = 1

                              AND t.refpagevalue = 1

                              AND t.link_position = '2704_13698995_9' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 7home_paeg_type2_jinrong_uv,

       COUNT(CASE

                WHEN t.pagetypeid = 102100002

                     AND t.link_position = '6324_13697767_3' THEN

                 t.id

                ELSE

                 NULL

             END) AS 8yihaozhuanghang_yihaoqianbao_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.pagetypeid = 102100002

                              AND t.link_position = '6324_13697767_3' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 8yihaozhuanghang_yihaoqianbao_uv,

       COUNT(CASE

                WHEN t.url LIKE 'https://8.yhd.com/cfweb/home.action%' or t.pagetypeid='102100002'THEN

                 t.id

                ELSE

                 NULL

             END) AS 9qianbao_home_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.url LIKE 'https://8.yhd.com/cfweb/home.action%' ort.pagetypeid='102100002' THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 9qianbao_home_uv,

       COUNT(CASE

                WHEN t.pagetypeid = 102100003

                     AND t.tpa = 778

                     AND t.refpagetypeid = 102100002 THEN

                 t.id

                ELSE

                 NULL

             END) AS 10lijitiayn_pv,

       COUNT(DISTINCT(CASE

                         WHEN t.pagetypeid = 102100003

                              AND t.tpa = 778

                              AND t.refpagetypeid = 102100002 THEN

                          t.gu_id

                         ELSE

                          NULL

                      END)) AS 10lijitiayn_uv

FROM   trackreal t

WHERE  t.ds = '2014-12-21';

转载于:https://www.cnblogs.com/ilxx1988/p/4177883.html

通过shell访问hive_通过shell脚本执行hive语句(批量添加hive分区)
weixin_39905816的博客
12-18 1841
最近临近年关,2018年在向我们招手,但是有好多东西也要处理一番啦,这不马上到2018年,hive分区只建立啦2017年和之前的呢,所以要把hive的2018年的分区建立好,其实hive数据仓库的文件是放在hdfs目录的,hive只是映射的hdfs目录的文件,所以说,首先要创建的是hdfs目录,创建hdfs目录这个简单,就是建立一个文件夹而已,一行语句就可以搞定,并且速度也挺快,一年的数据按天创建...
本地电脑Hive语句实战
咔咔响
08-23 496
Hive是大数据平台的查询语句，其语法基本与SQL类似，小编在自己笔记本电脑上VirtualBox虚拟机上通过docker安装了一个docker-hive-on-tez容器，就可以练习了...
Hadoop学习（七）——Hive
Stack It Up
03-07 840
Hive 操作 Hive HQL语句实践 Hadoop数据分析
Hive基本操作
weixin_44246850的博客
01-05 8634
1、开启hive 1.1 进入 hive/bin [root@hadoop0001 bin]#cd /opt/software/apache-hive-1.2.1-bin/bin/ 1.2执行 hive 命令，开启hive [root@hadoop0001 bin]#hive 1.3若开启正常跳过，若报Cannot create directory /tmp/hive/root/533855bd-351b-4146-9227-10c16868ffd3. Name node is in .
java+jsp+mysql实现在线电影推荐系统movieCFWeb mahout实现基于用户的协同过滤推荐算法 基于项目的协同过滤推荐算法
linge511873822的博客
12-24 2607
java+jsp+mysql实现在线电影推荐系统movieCFWeb 一、项目简介 http://localhost:8080/movieCFWeb/ 前台 http://localhost:8080/movieCFWeb/admin 后台 自定义数据，mahout实现基于用户的协同过滤推荐算法 前台包含用户注册、登录、搜索电影、分页、电影详情、评分、修改信息、评分列表、推荐电影等功能 后台包括用户、电影、评分、未评分电影管理等功能 系统使用纯servlet编写，DBHelper操作数据库，权限过滤器等
Hive中的命令
CatherineHuangTT的博客
12-01 3944
quit; exit;当我们在CLI或者Beeline下，我们可以用quit或者exit命令来退出交互式的shell。 set;在交互式shell中输入 上面的命令可以查看用户和Hive重写的配置文件的变量； set =在交互式shell中设置参数， set mapred.reduce.tasks=32;这里具体列举下参数配置的三种方式： （1）在Hive的配置文件hive-site
启动hive metastore命令
热门推荐
大数据训练营
11-28 3万+
进入hive_home目录下 输入命令: 启动metastore: bin/hive --service metastore 后台启动: bin/hive --service metastore 2>&1 >> /var/log.log & 后台启动,关闭shell连接依然存在: nohup bin/hive --service metastore 2>&1 >> /
Hive语句大全（超级详细的案例大全）
dsb1106421x的博客
10-22 1409
-在上述语法中，`INSERT OVERWRITE TABLE` 是插入或覆盖指定分区表的命令，`test_table` 是分区表的名称，`(date='2024-01'）` 是指定的分区，name,age, gender是要从 `source_table`源表 中抽取的字段。字段分隔符为","。--这里 "/path/to/localfile" 是你要上传文件在Windows中的根路径（完整 的），"/path/to/hdfs" 是你想要把文件存放在HDFS中的路径。
java执行hive语句_如何在Java中执行Hive命令或HiveQL
weixin_39589241的博客
02-25 752
这里所说的在Java中执行Hive命令或HiveQL并不是指Hive Client通过JDBC的方式连接HiveServer(or HiveServer2)执行查询，而是简单的在部署了HiveServer的服务器上执行Hive命令。当然这是一个简单的事情，平常我们通过Hive做简单的数据分析实验的时候，都是直接进入Hive执行HiveQL，那我们为什么还要在程序中执行呢？这里涉及到了一个问题，通过...
hive的基本操作语句
qq_38220334的博客
05-11 723
查看是否创建成功了显示如下，则表示创建成功了。
Hive SQL语句操作
需要远程指导仿真实验、代码有问题的，请后台私信或者关注公众号
06-25 2469
本实验任务主要完成基于Hive环境执行一些常用的Hive SQL语句操作，通过完成本实验任务，要求学生熟练掌握Hive SQL的常用语句，掌握Hive的基础和操作。掌握Hive的数据类型   掌握hive的数据类型的使用   掌握hive的DDL语句的操作本次环境是：Ubuntu16.04+hadoop-2.7.3.+apache-hive-1.2.2-bin数据量巨大且保存时间长； 在大量数据上进行复杂的批量运算； 数据在计算之前已经完全到位，不会发生变化； 能够方便的查询批量计算的结果； 不像在线计算当
「Hive」Hive与MySQL技术差异点（二）：HQL查询语句
满眼凄迷i
07-03 1706
主要内容 1.HQL查询语句与MySQL执行顺序的区别； 2.Hive复合类型的数据查询、正则查询以及Hive独有的排序方式； 3.Hive的表关联语法； 4.Hive子查询的限制； 5.Hive开窗函数包含偏移函数、统计函数和排序函数； 6.Hive抽样查询包含随机抽样、数据块抽样和分桶抽样； 7.Hive调优分为环境调优和HQL语句调优； 8.总结与explode函数和lateral 虚拟表用法。 9.regexp_extract提取函数用法 10.json数据解析get_json_object函数用法
liunx里后台挂起hive语句是什么
03-16
将需要执行的Hive语句保存为`.sql`文件，例如`query.sql`： ```sql SELECT * FROM database.table WHERE condition; ``` 2. **使用`nohup`命令挂起任务** 执行以下命令，将任务放入后台运行，并重定向输出到...
快来看看招商银行理财产品数据（代码及分析）
lsxxx2011的专栏
11-27 5589
往期经典回顾盘膝而坐--跟你聊聊APP市场的数据分析【干货】手把手带你抓“网上购物”类APP信息（含代码）快来围观2W+的豆瓣电影分类排行榜（含代码）使用Python探索...
Hive基本操作语句
QingKong0518的博客
10-31 1179
1、Hive–showshow databases;——显示所有数据库 use DB_ame;——进入指定数据库 show tables;——显示当前数据库中的所有数据表 show partitions;——显示所有分区 show table extended;——显示表的扩展信息 show table properties;——显示表的所有属性 show indexes;——显示所有索
FileLink：为企业跨网文件传输筑牢安全与效率基石
qq_73196442的博客
08-12 1080
在企业数据往来日益频繁的今天，跨网文件传输的安全性和高效性是企业顺畅运营的关键。传统传输方式在安全防护、系统融合及成本控制上的短板愈发明显，而 FileLink 凭借在这些方面的突出表现，成为企业跨网文件传输的得力助手。
MapReduce系统架构，颠覆了互联网分层架构的本质？
最新发布
weixin_43209512的博客
08-14 92
摘要：MapReduce架构颠覆了传统互联网"固定CPU，移动数据"的分层架构，创新性地采用"固定数据，移动CPU"模式。这种设计针对离线业务特点（数据量大、时延容忍），让计算任务就近处理数据，大幅减少网络传输。与互联网架构（高吞吐、低时延）形成鲜明对比，体现了架构设计需因业务特点而异的核心理念。（149字）
时序数据库市场前景分析
m0_72638137的博客
08-14 546
随着物联网（IoT）、工业互联网、金融科技、智慧城市等领域的快速发展，数据呈现爆发式增长，其中时间序列数据（Time-Series Data）占据了重要地位。时序数据库正与AI/ML技术结合，支持异常检测、预测分析等高级功能，例如IoTDB的AINode支持自研时序大模型Timer，InfluxDB的Flux语言和Prometheus的PromQL扩展。未来的数据库可能不再严格区分时序、关系或图数据库，而是提供统一的数据处理能力，如IoTDB 2.0版本提供的动态+静态数据的多模态融合。
人工智能与金融：金融行业的革新
一套方法论打通全栈闭环，从 0 到 1 教你驾驭需求、设计、开发、项目、课题、论文和软著，速成全栈王者！
08-12 1137
人工智能正在重塑金融的形态，但技术终究是服务于经济发展的工具。从小微企业通过 AI 获得第一笔贷款，到普通家庭借助智能投顾实现财富增值，从跨境支付效率的革命性提升，到金融风险的精准防控，AI 正在让金融从 “精英专属” 走向 “全民共享”，从 “复杂晦涩” 走向 “简单透明”。未来的金融行业，将是 “技术的智能” 与 “金融的本质” 的完美融合：AI 解决效率、成本、风险等技术问题，金融人则坚守 “服务实体经济” 的初心。
linux怎么进入hive
06-12
### 启动并进入Hive CLI或Beeline的方法 在Linux系统中，启动并进入Hive CLI或Beeline需要确保Hadoop和Hive环境已经正确配置。以下是具体方法： #### 1. Hive CLI的启动 Hive CLI是早期版本中用于与Hive交互的命令行工具。可以通过以下命令启动： ```bash hive ``` 执行该命令后，用户将进入Hive CLI交互式环境[^3]。需要注意的是，Hive CLI在较新的Hive版本中已经被废弃，建议使用Beeline作为替代工具。 #### 2. Beeline的启动 Beeline是一个更现代的命令行工具，用于与Hive进行交互。可以通过以下命令启动Beeline： ```bash beeline -u jdbc:hive2:// ``` 上述命令中的`jdbc:hive2://`表示连接到本地的Hive服务。如果Hive服务运行在远程服务器上，则需要指定服务器地址和端口，例如： ```bash beeline -u jdbc:hive2://<hostname>:<port> ``` 例如，假设Hive服务运行在`hadoop001`服务器上，端口为10000，则可以使用以下命令： ```bash beeline -u jdbc:hive2://hadoop001:10000 ``` 此外，Beeline支持无密码连接，也可以通过`-n`参数指定用户名，例如： ```bash beeline -u jdbc:hive2://hadoop001:10000 -n username ``` #### 3. 执行SQL脚本 除了直接进入交互式环境外，还可以通过命令行执行SQL脚本文件。如果脚本文件存储在本地文件系统中，可以使用以下命令： ```bash hive -f /path/to/local/script.sql ``` 如果脚本文件存储在HDFS中，则可以使用类似以下命令： ```bash hive -f hdfs://namenode:8020/path/to/hdfs/script.sql ``` 以上命令适用于Hive CLI和Beeline[^2]。 #### 4. 注意事项 - 在使用Beeline时，所有SQL语句前面不能有空白符。 - 如果在连接Beeline时遇到问题，可能是由于Hadoop的安全模式或服务延迟导致的。可以稍后再试，或者检查Hadoop和Hive服务的状态。 ### 示例代码 以下是一个完整的Beeline连接示例： ```bash beeline -u jdbc:hive2://localhost:10000 -n hive_user ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值