用hive生成报表数据

最新推荐文章于 2025-10-02 18:06:46 发布

原创最新推荐文章于 2025-10-02 18:06:46 发布 · 783 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #java

博客提供了一个链接http://www.tbdata.org/archives/category/hive ，可能与Hive相关内容有关，Hive属于大数据领域技术。

http://www.tbdata.org/archives/category/hive

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

iteye_4042

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Hive零基础从入门到实战实战篇（七）构建自动更新的例行化BI报表

风影楼的博客

01-16

727

目录前言 1. 新建表格 2. 编写shell脚本 3. 设置crontab 4. 使用可视化工具连接mysql中的表前言互联网公司的数据分析师一般都兼任着临时取数和构建例行化BI报表的职责。临时取数不必多说，但是有一些数据是需要每日产出的，逻辑不变，只是时间改一下，这种数据就最好制作成自动更新的例行化BI报表，以节约人力。本文就介绍一下构建一张例行化BI报表的整个流程。...

hive数仓开发之-数据表

szsk2021的博客

06-04

463

建表在数仓里，数据表可以分为内部表和外部表。内部表和外部表的区别是内部表的数据存储是在当前用户所在的hdfs目录下，而外部表则不是。内部表和外部表内部表在hdfs上的常见文件存储格式有 textfile,orc,rc,pqrquet 等存储格式，每种格式的优劣这里先不做具体展开，项目上基于性能和存储考虑，一般选择orc 或者是parquet，o确切来说orc比parquet更省存储，性能差不多。如果是考虑后续更换计算引擎（比如说是spark，或者是impala）那还是选用parquet 更适合一

参与评论您还未登录，请先登录后发表或查看评论

Hive数据处理之报表累计

汤小萌的博客

11-24

2368

数据： +----------+---------+--------+ | username | month | salary | +----------+---------+--------+ | A | 2015-01 | 5 | | A | 2015-01 | 15 | | B | 2015-01 | 6 | | ...

利用 Hive 构建大数据实时报表系统

Agentic AI人工智能与大数据正在引领一场新智能科技革命。

10-02

763

提到Hive，很多人第一反应是“离线大数据工具”——它像一位“慢工出细活”的老工匠，擅长处理TB级历史数据，但面对“秒级更新”的实时报表需求，似乎总是力不从心。难道Hive只能做T+1的离线报表？Hive不是“实时的敌人”，而是实时报表系统的“准确性基石”。我们将用「Lambda架构」这把“钥匙”，把Hive的离线批处理能力与Flink/Spark的流处理能力结合，构建一套“兼顾历史准确性与实时性”的大数据报表系统。

hive ETL之业绩报表sql

jethai的博客

08-28

1091

-- case4 -- --========== rates ==========-- app0 1 app1 2 app2 2 app3 3 app4 3 app5 3 app6 5 app7 5 app8 5 app9 5 CREATE EXTERNAL TABLE rates ( app_name STRING

大数据开发之Hive

m0_58371965的博客

11-29

651

Hive简介定义 Facebook为了解决海量日志数据的分析而开发了hive，后来开源给了Apache基金会组织。 hive是一种用SQL语句来协助读写、管理存储在HDFS上的大数据集的数据仓库软件。 hive特点 ▪ hive 最大的特点是通过类 SQL 来分析大数据，而避免了写 mapreduce Java 程序来分析数据，这样使得分析数据更容易。 ▪数据是存储在HDFS上的，hive本身并不提供数据的存储功能 ▪hive是将数据映射成数据库和一张张的表，库和表的元数据信息一般存在关系型数据库

大数据 hive 实战数据

04-07

然后通过HQL进行数据探索、统计分析、报表生成等任务。此外，Hive还支持与其他大数据组件如Pig、Spark、Impala等集成，以提供更高效的数据处理能力。总结来说，这个实战数据集为我们提供了研究大数据分析和数据...

【Hive-Hive写入数据压测】使用hive-testbench对Hive的写入数据进行压测

weixin_53543905的博客

03-11

1878

在对Hive的语法及性能进行测试时，需要构造大量数据，我们可以使用生产指定数据量大小的数据。提供了两种基准测试的数据生成器和示例查询（我们使用TPC-DSTPC-DS：提供一个公平和诚实的业务和数据模型，99个案例。TPC-H：面向商品零售业的决策支持系统测试基准，定义了8张表，22个查询。（1）TPC-DS简介1、 TPC-DS采用星型雪花型等多维数据模式。2、TPC-DS包含7张事实表17张纬度表平均每张表含有18列。其工作负载包含99个SQL查询。【Hive-Hive写入数据压测】使用hive-tes

hive销售报表自动生成

最新发布

11-26

编写查询语句生成报表根据不同的报表需求编写相应的查询语句。例如，要生成按商品名称统计的销售总额报表： ```sql SELECT product_name, SUM(sale_amount) AS total_sale_amount FROM sales_data GROUP BY ...

精选资源

Hive查询实例数据文件a-orders.txt

11-06

在数据仓库和商业智能(BI)系统中，这些维度和度量将用于生成各种报表和进行数据分析。 15. 应用场景此类数据文件广泛应用于电子商务网站、在线支付平台、物流跟踪系统、市场营销分析和客户服务管理等领域，对提升...

hive的多维数据分析

weixin_51104399的博客

06-19

1173

hive sql的多维分析实现 with cube,with rollup,grouping sets

Hive几种数据导出方式 – 过往记忆

09-21

Hive几种数据导出方式，总结的几种方式希望能帮到大家

彷徨 | Hive---报表统计

彷徨的博客

08-30

2196

联级累计报表查询有如下数据： A,2015-01-08,5 A,2015-01-11,15 B,2015-01-12,5 A,2015-01-12,8 B,2015-01-13,25 A,2015-01-13,5 C,2015-01-09,10 C,2015-01-11,20 A,2015-02-10,4 A,2...

定时生成Hive报表

liuwei0376的专栏

08-03

760

背景开发中，经常遇到一些固化的报表需求，需要按固定的频率（每天、每周、每月）来定时生成。定时执行Hive脚本，根据调度的复杂程度，可以使用Azkaban，也可以选择更为轻量级的Linux crontab。这里以crontab为例进行调度任务的配置。报表要求 0、统计上月订单销售明细情况； 1、报表以Excel方式生成； 2、可能报表数据量比较大，如果数据量超过预设阈值（如50万），就按阈值分为N+1个文件； 3、受限于Excel的文件大小限制（Excel2007及之后，如果超过Excel的104万

Hive实现累计报表查询

澈彻策的博客

09-06

5587

1.需求有如下访客访问次数的统计表 t_access 访客月份访问次数 A 2015-01 5 A 2015-01 15 B 2015-01 5 A 2015-01 8 B 2015-01 25 A 2015-01 5 A 2015-02 4 A 2015-02 6 B 2015-02 10 B 2015-02 5 …… …… …… 要求输出每个客户在每个月的总访问次数，以及在当

hive实现累计报表详解

longwenyanlan的博客

12-14

1496

业务场景: 有如下访客每次金额统计表 t_access_times 访客月份金额 A 2015-01 5 A 2015-01 15 B 2015-01 ...

基于HIVE数据库出报表的后台相关工具介绍

zhyjtwgsnwxhn的专栏

11-11

2895

1. Sqoop 是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 2. SQLyog SQLyog 是业界著名的 Webyog 软件公司出品的一款简洁高效、功能强大的图形化MySQL数据库管理工具。使用SQLyog可以快速直观地让您从世界的任何角落通过网络来维护远端的MySQL数据库。 3.