wiki hive doc

最新推荐文章于 2025-12-01 18:34:51 发布
原创 最新推荐文章于 2025-12-01 18:34:51 发布 · 128 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据

这是 Apache Hive 的官方主页链接，提供关于 Hive 数据仓库软件的详细介绍和技术文档，包括如何使用 Hive 进行数据查询和管理。

https://cwiki.apache.org/confluence/display/Hive/Home

HIVE 安装系列（1）安装部署 遇到虚拟机磁盘空间满 清理空间 折腾了半天
大模型与Agent智能体
03-01 7393
1\上传apache-hive-1.2.1-bin.tar.gz 2、  [root@localhost setup_tools]#mv apache-hive-1.2.1-bin /usr/local [root@localhost setup_tools]#cd .. [root@localhost local]#ls 3、[root@localhost local]#vi /etc
基于linux系统安装hadoop+zk+flume+kafka+mysql+hive+redis+es+Rmq+hbase+spark+storm+azkaban
weixin_43432597的博客
11-19 945
基于linux系统安装hadoop+zk+flume+kafka+mysql+hive+redis+es+Rmq+hbase+spark+storm+azkaban 安装zookeeper （1）解压zookeeper安装包（/opt） #tar -zxvf zookeeper-3.4.7.tar.gz （2）将zookeeper解压包移到/usr/house/zookeeper下 mv ...
hive wiki阅读
u013009809的专栏
09-27 471
hive 由HCatalog 和WebHCat组成 HCatalog是Hadoop的表和存储管理层，允许使用不同数据处理工具(包括Pig和MapReduce)的用户更容易地在网格上读写数据。 WebHCat提供了一个服务，您可以使用它来运行Hadoop MapReduce(或yarn)、Pig和Hive作业。您还可以使用HTTP (REST样式)接口执行Hive元数据操作。 hive str...
hive 文档 wiki-doc
冲子
12-15 1541
wiki：https://cwiki.apache.org/confluence/display/Hive/GettingStarted#GettingStarted-DDLOperations DDL：         https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL               
Hive大总结！！！
Biubiubiu!
03-29 6114
文章目录Hive一、Hive简介及核心概念1、Hive概述2、Hive特点2.1、优点2.2、缺点2.3、Hive使用场景3、Hive基本架构原理4、数据处理流程5、Hive 和数据库比较5.1、查询语言5.2、数据存储位置5.3、数据更新5.4、索引5.5、执行5.6、执行延迟5.7、可扩展性5.8、数据规模二、Hive安装及配置1、Hive 安装地址2、Hive 安装部署3、元数据配置3.1、...
Apache Hive 帮助文档
小 tom的博客
10-19 1569
Apache Hive 是一个分布式、容错的数据仓库系统，能够在大规模上进行分析。Hive 元存储（HMS）提供了一个中央元数据仓库，可以轻松分析，以便做出基于数据的明智决策，因此它是许多数据湖架构中的关键组成部分。Hive 构建在 Apache Hadoop 之上，支持通过 HDFS 在 S3、ADLS、Google Cloud Storage 等平台上存储数据。Hive 允许用户使用 SQL 读取、写入和管理 PB 级的数据。
Hive之ObjectInspector详解
IT小王
08-31 5138
Hive之ObjectInspector详解 对于我而言，我是在写GenericUDF/UDAF/UDTF时候遇到ObjectInspector的。所以这里的内容仅针对函数的时候写的。 我们都知道hql最后会转为MapReduce作业来执行。而我们之前单独写MR的时候，需要写一个Map类和Reduce类，在写这些类的时候我们需要指定输入和输出参数的数据类型（记住不是Java的基本数据类型，还记得吗。是经过Hadoop封装的XxxWritable类型，比如int类型，要写成IntWritable,String
2、Hive安装教程详解
这里是Code猿学习的地方
01-19 3466
1.准备hive安装包 自行按照1.1教程提示下载hive的安装包 1.1 下载hive 下载地址 打开下载地址后，如下图点击apache-hive-1.2.2-bin.tar.gz 下载 1.2 上传hvie安装包 基于我们之前的环境安装情况已经可以了解到我们已经在node1上部署了namenode，resourcemanager，secondarynamenode等比较重要的进程；node...
hive 报错return code 40000 from org.apache.hadoop.hive.ql.exec.MoveTask解决思路
cclovezbf的博客
11-23 4263
但是这个错是hive的错，我们开发过程 中会遇到很多hive问题，都怎么解决呢？我建议看源码，但先不要看报错源码，直接看errorCode源码，别人hive的开发者也是人，也知道这里会报错，可能会好心告诉我们怎么解决。看到这里获取配置项，就舒服了，毕竟就算我们发现假设hive源码有问题，我也没法修改cdp的源码。那么直接看hive的源码，毕竟cdp也是抄的hive官方的代码。1.设置线程数为1，线程数越少，产生bug的几率就越小。3.改为分区表，此时不在一个目录了，就不会有这个问题了。
基于 Hive 的 Flutter 文档类型存储
会煮咖啡的猫咪
11-30 1476
基于 Hive 的 Flutter 文档类型存储 原文 https://medium.com/gytworkz/document-type-storage-in-flutter-using-hive-a18ea9659d84 前言 长久以来，我们一直使用共享首选项以键对格式在本地存储中存储数据，或者使用 SQLite 在 SQL 数据库中存储数据。 存储本地数据的另一种方法是将其存储为文档格式，类似于使用 Hive 包的 Firebase 云存储。 https://pub.dev/packages/
后端在分布式中的Apache Kafka
2509_93945680的博客
11-28 395
比如我们有一次做促销活动，突然流量暴涨，临时加了几台消费者实例，Kafka自动把分区负载均衡过去，系统愣是没抖一下。另外，Kafka的消息持久化机制也靠谱，数据在磁盘上存着，就算消费者宕机了，重启后还能从上次的位置继续读，不怕数据玩失踪。另外，Kafka的监控也得跟上，光靠默认配置容易漏掉性能瓶颈。举个例子，我们项目里把用户点击事件塞进Kafka主题，下游的风控服务和数据分析服务各取所需，谁也不用等谁，效率直接翻倍。总之，技术选型得量体裁衣，先把Kafka的核心机制摸透，再往架构里套，才能少走弯路。
【推荐系统】深度学习训练框架（五）：pyspark分布式TorchDistributor主从读取OSS文件认证机制
人工智能领域博客
11-28 1827
摘要： 本文详细解释了Spark Driver端与Worker端在OSS认证上的核心区别。Driver端通过Spark配置自动认证，而Worker端（独立Python进程）需显式提供认证信息。认证来源优先级为：1)Driver传递参数，2)环境变量，3)IAM角色。文章分析了架构差异导致的不同认证方式，并推荐从Driver传递认证信息的解决方案。当前实现已采用该方案，通过Spark配置或环境变量获取认证后传递给Worker进程，确保PyArrow能正确访问OSS数据。
n8n实战营Day3：电商订单全流程自动化·需求分析与流程拆解
陈奕昆的博客
11-29 1126
本文详细拆解了电商订单处理全流程自动化方案，针对手动操作存在的三大核心痛点：多平台订单整合效率低、库存同步滞后风险高、物流信息推送不及时。通过n8n工作流设计，将流程划分为6大环节（订单抓取、数据清洗、订单去重、库存处理、物流对接、信息推送），并给出节点选型建议和关键配置要点。重点强调数据标准化的重要性，包括字段映射规范和传递规则，为后续实操提供清晰的"施工蓝图"。下节将进入实操阶段，重点讲解多平台订单抓取和ERP对接的具体实现。
解决Flink中ApacheCommonsCLI版本冲突
最新发布
weixin_51976489的博客
12-01 129
flink集群运行checkpoint报错： org.apache.commons.cl i.CommandLine.hasOption(Lorg/apache/commons/cli/ Option;)Z这个错误通常是由于 Apache Commons CLI 依赖版本冲突引起的。
Flink CDC系列之：Kafka 数据接收器配置选项类KafkaDataSinkOptions
zhengzaifeidelushang的博客
11-28 690
Flink CDC系列之：Kafka 数据接收器配置选项类KafkaDataSinkOptions
SpringBoot中整合RabbitMQ（测试+部署上线 最完整）
2509_94177154的博客
12-01 569
RabbitMQ服务端是由并发式语言Erlang编写的，所以安装RabbitMQ的之前需要安装Erlang，保证所需要的环境。注意：这里没有下载的版本，下载需要与自己的版本一致，如果发现启动不了RabbitMQ，请看后面的启动RabbitMQ。由于目前是测试阶段，这里我使用之前学习的时候的版本。
云原生大数据分析平台设计与实践
2501_94162433的博客
11-27 301
Java 拥有成熟的分布式计算框架（如 Hadoop、Spark）和稳定的类型系统，适合处理核心业务逻辑和数据管道管理。通过容器化部署、微服务架构和多语言协作，平台可以在保证高可用性和高性能的同时，实现灵活扩展和高效运维。掌握云原生大数据分析平台的设计与实践，将帮助开发者构建高效、可扩展和智能化数据平台，满足大数据、人工智能、物联网及金融科技等复杂场景的需求。在保证性能和稳定性的基础上，通过智能调度和自动化运维，实现平台创新和持续迭代，为企业技术发展提供坚实保障。
Flink CDC系列之：JSON 序列化器JsonRowDataSerializationSchemaUtils
zhengzaifeidelushang的博客
11-27 683
Flink CDC系列之：JSON 序列化器JsonRowDataSerializationSchemaUtils
flink的普通API的使用，source
2301_80954266的博客
11-28 431
可以通过实现接口自定义数据源。count = 0count += 1# 使用自定义 Source# 后续处理操作...环境初始化：首先需通过获取执行环境。Source 创建：使用或等方法创建数据源。数据处理：在 Source 后链式调用map()filter()key_by()等操作。执行作业：最后通过启动任务。根据实际需求选择合适的Source类型即可快速构建流处理应用。
Hive编程指南
7. **Hive的编程接口**：讲解Hive的Java API（HiveDriver、HiveSession等）和Hive命令行接口，以及如何通过这些接口进行程序化访问和操作Hive。 8. **MapReduce与Hive的交互**：深入理解Hive如何利用MapReduce执行...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值