apache kylin 中的设计模式----工厂模式

最新推荐文章于 2024-07-31 20:44:41 发布
最新推荐文章于 2024-07-31 20:44:41 发布
阅读量227 收藏 1
点赞数
分类专栏： kylin 设计模式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/fan0703/article/details/83506484
版权
本文深入探讨Apache Kylin中工厂模式的应用，重点介绍SourceFactory如何生成ISource接口的实体类对象，涵盖三种实现方式，包括默认从Hive获取数据源的方法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在apache kylin中运用了诸多的设计模式，接下来就介绍一下kylin中使用的工厂模式：

创建SourceFactory，生成实体类对象

               

ISource接口                            

                                                                                  在kylin中有三种实现ISource的方式

                   

kylin提供了三种实现ISource的实现方式，默认从hive中获取数据源

Kylin设计详解 一
zhangzty111的博客
06-14 510
目录一 Kylin设计核心思想二 Kylin基本架构三 基本概念业务的发展伴随着事实表的数据体量的增大，查询时间也越来越长，而另一方面，结果集的数据量却没有显著增长，指标的变化也并不频繁。我们希望所有的查询都能在秒级返回查询结果，于是，我们有了一个思路：为什么不能把所有的结果先算好，查询时直接从结果集中取出来呢？这也就是 kylin 设计的初衷。 kylin的核心思想是预计算。 好，现在这个组件已经有了一个准确的定位，那么接下来要解决的问题就是如何实现预计算，这套架子里究竟需要什么组件呢？上图中，蓝色的框框
Kylin设计详解 二
zhangzty111的博客
06-16 250
目录4 Cube构建及优化4.1 Cube构建及优化总览4.2 Cube构建分步骤说明构建Cube的过程设计可以说是 kylin 系统设计的精华，这7个步骤封装了 kylin 绝大多数的实现细节，呈现出来的是简洁精炼的构建步骤。上图中，有7个步骤，可以分为三个阶段：前四步为构建阶段，5、6步为优化阶段，最后一步为总览。下面我们一个一个详细说一下 在这一步中，我们需要设置的是 Cube 的基本信息，其中包括：Model Name：model 名。Cube Name： Cube 名，全局唯一，否则会创建失败。N
apache-kylin多维模型框架搭建
06-01
Kylin安装与使用：1.Kylin环境准备；2.Kylin部署;3.Kylin使用;4.Kylin可视化 等四部分
设计模式-责任链模式
qq_36364521的博客
08-16 216
设计模式-责任链模式
6、apache-kylin-3.1.3-bin-hadoop3 cube优化方向及减少cuboids和降低膨胀率详细示例
热门推荐
alanchanchn的专栏
06-26 6万+
1、apache-kylin-3.1.3-bin-hadoop3介绍及部署、验证详解 2、apache-kylin-3.1.3-bin-hadoop3集群部署 3、apache-kylin-3.1.3-bin-hadoop3基本操作(创建model和cube、数据查詢) 4、apache-kylin-3.1.3-bin-hadoop3增量构建、全量构建详细示例 5、apache-kylin-3.1.3-bin-hadoop3 segment管理及JDBC操作 6、apache-kylin-3.1.3-bin
更快更稳：Apache Kylin 4.0.0-beta 正式发布！
Kyligence
02-23 513
更快更稳：Apache Kylin 4.0.0-beta 正式发布！ Apache Kylin 社区于日前宣布：Apache Kylin 4.0.0-beta 正式发布！欢迎大家下载使用。 Apache Kylin 是一个开源的分布式分析引擎，提供 Hadoop/Spark 之上的 SQL 查询接口及多维分析 (OLAP) 能力，支持对超大规模数据进行亚秒级查询，已被 eBay、腾讯、美团、滴滴、汽车之家、贝壳找房、OLX 集团等全球上千家企业采用。 1. Release Notes Ap.
Apache Kylin 概述
weixin_41269466的博客
07-11 101
1 Kylin是什么 今天，随着移动互联网、物联网、AI等技术的快速兴起，数据成为了所有这些技术背后最重要，也是最有价值的“资产”。如何从数据中获得有价值的信息？这个问题驱动了相关技术的发展，从最初的基于文件的检索、分析程序，到数据仓库理念的诞生，再到基于 数据库的商业智能分析。而现在，这一问题已经变成了如何从海量的超大规...
搭建Apache Kylin集群：步骤详解与配置优化
最新发布
weixin_41859354的博客
07-31 726
搭建和优化Apache Kylin集群需要详细的配置和调优。本文提供了从源码构建到部署以及优化的详细步骤。通过合理的资源配置和优化，可以实现Kylin集群的高效运行，为大数据分析提供强大的支持。
6-9+Apache+Kylin：OLAP+Engine+for+Big+Data.pdf
03-18
Apache Kylin是一个专为大数据分析设计的开源在线分析处理（OLAP）引擎，它在Hadoop生态系统中提供了高效能、高并发以及亚秒级响应时间的实时数据分析能力。该项目于2014年11月进入Apache孵化器，并在2015年11月正式...
apache kylin ppt
08-07
Apache Kylin是一个由eBay公司开发并开源的分布式分析引擎，它特别针对Hadoop大数据平台进行设计，提供SQL接口和多维分析（OLAP）能力，以支持极大规模的数据集。Kylin项目在2014年10月1日首次开源，并于同年11月25...
三种工厂模式的对比
JasonLam的博客
12-08 998
工厂模式分为三种：简单工厂模式、工厂方法模式和抽象工厂模式。工厂模式的目的在于增加程序的可扩展性。让程序有一个更好地封装，降低程序模块之间的耦合程度。 在增加新的功能或要求的时候不需要做太多的改动，如改变多个现有的类等等，编程是一门艺术，大批量的改动显然是非常丑陋的做法，我们尽可能的避免这样编程。 简单工厂模式 简单工厂严格来说并不算一种设计模式，因为它违反了“开放-封边”原则。简单工
在Windows下搭建kylin(麒麟)运行环境
fan0703的博客
07-20 4476
刚来公司实习，所在的项目组是做kylin的，仅以此文记录下kylin开发环境的搭建。 由于kylin是运行在linux系统上的，而公司给我配的电脑是Windows的，所以在这里讲的是Windows下配置运行环境。 kylin是建立在hadoop之上的，所以依赖于Hadoop。 step1、下载配置JDK step2、下载配置maven step3、申请一个云主机 可以选择阿里巴巴付费的...
搭建kylin（麒麟）及遇到的问题（续）
fan0703的博客
07-24 2618
  之前安装好了ambari，接下来就是需要使用ambari安装需要的服务，其中遇到了一个问题 1、Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). SSH command execution finished 解决： cd ~/.shh cat id_rsa.pub >>authoriz...
kylin中的metadata详解
fan0703的博客
10-04 1665
kylin的metadata是kylin的核心，也是学习kylin的关键一步。 TASK1 array["0"]="0" for all in `ls`; do cubetime=`grep create_time_utc $all | tail -1 | awk '{print $3}' | awk -F, '{print $1}'`; cubetime=`expr $cubetime...
kylin内幕--如何有效实现cubes
fan0703的博客
08-24 553
本文参考斯坦福著名论文：implementing data cubes efficiently。 在kylin（麒麟）中，有一项关键技术叫做预计算：简单的说，我们预先计算出用户可能查询的结果，每一种可能我们称之为一个cuboid，所有的cuboid组合起来叫一个cube。我们把cube存储起来，当用户需要查询数据的时候，就不用查找原始数据表，直接查询cube就能得到想要的数据，这是让kylin能...
Apache Kylin权威指南限时特惠版抢先看
3. **可扩展性**：Kylin设计支持水平扩展，可以通过增加节点数量来处理更大的数据集。 4. **查询优化**：Kylin通过复杂的查询优化机制，包括CBO（Cost-Based Optimization），来提升查询性能。 5. **实时查询**：在...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值