Kettle 流查询,数据库查询和Merge Join的区别

本文详细对比了流查询与数据库查询的主要区别,包括查询步骤、内存使用、性能影响以及适用场景,并提供了MergeJoin的概念和示例。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

[color=red]他们的主要区别:[/color]

  [color=blue]•流查询步骤只能进行等值查询[/color],数据库查询步骤可以进行非等值查询

  [color=blue]•流查询在查询之前把数据都加载到内存里,数据库查询可以选择是否把数据加载到内存。[/color]
  •进行等值查询时,数据库查询步骤如果选中了全部缓存,性能接近但仍不如流查询的性能。
  •进行等值查询时,数据库查询步骤如果没选中全部缓存,性能较低,每次查询都要向数据库发送一个SQL 查询请求。
  [color=red]•进行非等值查询时,数据库查询即使选中了全部缓存,性能也较低,没有索引在内存中通过循环查询。[/color]
  •数据库查询的缓存适用于多次查询返回同一个查询结果的情况(集中式),[color=red]多次查询返回不同查询结果(分散式),使用缓存反而会降低性能。[/color]



使用场景:

  [color=red]•非等值查询:数据库查询[/color]

  [color=red]•中小数据量的等值查询:流查询[/color]
  •大数据量的等值集中式查询:数据库查询(使用缓存)
  [color=blue]•大数据量的等值分散式查询:数据库查询(不使用缓存)[/color]

[size=medium][color=red]Merge Join[/color][/size]

Merge Join是高级版的流查询,也就是说可以根据不同表的主键进行内连接或者是外连接。

[img]http://dl2.iteye.com/upload/attachment/0114/7117/61f54616-07e1-391e-a5e6-7b76060ca885.png[/img]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值