- 博客(3)
- 收藏
- 关注
原创 GreenPlum数据库笔记
在典型的Shared-Nothing中,每一个节点上所有的资源(CPU,内存,磁盘)都是独立的,每个节点都只有全部数据的一部分,也只能使用本节点的资源。在greenplum中,需要存储的数据在进入数据库时,将先进行数据分布的处理工作,将一个表中的数据平均分布到每个节点上,并为每个表指定一个分布列(distribute Column),之后便根据Hash来分布数据。Master本身不储存数据,所有数据拆分保存到每一个节点上,在指定分布键的时候,数据按照分布键的Hash值来分布数据,称为。
2024-10-27 09:02:39
1759
原创 使用Spring定时任务@scheduled需要注意的问题
因此我判定应该是我两个定时任务中,前一个定时任务执行时,因为方法中有发送消息等操作造成出现阻塞,造成第二个定时任务延时执行了,打破了每分钟执行的设定,本应该执行的业务系统操作因为定时任务阻塞而造成时间不匹配未执行;因为此时系统时间发生变化了,不会触发定时任务。在需求实现中,我会每隔一分钟将当前系统时间与业务数据中记录的需要触发事件的时间做一次对比,当系统时间与业务表的时间的差值在一分钟内,便触发方法中业务操作,自测两个定时任务的触发都没有问题,当到测试环境时,就会出现定时任务没有按照业务设定去触发。
2024-10-26 16:48:50
858
原创 Flume日志采集
Apache Flume是一个分布式、高可靠和高可用的收集、集合和将大量来自不同来源的日志数据移动到一个中央数据仓库。Apache Flume不仅限于数据的聚集。因为数据源是可定制的,所以Flume可以用于运输大量时间数据包括不限于网络传输数据,社交媒体产生的数据,电子邮件信息和几乎任何数据源。Apache Flume是Apache软件基金会的顶级项目。当前Flume有两个版本Flume 0.9X版本的统称Flume-og,Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构,与Fl
2024-10-26 16:26:36
2296
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅