cleanup123-优快云博客

转载 Flink-1.9流计算开发：五、keyBy、sum、print函数

Flink-1.9流计算开发：五、keyBy、sum、print函数Flink是下一代大数据计算平台，可处理流计算和批量计算。《Flink-1.9流计算开发：五、keyBy、sum、print函数》是cosmozhu写的本系列文章的第五篇。通过简单的DEMO来演示keyBy、sum、print函数执行的效果。需求分类统计订单数量解决方案public class StreamTest {...

2020-01-08 15:05:09 5279

转载 Flink-1.9流计算开发：四、filter函数

Flink-1.9流计算开发：四、filter函数在本篇文章中我们接着来说filter函数,此函数主要作用就是根据用户条件，过滤数据流中数据。需求将数据流的单词做大写转换，并保留其小写，然后只打印出字符串长度大于5的元素。解决方案public class StreamTest { private static final Logger LOG = LoggerFactory.getLo...

2020-01-08 15:04:17 5935

Flink-1.9流计算开发：三、flatMap函数在上一篇文章Flink-1.9流计算开发：二、Map函数文章中我们使用了map方法。在本篇文章中我们将使用flatMap，来验证一下它与map方法的差异。需求本篇文章实现一个很简单的逻辑，创建一个数据流{“apple”,“orange”,“banana”,“watermelon”}，将数据流的单词做大写转换，并保留其小写，然后将其打印出来。...

2020-01-08 15:03:16 1482

转载 Flink-1.9流计算开发：二、Map函数

Flink-1.9流计算开发：二、Map函数整体来讲一个流处理过程可以划分为三部分DataSource、Transformations、Sinks。DataSource用来产生或者获取数据流，Transformations对数据流做转换，Sinks作为数据的出口输出到将数据输出到数据库，文件等系统，不过Transformations、Sinks并不是必须的。在上一篇文章Flink-1.9流处理...

2020-01-08 15:02:01 747

转载 Flink-1.9流计算开发：一、最初的开始HELLO WORLD

Flink-1.9流计算开发：一、最初的开始HELLO WORLD首先我们需要需要了解的一个概念是Apache Flink支持处理流式计算（stream）和批量计算（batch），但是在目前版本中这两种计算方式各自拥有自己独立的API，本系列文章只讨论流式计算（stream）。学习本系列的必要条件是已安装Maven 3.0.4+，java8。

2020-01-08 15:00:37 341

转载 mongodb-4.x复制集数据同步（replica-set-sync）

转自http://www.cosmozhu.fun/archives/109本文翻译自mongodb官方文档https://docs.mongodb.com/v4.0/core/replica-set-sync/初始化数据同步复写为了维护共享复制集的最新节点，复制集的次要成员节点将同步或复写其他成员节点的数据。MongoDB用了两种方式做数据同步：用全量数据初始化节点，用增量数据复...

2019-11-27 13:42:17 690

原创 mongodb-4.x shard cluster 搭建-复制集节点为单个节点-适合开发环境

仅供学习，未经允许严禁转载。欢迎访问我的个人博客http://www.cosmozhu.fun我已加入“维权骑士”(rightknights.com)的版权保护计划在搭建集群之前，先将各个节点机的ip配置为简单域名,如下所示192.168.5.114 vm11 vm11192.168.5.107 vm2 vm2192.168.4.37 vm3 vm31. 下载mongodb安装包...

2019-11-21 13:45:39 326

原创 MongoDB-4.x 开启shard集群后批量插入性能低的问题

关注我的blog获取最新内容最近接触了mongodb,用两台物理机部署了3个centos7-vm，分别在没台机器上部署了route和config。其中shard每台vm部署了一个，并没有配置复制集。在性能验证的时候发现在不对collection开启shard的时候批量插入的性能大概在25000条/s。而开启shard之后批量插入的性能下降到了5000条/s。。。。。在经过一番排查之后...

2019-11-20 15:03:18 595 1

原创 jackrabbit食用指南：Jackrabbit-Configuration（jackrabbit配置）

原文： https://jackrabbit.apache.org/jcr/jackrabbit-configuration.html翻译 by：cleanup123jackrabbit 配置Apache Jackrabbit 需要两条信息来建立一个运行的内容仓库实例。

2019-04-10 09:22:01 1990

原创 jackrabbit食用指南：关于NodeType

JSR 170 node types 分为 Mixin types 和 Primary types。这篇文章主要讨论Primary types，我参考了Jackrabbit Wiki 和 jcr2.0Api 将所有的Primary types节点整理如下图所示。

2019-04-09 16:42:09 305

cosmozhu