- 博客(2)
- 收藏
- 关注
RSS订阅翻译 Smart:类MapReduce的原位科学分析框架
摘要近年来I/O与计算性能的差距越来越大。原位分析通过共同定位模拟和分析程序，避免了昂贵的模拟输出数据移动，是降低I/O和存储成本的有效方法。而开发一个高效的原地实现存在很多挑战，包括并行化分析，执行所需的数据移动和共享，为分析程序的执行分配适当的资源。MapReduce是被广泛采用的并行数据分析编程模型。然而，在原地科学分析的实现上，MapReduce还存在很多问题。在这篇文章中，我们实现了...
2020-03-20 17:28:22
571
翻译 Thrill: 基于C++的高性能分布式批处理算法
我们介绍了Thrill的设计和性能评估，它是一个通用大数据处理框架的原型，具有方便的数据流式编程接口。Thrill与Apache-Spark和Apache-Flink有些相似，但有两个主要区别。首先，Thrill是基于C++的，它具有直接的本机代码编译、更高速缓存友好的内存布局和显式内存管理，具有性能优势。
2020-03-20 16:33:13
2597
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人