
大数据
文章平均质量分 65
天河书阁 VicRestart
《说卦传》曰:“乾、天也,故称乎父。坤、地也,故称乎母。震一索而得男,故谓之长男。巽一索而得女,故谓之长女。坎再索而得男,故谓之中男。离再索而得女,故谓之中女。艮三索而得男,故谓之少男。兑三索而得女,故谓之少女”。
展开
-
数据库系统概念系列 - 数据库系统的历史
从商业计算机的出现开始,数据处理就一直推动着计算机的发展。事实上,数据处理自动化早于计算机的出现。Herman Hollerith 发明的穿孔卡片,早在20世纪初就用来记录美国的人口普查数据,并且用机械系统来处理这些卡片和列出结果。穿孔卡片后来被广泛用作将数据输入计算机的一种手段。原创 2023-11-06 23:15:18 · 213 阅读 · 0 评论 -
Kibana无法启动 kibana_task_manager search_phase_execution_exception 问题解决
今天服务器重启以后,发现无法启动Kibana服务了,在网上也是把错误搜索了半天,尝试了那些命令,但是执行删除命令时居然报错了。后来,仔细观察后,发现是删除方式不太正确,需要改一下删除命令才能正确执行,在这里就记录一下解决办法。原创 2023-10-30 18:47:30 · 3354 阅读 · 5 评论 -
什么是 LSM 思想?它的优缺点都那些?
LSM(Log-Structured Merge)是一种用于设计和优化存储系统的思想和架构。它最初由闪存文件系统(Flash File System)和大规模分布式存储系统(如 Bigtable 和 HBase)采用,并在键值存储引擎中广泛应用,如 LevelDB 和 RocksDB。原创 2023-09-01 15:12:51 · 783 阅读 · 0 评论 -
大规模数据处理的技术的五个时代和四代引擎
师夷长技以制夷,各大计算引擎相互参考,不断优化着自己的短板,推出新的特性,争当第四代计算引擎扛旗手。MapReduce虽好,但是对于上层应用来说,在一些复杂的应用场景下,编写MapReduce程序会变得越来越复杂,工程师们想法设法的拆分算法,实现多个Job的串联,开发维护工作量大。随着互联网的蓬勃发展,数据量在呈指数型增长。如果重登历史的巨轮,一路走马观花般地来看看大数据处理计算引擎的每一个转折点,我们不难发现每一次的升级都是在业务和技术开发的双重推动下稳步前行,每一次升级都是对数据模型抽象能力的提升。原创 2023-08-02 16:54:49 · 419 阅读 · 0 评论