
大数据
文章平均质量分 93
风雨无阻1203
热爱工作就是热爱生活
展开
-
MySQL 亿级别表结构变更优化:如何安全添加字段而不阻塞业务 & gh-ost安装使用
在 MySQL 数据库运维和开发过程中,表结构变更是常见的操作,尤其是 新增字段(ADD COLUMN)。然而,如果操作不当,可能会导致 锁表、阻塞业务读写,甚至引发线上故障。本文将从 MySQL 不同版本的 DDL 行为、Online DDL 机制、锁策略优化等方面,深入探讨如何安全高效地执行 ALTER TABLE 操作,确保业务不受影响。原创 2025-04-10 16:50:36 · 571 阅读 · 0 评论 -
Hadoop在window下安装实践
Hadoop在window下的安装教程原创 2024-07-19 00:36:58 · 3530 阅读 · 0 评论 -
Hadoop的入门学习(理论知识)
Reduce则并行地对生成的中间结果中相同的Key的所有Value进行规约合并汇总处理后,输出新的Key-Value得到最终结果,这个处理相同Key的过程称为Reduce shuffle. 可以看出,在Map和Reduce中间,其实还有一个过程,就是对Map的输出进行整理并交给Reduce,这个过程就是shuffle. Map和Reduce操作需要我们自己定义相应的Map类和Reduce类,而shuffle则是系统自动帮我们实现的。NM是每个子节点上的资源和任务管理器,或者说是YARN的slave节点。原创 2024-07-19 00:13:26 · 2240 阅读 · 0 评论 -
Kafka在Windows和CentOS的安装实践
Kafka是一个分布式的基于发布/订阅模式的消息队列(Message Queue),主要应用于大数据实时处理领域;支持分区的、多副本,基于zookeeper协调的分布式消息系统原创 2024-07-17 14:41:39 · 1269 阅读 · 0 评论 -
ELK的在Centos上的安装实践 之Kibana安装
kibana在Centos上的安装原创 2024-07-09 13:07:02 · 1083 阅读 · 0 评论 -
ElasticSearch-DSL语句使用
ElasticSearch DSL查询原创 2024-07-09 11:08:44 · 602 阅读 · 0 评论 -
ELK的在Centos上的安装实践 之ElasticSearch安装
Elasticsearch的安装与使用,以及Elasticsearch的可视化工具Cerebro的安装原创 2024-07-09 09:56:59 · 1518 阅读 · 0 评论 -
minio在Windows与centos的安装实践
在说minio之前说说什么是对象存储,我们可以看下阿里云OSS的解释。对象存储服务OSS(Object Storage Service)是一种海量、安全、低成本、高可靠的云存储服务,适合存放任意类型的文件。容量和处理能力弹性扩展,多种存储类型供选择,全面优化存储成本。官方解释:Minio 是个基于 Golang 编写的开源对象存储套件,基于Apache License v2.0开源协议,虽然轻量,却拥有着不错的性能。它兼容亚马逊S3云存储服务接口。原创 2024-07-08 20:46:46 · 1453 阅读 · 0 评论 -
MeiliSearch—一个可以代替ES的中小型搜索引擎
MeiliSearch是一个功能强大、快速、开源、易于使用和部署的搜索引擎,并且MeiliSearch的搜索和索引都是高度可定制的,提供开箱即用的功能属性,如错字容忍、过滤器和同义词原创 2024-07-08 20:09:52 · 1755 阅读 · 0 评论