<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[要啥自行车，一把梭~]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/shen2308</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; shen2308]]></copyright><item><title><![CDATA[理解StarRocks表设计]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/124818200</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/124818200</guid><author>shen2308</author><pubDate>Tue, 17 May 2022 15:57:59 +0800</pubDate><description><![CDATA[列式存储
稀疏索引
加速数据处理]]></description><category></category></item><item><title><![CDATA[TiDB数据库常用监控指标-TiDB]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/124810943</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/124810943</guid><author>shen2308</author><pubDate>Tue, 17 May 2022 00:59:51 +0800</pubDate><description><![CDATA[TiDB数据库常用监控指标-TiDB
- Duration相关
- QPS相关
- Transaction相关
- 资源相关
- PD/TiKV相关]]></description><category></category></item><item><title><![CDATA[MySQL XtraBackup 备份原理]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/115499767</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/115499767</guid><author>shen2308</author><pubDate>Thu, 08 Apr 2021 00:21:51 +0800</pubDate><description><![CDATA[实现原理：

XtraBackup基于InnoDB的crash recovery机制，在备份还原时利用redo log得到完整的数据文件，并通过全局读锁，保证InnoDB数据与非InnoDB数据的一致性，最终完成备份还原的功能

由于是热备操作，在备份过程中可能有持续的数据写入，直接复制出来的数据文件可能有缺失或被修改的页，而redo log记录了InnoDB引擎的所有事务日志，可以在还原时应用redo log来补全数据文件中缺失或修改的页。所以为了确保redo log一定包含备份过程中涉及的数据页，需要首]]></description><category></category></item><item><title><![CDATA[Grafana监控腾讯cdb物理资源信息]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/109401743</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/109401743</guid><author>shen2308</author><pubDate>Sat, 31 Oct 2020 14:15:40 +0800</pubDate><description><![CDATA[Grafana版本Version 7.1.5
监控腾讯云

基于Grafana的方案
基于Promethuse的方案
基于云监控api的方案

需求，监控MySQL所有物理机相关指标（CPU、内存、磁盘等）
qcloud exporter的配置
# grep -Ev "#|^$" qcloud-cdb-product.yml
credential:
  access_key: "ak"
  secret_key: "sk"
  region: "zone"
products:
  - namespace: ]]></description><category></category></item><item><title><![CDATA[Elasticsearch集群规划及性能优化实践（笔记）]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/108548347</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/108548347</guid><author>shen2308</author><pubDate>Sat, 12 Sep 2020 13:30:30 +0800</pubDate><description><![CDATA[ES集群容量及索引规划
1 集群规模评估


评估什么

计算资源的CPU和内存
存储资源的类型及容量
节点数量



根据什么评估

业务场景：日志分析、指标监控、网站搜索
查询及写入QPS
索引数据总量



集群规模评估准则

32C64G单节点配置通常可承载5W次/s的写入；
写入量和数据量较大时，优先选择32C64G的节点配置；
1T的数据量预计需消耗2-4GB的内存空间；
实际存储空间通常为原始数据量2.8倍（1副本）
搜索场景优先选择大内存节点配置



2 索引配置评估


评估什么

怎么]]></description><category></category></item><item><title><![CDATA[ElasticSearch学习笔记---01]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/106346997</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/106346997</guid><author>shen2308</author><pubDate>Tue, 26 May 2020 07:40:27 +0800</pubDate><description><![CDATA[阮老师视频笔记

文档（Documen）

Elasticsearch是面向文档的，文档时所有可搜索数据的最小单位
文档会被序列化成JSON格式，保存在Elasticsearch中

JSON 对象由字段组成
每个字段都有对应的字段类型（字符串/数值/布尔/日期/二进制/范围类型）


每个文档都有一个Unique ID

可以自定义
或者Elasticsearch自动生成



文档的元数据

_index：文档所属的索引名
_type：文档所属的类型名
_id：文档唯一id
_source：文档的原始.]]></description><category></category></item><item><title><![CDATA[InfluxDB常用命令【笔记】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/105453494</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/105453494</guid><author>shen2308</author><pubDate>Sat, 11 Apr 2020 15:33:07 +0800</pubDate><description><![CDATA[连接
➜  ~ influx -host xxxxx -port 8086
Connected to http://xxxxx version 1.7.10
InfluxDB shell version: 1.7.7
&gt;

查看所有的数据库
show databases;

使用特定的数据库
use database_name;

查看所有的measurement
show measurem...]]></description><category></category></item><item><title><![CDATA[最全CacheCloud最完整安装使用文档【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/105416967</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/105416967</guid><author>shen2308</author><pubDate>Thu, 09 Apr 2020 18:26:29 +0800</pubDate><description><![CDATA[文章目录准备阶段安装cachecloud登陆
准备阶段

下载 cachecloud-master版本

解压后目录
cachecloud-master# ll -h
total 56K
drwxr-xr-x 6 root root 4.0K Nov 14 16:41 cachecloud-open-client
drwxr-xr-x 3 root root 4.0K Nov 14 16:41 c...]]></description><category></category></item><item><title><![CDATA[ELK收集MySQL SlowLog（Filebeat .KO. Logstash ）【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104451765</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104451765</guid><author>shen2308</author><pubDate>Sat, 22 Feb 2020 23:11:51 +0800</pubDate><description><![CDATA[文章目录故事背景1. 需求2. 问题拆解3. 难点/处理方法难点处理方法ELK收集MySQL SlowLog方案一：Logstash收集
故事背景
1. 需求
收集腾讯云MySQL实例的慢查询，并展示
2. 问题拆解

调用腾讯云API接口拉取slowlog文件
使用Logstash或Filebeat收集慢查询

3. 难点/处理方法
难点
每次拉取慢查询只能是全量拉取

本人编程能力比较差，仅仅...]]></description><category></category></item><item><title><![CDATA[腾讯云SDK获取CDB相关信息范例【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104335710</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104335710</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 23:41:07 +0800</pubDate><description><![CDATA[tencentcloud-sdk-python
文章目录1. 获取CDB列表信息2. 获取mysql慢查询日志3. 获取监控信息
1. 获取CDB列表信息
from tencentcloud.common import credential
from tencentcloud.common.exception.tencent_cloud_sdk_exception import TencentCl...]]></description><category></category></item><item><title><![CDATA[阿里云RDS监控可以不那么“难看”【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104330878</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104330878</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 17:07:26 +0800</pubDate><description><![CDATA[文章目录1. 工具收集阶段1.1 Prometheus+Grafana环境部署1.2 阿里云RDS（mysqld）相关监控1.3 资源监控1.3.1 重新打包Dockerfile1.3.2 修改bug配置1.3.3 启动docker1.3.4 Grafana配置图2. 工具组合2.1 架构图2.2 supervisor+mysqld_exporter2.3 prometheus服务发现2.4 最后...]]></description><category></category></item><item><title><![CDATA[MySQL一主两从转级联复制【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104330198</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104330198</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 16:39:34 +0800</pubDate><description><![CDATA[一主两从 转 级联复制 示意图如下
M  ---&gt; S1
 \ 						====&gt;      M ---&gt; S1 ---&gt; S2
  \ --&gt; S2

如果有开启GTID操作起来方便多，GTID是唯一的，直接操作即可。
如果使用file_name、position可以使用如下办法（现在还没开启gtid真的是无力吐槽）
# 步骤1、 
# 现将S2的复制断开
S2...]]></description><category></category></item><item><title><![CDATA[orzdba 监控获取/输出全解【原理系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104330151</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104330151</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 16:35:36 +0800</pubDate><description><![CDATA[orzdba好用的不要不要的
threads

run：Threads_running
con：Threads_connected
cre：Threads_created
cac：Threads_cached

------threads------
 run  con  cre  cac|
   0    0    0    0|
 200  202    0    0|
 201  202  ...]]></description><category></category></item><item><title><![CDATA[MySQL大表优化思路【面试系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104330108</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104330108</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 16:34:35 +0800</pubDate><description><![CDATA[其实就是把别的文章脑图抄一下，顺便自己动动脑子消化一下，平时工作中比较好用

大表数据量:千万可能达到亿或更高是一个相对稳定的数据量不应该有这么多数据对象:数据表状态表OLTP业务方向流水表OLTP:业务拆分,分布式存储的角度进行设计OLAP:设计数据统计需求和存储的分不熟扩展配置表通用服务,配置应该是小而简,避免大目标:优化规范化业务层优化业务拆分混合业务拆分成独立业务将状态和历史数据分离数据拆...]]></description><category></category></item><item><title><![CDATA[XtraBackup流程【DBA面试系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104330003</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104330003</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 16:30:07 +0800</pubDate><description><![CDATA[文章目录XtraBackup全备全量备份流程总结FAQ全备恢复全备还原流程FAQ增量备份FAQ增备恢复增量备份流程总结FAQ
XtraBackup
全备
Innobackupex全备流程1. 连接mysql2. 读取配置文件,找到相应的数据和日志位置3. start xtrabackup_log:创建xtrabackup_logfile文件.模拟mysql instance方式,以读写模式打开并读...]]></description><category></category></item><item><title><![CDATA[MongoDB 4.0.8 基于X.509认证的3副本复制集群【实操系列】]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/104329876</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/104329876</guid><author>shen2308</author><pubDate>Sat, 15 Feb 2020 16:24:38 +0800</pubDate><description><![CDATA[一、环境




hostname
ip
role




mongo-1
10.1.1.1
PRIMARY


mongo-2
10.1.1.2
SECONDARY


mongo-3
10.1.1.3
SECONDARY


二、认证相关
$ cat server.sh
# ca
openssl req -passout pass:password -new -x509 -keyout ca_...]]></description><category></category></item><item><title><![CDATA[ubuntu 16.04 安装网易云音乐]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/79590784</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/79590784</guid><author>shen2308</author><pubDate>Sat, 17 Mar 2018 12:11:21 +0800</pubDate><description><![CDATA[1  OS版本

$ lsb_release  -a
Distributor ID: Ubuntu
Description:    Ubuntu 16.04.3 LTS
Release:    16.04
Codename:   xenial

2  下载地址 
3 安装



$ sudo apt-get install -f
$ sudo dpkg -i netease-cloud-music...]]></description><category></category></item><item><title><![CDATA[时序数据库（选摘）]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/78872657</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/78872657</guid><author>shen2308</author><pubDate>Fri, 22 Dec 2017 14:03:30 +0800</pubDate><description><![CDATA[十分钟看懂时序数据库（I）-存储
十分钟看懂时序数据库（III）- 压缩
十分钟看懂时序数据库(IV)- 分级存储
十分钟看懂时序数据库（V）- 分布式计算
时序数据库技术体系(一)
时序数据库技术体系（二）]]></description><category></category></item><item><title><![CDATA[mairadb Audit Plugin简单说明]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/78861125</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/78861125</guid><author>shen2308</author><pubDate>Thu, 21 Dec 2017 10:52:53 +0800</pubDate><description><![CDATA[安装插件[mysqld]
...
plugin_load=server_audit=server_audit.so
...审计日志类型参数server_audit_events：CONNECT,QUERY,TABLE 
简单测试：
CONNECT：只选择此值，会记录每次的连接创建和断开
20171219 11:19:08,hostname,root,localhost,24,0,DISCONNECT]]></description><category></category></item><item><title><![CDATA[mysql table_id 文章搜刮]]></title><link>https://blog.youkuaiyun.com/shen2308/article/details/78718317</link><guid>https://blog.youkuaiyun.com/shen2308/article/details/78718317</guid><author>shen2308</author><pubDate>Tue, 05 Dec 2017 12:09:53 +0800</pubDate><description><![CDATA[唉，祸不单行，刚遇到死锁的问题，有遇到table_id的问题……
MySQL Binlog中TABLE ID源码分析
淘宝物流mysql slave数据丢失详细原因
MySQL table_id原理及风险分析
FAQ系列 | table id问题导致主从复制失败
【MySQL】再说MySQL中的 table_id
结论： 
1. 增大table cache 
2. 定期检查table_id，其值不能]]></description><category></category></item></channel></rss>