<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[李轮清的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/LLQ_200</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; LLQ_200]]></copyright><item><title><![CDATA[kafka topic调优]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102796859</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102796859</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:49:21 +0800</pubDate><description><![CDATA[kafka 在线修改topic分区的副本数

1、先准备一个json文件

partitions-topic.json




{


    "version":1,


    "partitions": [{


        "topic": "ad-bd_poi-cache",


        "partition": 0,


        "replicas": [0, 2...]]></description><category></category></item><item><title><![CDATA[自动巡检kafka进程号并自启]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102796503</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102796503</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:31:36 +0800</pubDate><description><![CDATA[前阶段应公司要求在收缩公司资源成本，导致有些机器性能比较饱和有几台kafka挂掉了。这若是没告警。对公司的损失可是不少。后面为了提前预防类似的事情发送，自己写了很简单的shell脚本来定时巡检。底下是代码，仅供参考！

#!/bin/sh
#`ps -ef | grep $proc_name | grep -v grep | awk '{print $2}'`
source /etc/...]]></description><category></category></item><item><title><![CDATA[自动巡检spark-job进程号]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102796428</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102796428</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:27:23 +0800</pubDate><description><![CDATA[前阶段应公司要求在收缩公司资源成本，导致有些机器性能比较饱和有几台spark的job节点挂掉了。这若是没告警。对公司的损失可是不少。后面为了提前预防类似的事情发送，自己写了很简单的shell脚本来定时巡检。底下是代码，仅供参考！

#!/bin/bash 
file_log=/data/lzmhtest/crontab/spark/spark.log ----存放定时打印的日志
ma...]]></description><category></category></item><item><title><![CDATA[mongodb  如何删索引]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102796041</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102796041</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:13:28 +0800</pubDate><description><![CDATA[举个例子：

db.集合名称.dropIndex("ins_t_1")

以下是参数说明：

dropIndex 删除

ins_t_1 索引名称


]]></description><category></category></item><item><title><![CDATA[Linux查看CPU、内存、进程使用情况（转）]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102795998</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102795998</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:11:35 +0800</pubDate><description><![CDATA[在系统维护的过程中，随时可能有需要查看 CPU 使用率，并根据相应信息分析系统状况的需要。在 CentOS 中，可以通过 top 命令来查看 CPU 使用状况。运行 top 命令后，CPU 使用状态会以全屏的方式显示，并且会处在对话的模式 -- 用基于 top 的命令，可以控制显示方式等等。退出 top 的命令为 q （在 top 运行中敲 q 键一次）。

top命令是Linux下常用的性能分析...]]></description><category></category></item><item><title><![CDATA[关于服务器性能的一些思考]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102795904</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102795904</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:09:38 +0800</pubDate><description><![CDATA[一、服务器性能

平常的工作中，在衡量服务器的性能时，经常会涉及到几个指标，load、cpu、mem、qps、rt，其中load、cpu、mem来衡量机器性能，qps、rt来衡量应用性能。

一般情况下对于机器性能，load、cpu、mem是越低越好，如果有一个超过了既定指标都代表着可能出现了问题，就需要尽快解决（当然有可能是应用的问题也有可能是机器上其他程序引起的），反正就是如果不解决，时间长了...]]></description><category></category></item><item><title><![CDATA[云数据盘扩容]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102795669</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102795669</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:05:48 +0800</pubDate><description><![CDATA[磁盘类型：云硬盘

对于云硬盘（UDisk）的磁盘扩容，请先在主机内部完成卸载操作。

mount -l      //查看当前卷，假设/dev/vdb为云盘

umount /dev/vdb

fsck.ext4 /dev/vdb

然后在控制台选中磁盘，执行卸载操作：





在云硬盘控制面板完成扩容，并重新挂载，在主机内执行下述Step 2步骤的操作：

Step2 命令行操...]]></description><category></category></item><item><title><![CDATA[查看mongodb慢查询（root账号登入）]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102795592</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102795592</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 11:00:39 +0800</pubDate><description><![CDATA[查看慢查询（root账号登入）

db.currentOp(

{

"active":true,

"secs_running":{"$gt":3},

"ns":/^lzmh_wlw_2\./

}

)

注：lzmh_wlw_2 是mongodb要查的账号

杀掉慢查询

db.killOp(opid)


...]]></description><category></category></item><item><title><![CDATA[Spark配置参数调优]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/102795420</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/102795420</guid><author>LLQ_200</author><pubDate>Tue, 29 Oct 2019 10:58:26 +0800</pubDate><description><![CDATA[CPU各核负载量很不均匀，内存也没有用满，系统的资源没有得到充分利用，该如何利用？

(1)Spark的RDD的partition个数创建task的个数是对应的;

(2)Partition的个数在hadoop的RDD中由block的个数决定的。



内存：系统总内存数 = work内存大小 * work数 = SPARK_WORKER_MEMORY * SPARK_WORKER_INSTAN...]]></description><category></category></item><item><title><![CDATA[vim解决中文乱码]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/98759464</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/98759464</guid><author>LLQ_200</author><pubDate>Wed, 07 Aug 2019 16:38:00 +0800</pubDate><description><![CDATA[修改vim配置文件/etc/vimrc，在最后增加如下配置：

set fileencodings=utf-8,ucs-bom,gb18030,gbk,gb2312,cp936

set termencoding=utf-8

set encoding=utf-8


]]></description><category></category></item><item><title><![CDATA[linux上检测系统安全，是否被入侵？]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/98759367</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/98759367</guid><author>LLQ_200</author><pubDate>Wed, 07 Aug 2019 16:37:31 +0800</pubDate><description><![CDATA[wget https://gitee.com/zzhlinux911218/software/raw/master/linux-inspect.sh --no-check-certificate;bash linux-inspect.sh

安装检测工具中--------------

……………………

正在检测系统…………

Searching for Linux.Xor.DDoS ... I...]]></description><category></category></item><item><title><![CDATA[InnoDB，5项最佳实践，知其所以然？]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/81771898</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/81771898</guid><author>LLQ_200</author><pubDate>Fri, 17 Aug 2018 09:01:27 +0800</pubDate><description><![CDATA[第一篇，说说MySQL两个最常用的存储引擎，MyISAM和InnoDB。照自己的理解，把一些知识点总结出来，不只说知识点，多讲“为什么”。一、关于count(*)知识点：MyISAM会直接存储总行数，InnoDB则不会，需要按行扫描。

 

潜台词是，对于select count(*) from t; 如果数据量大，MyISAM会瞬间返回，而InnoDB则会一行行扫描。

 

实践：数据量大的...]]></description><category></category></item><item><title><![CDATA[连接mysql数据库，时不时出现这个问题，都是update和insert报错!]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/81671409</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/81671409</guid><author>LLQ_200</author><pubDate>Tue, 14 Aug 2018 17:43:21 +0800</pubDate><description><![CDATA[

 

解决方法：必须手工重启服务器才能解决！ 

reboot now]]></description><category></category></item><item><title><![CDATA[traceroute命令讲解]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/81034345</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/81034345</guid><author>LLQ_200</author><pubDate>Fri, 13 Jul 2018 17:04:26 +0800</pubDate><description><![CDATA[   通过traceroute我们可以知道信息从你的计算机到互联网另一端的主机是走的什么路径。当然每次数据包由某一同样的出发点（source）到达某一同样的目的地(destination)走的路径可能会不一样，但基本上来说大部分时候所走的路由是相同的。linux系统中，我们称之为traceroute,在MS Windows中为tracert。 traceroute通过发送小的数据包到目的设备直到其...]]></description><category></category></item><item><title><![CDATA[在linux下用echo命令来清理日志，清理完毕之后不需要重启]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80859130</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80859130</guid><author>LLQ_200</author><pubDate>Fri, 29 Jun 2018 17:01:39 +0800</pubDate><description><![CDATA[1.到catalina.out 当前目前下   执行   echo &quot;&quot; &amp;gt; catalina.out2. 也可以用这种办法     echo &quot;&quot; &amp;gt; /usr/local/catalina.out]]></description><category></category></item><item><title><![CDATA[(Packet for query is too large (4739923 &gt; 1048576)(mysql)解决]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80737528</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80737528</guid><author>LLQ_200</author><pubDate>Tue, 19 Jun 2018 18:27:34 +0800</pubDate><description><![CDATA[今天运行项目时遇到Cannot create PoolableConnectionFactory (Packet for query is too large (4739923 &amp;gt; 1048576)我的操作是：1.先在数据库中执行查询（查询是为了查看修改配置文件后这个数值有没有变化）SHOW VARIABLES LIKE '%max_allowed_packet%'12.修改了配置文件【my...]]></description><category></category></item><item><title><![CDATA[MySQL数据的binlog处理方法 日志定时清理]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80583113</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80583113</guid><author>LLQ_200</author><pubDate>Tue, 05 Jun 2018 16:21:34 +0800</pubDate><description><![CDATA[最近磁盘增长的非常快，发现binlog日志占用很大的磁盘资源。我们采用手动清理，后面设置一下自动清理。查看指定删除日志mysql &amp;gt;show binary logs; 查看多少binlog日志，占用多少空间。mysql&amp;gt; PURGE MASTER LOGS TO 'mysql-bin.002467'; 删除mysql-bin.002467以前所有binlog，这样删除可以保证*.ind...]]></description><category></category></item><item><title><![CDATA[MySQL 利用binlog增量备份+还原实例]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80583044</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80583044</guid><author>LLQ_200</author><pubDate>Tue, 05 Jun 2018 16:18:01 +0800</pubDate><description><![CDATA[查看当前日志文件列表：show binary logs; 使用binlog日志的目的是为了方便恢复数据，所以我们不光要会删除，还要会用日志来恢复数据。使用binlog恢复数据：使用mysqlbinlog命令恢复日志mysqlbinlog -d test /root/mysql/mysql-bin.000001|mysql -uroot -ppassword    ※附录    #1、关于mysql...]]></description><category></category></item><item><title><![CDATA[expire_logs_day binlog自动过期清理binlog]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80582600</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80582600</guid><author>LLQ_200</author><pubDate>Tue, 05 Jun 2018 15:54:37 +0800</pubDate><description><![CDATA[expire_logs_day 设置binlog老化日期触发时机是binlog发生切换：binlog大小超过max_binlog_size手动执行flush logs重新启动时(mysql将会new一个新文件用于记录binlog)该参数可以在线修改123456789mysql&amp;gt; show variables like '%expire%';+------------------+------...]]></description><category></category></item><item><title><![CDATA[mysql 正确清理binlog日志的两种方法]]></title><link>https://blog.youkuaiyun.com/LLQ_200/article/details/80579128</link><guid>https://blog.youkuaiyun.com/LLQ_200/article/details/80579128</guid><author>LLQ_200</author><pubDate>Tue, 05 Jun 2018 11:40:14 +0800</pubDate><description><![CDATA[mysq 正确清理binlog日志前言：MySQL中的binlog日志记录了数据库中数据的变动，便于对数据的基于时间点和基于位置的恢复，但是binlog也会日渐增大，占用很大的磁盘空间，因此，要对binlog使用正确安全的方法清理掉一部分没用的日志。【方法一】手动清理binlog清理前的准备：① 查看主库和从库正在使用的binlog是哪个文件?12show master status\G show...]]></description><category></category></item></channel></rss>