- 博客(10)
- 资源 (1)
- 问答 (26)
- 收藏
- 关注
RSS订阅原创 presto + kafka + logstash 实时监控分析nginx日志
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结前言提示：这里可以添加本文要记录的大概内容：例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。提示：以下是本篇文章正文内容，下面案例可供参考一、pandas是什么？示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。二、使用步骤1.引入库代码
2021-04-22 07:35:06
460
原创 快速重放http请求
批量重放http请求场景： 有一些下游的http请求，由于应用程序配置失误，导致应用程序没有正确处理，现在从nginx上过滤出来这些请求，数量有百万个，怎么快速将这些重新请求一遍了？方式1： shell脚本#!/bin/bashwhile read -r ido { curl -s --connect-timeout 2 "$i" } & #执行循环丢进后台创建进程done < file.txt可以通过split 将大文件分割为小文件，分多台机器处
2021-01-28 10:16:52
1524
原创 centos7快速安装docker-ce
1.安装一些依赖yum install -y yum-utils device-mapper-persistent-data lvm22.下载repo文件:wget -O /etc/yum.repos.d/docker-ce.repo https://download.docker.com/linux/centos/docker-ce.repo3.替换为清华的源sed -i 's+d...
2019-09-18 11:07:37
213
原创 debian使用iso镜像搭建源
debian 使用iso镜像搭建源需求：有一些很旧的debian7的系统，需要安装一些软件包，可是官方已经没有他的源了，无赖之下，只能看能不能用iso镜像来制作源。镜像如下debian-7.11.0-amd64-DVD-1.iso debian-7.11.0-amd64-DVD-2.iso debian-7.11.0-amd64-DVD-3.iso debian-update-7....
2019-09-04 10:12:57
2293
原创 hive 连接mongodb
hive连接mongodb相关jar包：https://repo1.maven.org/maven2/org/mongodb/mongo-hadoop/mongo-hadoop-core/2.0.2/mongo-hadoop-core-2.0.2.jarhttps://repo1.maven.org/maven2/org/mongodb/mongo-hadoop/mongo-hadoop-h...
2019-09-03 16:00:57
518
原创 Hadoop native本地库的编译
hadoop源码编译native本地库1. 检查本地库hadoop checknative -a19/08/09 22:13:04 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable...
2019-08-09 22:53:03
683
原创 debian jessie 搭建镜像源:方法一
使用 apt-mirror 作为镜像源安装apt-mirrorapt-get install apt-mirrorvi /etc/apt/mirror.list############# config ################### 这里可以改路径# set base_path /var/spool/apt-mirrorset base_path /...
2019-04-12 21:18:04
1679
1
原创 centos7安装cdh
CDH 安装三台服务器配置如下：IPhostname配置192.168.13.121centos-13-1214C16G192.168.13.122centos-13-1224C16G192.168.13.123centos-13-1234C16G软件如下：MySQL-5.6.43-1.el7.x86_64.rpm-bundle.tar...
2019-03-29 13:10:28
223
原创 debian安装docker
docker的安装引用连接：https://docs.docker.com/engine/installation/linux/debian/#debian-jessie-80-64-bit查看内核版本uname -rdebian系统内核版本要大于3.10，否则有些功能会不适用删除以前的包,Purge any older repositories. apt-get purge ...
2019-03-22 10:49:20
1323
earlier thread wait 错误 ，有谁遇到过吗？
2021-03-25
zabbix的数据概览在grafana怎么展示？
2021-02-25
mongoexport怎么导出宽松格式的json格式文件？
2020-08-18
svn 有一个repo为 test1 ，下面有个子目录 test1/dir1/dir2/dir3 现在想把dir3独立出来成为单独的repo test2,但是想保留原来的历史提交记录，该怎么办？
2020-06-10
华为家用路由器配置文件解析？
2020-02-07
内网的dns 负载均衡 改怎么做？
2019-12-23
一个代理访问接口怎么设计？
2019-12-19
在服务器上，自己ping自己，也会有延时特别长的，这是为什么？
2019-11-13
java 应用 cpu上下文切换数突然升高，会是什么原因了？
2019-11-12
tomcat 的日志 localhost_access.log 返回字节是短横线 ？
2019-10-14
python3字节 转字符串 再转回字节，怎么不一样了？
2019-10-10
spark的rdd 可以看做数组吗？那么 可以随机取里面的数据吗？
2019-09-19
python3 写文件最后一行不能换行？
2019-09-09
python消费kafka数据，为什么前面取几次都取不到？
2019-09-05
cdh的hadoop版本2.6.0-5.4.5 怎么升级到 2.6.0-5.13.0 ?
2019-09-05
hive默认的分割大小究竟是多少？128M 还是256M ？
2019-08-20
hive 里面不能split lzo的文件，这是怎么回事？
2019-08-15
hadoop为什么不支持 zip压缩？
2019-08-12
hadoop里面gz大文件切割为小文件？
2019-08-12
hive表合并文件与预期不一致？没有分割为128M的文件
2019-08-06
java 程序 young gc 次数频繁，怎么调试
2019-07-18
dns 解析到多IP，怎么返回最低延迟IP？
2019-06-21
CPU 的上下文切换数 突然异常升高，又突然下降 ，怎么调试异常？
2019-06-19
python 模块导入的问题
2019-05-10
强行安装deb包，忽略掉依赖，怎么做？
2019-04-01
TA创建的收藏夹 TA关注的收藏夹
TA关注的人