f95_sljz-优快云博客

原创使用Selenium和Firefox无界面模式后台爬取新浪新闻“疫情”实时数据以及制作docker镜像

为了实时获取新浪新闻网页的实时数据，采用selenium爬虫方法；为了在没有图形界面系统而无法弹窗如服务器上运行，可以使用firefox或chrome的headless模式，而PhantomJS已经不被selenium支持了。直接上代码：#!/usr/bin/env pythonimport timefrom selenium import web-driverfrom selenium.webdriver.firefox.options import Optionsoptions = O

2020-08-10 12:47:23 875

原创 ubuntu docker镜像python字符集ANSI_X3.4-1968导致的中文编码问题及解决方法

在ubuntu 18.04镜像容器中执行python程序报错：ascii' codec can't encode characters in position 20-25: ordinal not in range(128)查看python默认输出编码：root@c02d090c172d:/# python3 Python 3.5.2 (defa...

2020-04-24 17:33:04 3084 1

原创 keepalived重启，tun模式lvs的新realserver活动连接数为0问题与解决办法

系统运行了一段时间后，因为要添加新的nginx，所以需要重启keepalived，但是tun模式的lvs的新nginx的活动连接数为0。这里keepalived配置文件已添加新的nginx节点配置1、重启keepalived，service keepalived restart，使配置生效2、在vip所在主机查看lvs连接数，ipvsadm -Ln，发现新nginx节点没有连接在vip主...

2020-04-17 14:01:06 691

原创关于搭建k8s集群遇到的问题与解决方法

安装过程参考：https://www.kubernetes.org.cn/6634.html一、初始化报错[ERROR ImagePull]: failed to pull image k8s.gcr.io/kube-controller-manager:v1.16.4[root@centos-7-120 ~]# kubeadm init --config=kubeadm-config.y...

2020-04-15 21:15:21 26598 2

原创 sonarqube权限管理之自动匹配项目

使用sonar扫描新项目后，如果要做角色管理，可以在sonarqube控制台为项目指定权限模板以分配角色权限，但是每次扫描新项目都通过手动添加，特别是项目多的情况下，显然是不方便的。sonarqube在创建新权限模板的时候，提供了Project Key Pattern（项目标识模式）功能，可以通过其正则表达式将权限模板自动授予到project_key符合的项目。1、选择“配置-权限-权限模板”创...

2020-01-17 18:38:02 2349 2

原创关于CentOS7搭建ELK集群遇到的问题及解决办法

采用虚拟机安装的CentOS7系统搭建ELK集群过程中遇到几个问题记录如下，对阿里云等虚拟环境或有参考作用。

2020-01-16 17:13:53 2168

原创 mysql主从同步Slave_IO_Running:NO/Connecting问题

第一次做mysql主从同步的时候，在从库上查看同步状态：mysql> show slave status\G*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event ...

2019-12-25 18:02:46 616

原创关于gorm多表联合查询（left join）的小记

Golang很流行，但是有些方面资料很少而且不详实，譬如：gorm的联合查询，当然，也不推荐复杂语句使用orm模型。现将自己总结的写法和遇到的坑记录如下：Golang要求使用“驼峰命名法”，比如systemId，因为我以前用的是Python，使用Django的orm序列化后返回的参数和数据库表字段一致，基于这个不适合Go的思路，我将表字段也建成了systemId，和struct映射参数相同。（...

2019-12-24 17:58:26 38145 3