asihacker-优快云博客

原创【celery 内存泄漏问题的排查-＞task_time_limit】

项目场景：提示：通过celery执行大量爬虫任务。问题描述提示：celery 的 worker每运行半小时就会重启，python3.8.7 celery5.2.3 redis作为中间人 @celery_app.task(soft_time_limit=60) # time_limit 设置硬超时时间 def crawler_run(spider: str, url: str, **kwargs): """ 运行蜘蛛程序 :param spider: 蜘蛛名称 :pa

2022-03-16 20:09:35 2415

原创记录一次曲折的运维经历

记录一次sonarqube的运维经历 @[TOC](文章目录) 前言 sonarqube是基于本地服务和mvn命令进行的代码分析，并将分析结果推送到sonar服务器中，并且可以集成到jenkins。记录一次运维的经历提示：以下是本篇文章正文内容，下面案例可供参考一、经历概述公司有一套jenkins集成了sonarqube，是之前一位大佬搭建的，一直稳定运行，但是今天却出了问题。走了很多弯路，记录一下。日常加班，准备回家躺尸，结果前端大佬突然发了个消息，我就知道，坑要来了~~~ 好吧，得

2020-11-06 23:50:33 660 1

原创 linux 冒号的作用

linux 冒号的作用文章目录linux 冒号的作用1.清空文件2.占位符总结 1.清空文件我们新建一个文件然后:>test.txt 再查看一下 nice! 2.占位符相当于python里面的pass if [ "today" == "2011-08-29" ]; then : else : fi 总结求一键3连～～～ ...

2020-11-06 16:51:03 969

原创 linux export的作用域

liunx export的作用域最近好友提问export作用域相关的问题～被问到了，写篇文章记录一下。文章目录liunx export的作用域前言一、问题详情二、分析原因1.百度定义2.如何实现3.linux的相关目录介绍总结前言 Linux export 命令用于设置或显示环境变量。提示：以下是本篇文章正文内容，下面案例可供参考一、问题详情现在是可以echo的现在写一个脚本测试 wq 保存为 test.sh 直接运行脚本是ok的可以输出～～～现在我再直接echo $a 不

2020-11-04 20:03:54 4776 7

原创 python常用库click(2个def快速上手）

python常用库click(超快上手）文章目录python常用库click(超快上手）前言一、Click是什么？二、使用步骤1.基本使用2.命令组使用总结前言 Click 库简洁好用，可以使用python编写自己的运维脚本，非常方便，我整理了常用，请看下文一、Click是什么？ Click 是 Flask 的团队 pallets 开发的优秀开源项目，它为命令行工具的开发封装了大量方法，使开发者只需要专注于功能实现。二、使用步骤 1.基本使用代码如下（示例）： import clic

2020-11-04 19:37:13 2647

原创 centos harbor 安装与踩坑

centos harbor 安装与踩坑 centos7 harbor 安装流程以及遇到的坑文章目录centos harbor 安装与踩坑前言1.环境准备2.下载离线包4.可能遇到的坑总结前言 harbor为企业级的docker镜像仓库，可结合kubernetes作为其后端仓库。harbor镜像仓库为VMware产品，harbor仓库较其他仓库软件的优点有：审计管控、权限分配等。为企业私库的首选。提示：以下是本篇文章正文内容，下面案例可供参考 1.环境准备本次演示环境，我是在虚拟机Linux

2020-11-03 22:09:51 1104

原创 python常用库-datetime

python常用库-datetime 第一章时间库 datetime 文章目录python常用库-datetime前言一、基本用法2.介绍一些网络获取时间的接口3.国外时间的格式化总结前言 datetime库的基本用法，时间相互转化。提示：以下是本篇文章正文内容，下面案例可供参考一、基本用法代码如下（示例）： import datetime, time d_time = datetime.datetime.now() print('获取本地时间', d_time, type(d_ti

2020-11-03 12:15:57 418

原创 python常用库-time

python常用库-time 第一章时间库 time 文章目录python常用库-time前言一、time基本使用二、使用步骤1.引入库总结前言提示：time时间库的基本用法。提示：以下是本篇文章正文内容，下面案例可供参考一、time基本使用 time 模块提供各种时间相关的功能。二、使用步骤 1.引入库代码如下（示例）： import time # 将当前时间转换为时间字符串 print(time.asctime()) # 将指定时间转换时间字符串，时间元组的后面3个元素没有设

2020-11-03 10:13:02 362

weixin_42887206的博客