十一姐的博客

目录一、akamai2.0文章二、akamai3.0每月疑似改版点二、9个视频汇总如下一、akamai2.0文章文章1cookie反爬之akamai_2.0-上文章2cookie反爬之akamai_2.0-上文章3cookie反爬之akamai_2.0-上文章中akamai2.0对应调试html与js文件二、akamai3.0每月疑似改版点详细文字与2.0算法函数几乎一致，不再写重复文章点击文章查看3.0疑似改版点视频中akamai3.0对应调试html与js文件二、9个视频汇总

Scrapy请求失败但requests请求成功的小经验fiddler抓包对比

【代码】linux/centos安装最新版本chrome解决 libc.so.6(GLIBC_2.25)(64bit) /You could try using --skip-broken to work a。

【代码】ReferenceError: require is not defined in ES module scope, you can use import instead。

【代码】Warning: To load an ES module, set “type“: “module“ in the package.json or use the .mjs extension.

【代码】ModuleNotFoundError: No module named 'torchvision.models.utils'

就是我们自己写python消费kafka代码的时候没有参数配置没有限制。问题原因一：是kafka本身的配置没有调整到上限。

最新python环境安装ddddocr调用报错解决

curl命令的使用

谷歌浏览器响应Failed to load response data的另类解决方案

浏览器js文件的展开和收起设置

pycharm高亮显示修改

pycharm突然无法配置python项目解释器，idea文件夹删掉

使用docker-compose的方式搭建代理池子接口

b站视频播放三倍速

一个问题的收集窗口，会持续修改更新这篇文章

我们用pm2 delete模拟了进程挂断的场景，比如express_api进程没有了，然后恢复下，直接敲。我们平常运行js可能就node aaa.js就结束了，其实用pm2管理更好，，也可以启动管理python文件。批量删除/停掉/重启。

这个介绍了下如何在服务器上部署爬虫，已经把js服务部署成服务接口的操作方式，以及如何开自己的服务器

pycharm新建文件自动生成脚本模板

爬虫逆向过程中，替换修改网站js文件来过掉无限Debugger，或者想hook某个cookie添加hook的js文件替换； 或者想把某个混淆的js文件替换成还原后的js文件都可以

工具-自动获取/校对XpathHelper/XpathHelperPlus/XPathHelperWizard插件轻松配置xpath规则，数据采集辅助路上的好助手

Kubernetes集群分为一个master主节点和worker工作节点。可直接通过官网已经搭建好的测试，不用进行下面的安装。，打开PowerShell执行如下命令。

xpath helper插件可自动根据鼠标点击区域获取xpath，也能实时核对返回的xpath结果

docker2、删除镜像：，删除镜像的前提是没有使用这个镜像的容器，

实现1分钟自动切换。

1、Redis-x64-5.0.14.1.zip 下载， 6 台 redis 服务器，搭建伪集群，并运行在不同的端口 6380-6385

目录一、kafka基础概念了解二、下载安装Kafka三、KafkaTool可视化工具四、python操作kafka1、生产者代码2、消费者代码一、kafka基础概念了解Kafka是一种高吞吐量、持久性、分布式的发布订阅的消息队列系统kafka文档为什么应该学习 KafkaKafka 里面的信息是如何被消费的？使用生成器把Kafka写入速度提高1000倍Kafka名词概念producer：消息生产者，向 Kafka Broker 发消息的客户端broker: 一台 Kafka 机器就是一个

目录一、Elasticsearch1、概念名词了解2、Elasticsearch安装3、ik分词插件安装4、kibana可视化安装5、Windows配置ElasticSearch服务二、python操作Elasticsearch1、创建索引2、删除索引3、新增数据4、更新数据5、删除数据6、查询数据一、Elasticsearch1、概念名词了解非常强大的搜索引擎，便于存储和检索，可以快速存储、搜索和分析海量数据，维基百科/Stack Overflow/GitHub都采用其实现一个分布式的实时文档存

一、打码平台-超级鹰使用流程首先注册用户 ，然后登录到用户中心，生成一个软件ID根据自己的代码，下载接口调用代码demo，这里是python对于普通的字符验证码，我们可以用ddddocr/muggle_ocr识别即可对于点选验证码，先到这里根据实际情况确定验证码类型，一般点选我们选择如图中的最终代码调用结构大概如下， post_pic用于传验证码字节流，和验证码类型，然后获得识别结果；resport_error传图片id上报错误的图片识别，不扣分二、点选验证码注意事项需要在底部

目录一、datetime生成GMT时间格式二、python将时间戳与日期格式化互相转换三、python生成一定范围的日期集合四、python生成一定今天/昨天/明天的日期五、python将excel的日期数字42380格式化六、python比较两个日期大小一、datetime生成GMT时间格式案例： js当中生成的格式如下new Date()+Math.random(1000)即'Sat Apr 30 2022 15:03:40 GMT+0800 (中国标准时间)0.2551832336696775

execjs/nodevm2/Minracer/node

目录一、js混淆了解1、为什么要混淆？2、常见的混淆模样二、AST初步认识三、解混淆常用的方法一、js混淆了解1、为什么要混淆？js混淆的作用：为了防止爬虫通过分析js内容，轻易的还原出网站的加密逻辑，而做出的安全防御手段之一，常常将一个逻辑简单的可能十几行算法代码思路，通过变量混淆替换、增加冗余无效代码、增加无限debugger反调试功能、增加多层的套娃式if~else代码、以及埋陷阱等混淆成几千行的js代码，给人第一印象难读，对入门分析者造成恐惧心理如图，我们常见的ob混淆就是这个原理，左侧也

yolov5是主要的作用：给定一个已经标好的数据集》跑yolov5代码得到一个目标检测模型》选择一个图片或者视频等再给yolov5代码，yolov5代码就能自动识别区分出目标体

目录一、pytorch环境安装(windows)二、训练步骤一、pytorch环境安装(windows)1、下载Anaconda：Anaconda3-2021.11-Windows-x86.exe ，然后安装设置安装路径"D:\Programmer\Anaconda3"，然后手动添加环境变量2、查看自己电脑上显卡信息：打开cmd窗口输入nvidia-smi显示GPU当前的状态，可以看到本机cuda版本是11.2 ， 查看cuda与显卡驱动的映射表3、复制安装pytorch的命令：

目录一、Airtest介绍与安装二、Airtest基于图像识别自动控制手机App流程三、Airtest基于Poco的UI组件自动化控制App流程一、Airtest介绍与安装主要介绍区别可以看这篇文章，和selenium、appium都是用来自动化测试的不管是appium、airtest，都有录制功能然后自动化生成代码，所以我们可以通过先录制的操作生成代码，然后改代码就可以学会一些常用的功能操作了它的明显特征是基于图像识别来自动控制手机App流程它也可以是基于Poco的UI组件自动化控制App流程

目录一、ddddocr介绍二、识别效果三、代码一、ddddocr介绍ddddocr 新的目标检测识别 1.3功能安装 pip install ddddocrstar哲哥免费开源的识别项目https://github.com/sml2h3/ddddocr二、识别效果三、代码图片demo代码 ，更多详细介绍看ddddocr 新的目标检测识别 1.3功能"""@author：十一姐@desc: ddddocr目标识别@time: 2022/01/09"""from i

一、Go环境安装及简单了解windows点击下载go，以及环境变量设置，然后cmd输入go如下图显示则代表安装成功编辑hello.go文件， vscode直接运行即可输出package mainimport "fmt"func main() { fmt.Println("Hello, World!")}二、vscode运行go代码乱码解决方案：点击Run>Add Configuration>settings.json，在该文件下添加如下两行代码，然后保存

一、ja3指纹介绍1、指纹：通过一些算法将一些特征加密得到的值，这些值往往能够区分你是谁。每个客户端会生成特定的ja3指纹，并不会随ip和useragent改变，通过ja3指纹可以定位识别到某个客户端（不限于浏览器、python等）2、chrome浏览器查看ja3指纹：https://ja3er.com/json，或者https://ja3er.com/3、python的requests包查看ja3指纹import requestsheaders = {"User-Agent": "

# encoding: utf-8import zipfileimport xmltodictimport requestsimport osimport shutildef unzip_file(zip_path, unzip_path=None): """ :param zip_path: ofd格式文件路径 :param unzip_path: 解压后的文件存放目录 :return: unzip_path """ if not unzi

如图案例：python请求post之multipart/form-data请求解决方法如下：导包：from collections import OrderedDict，from urllib3 import encode_multipart_formdata注意：headers的Content-Type里面的参数boundary一致性from collections import OrderedDictfrom urllib3 import encode_multipart_formdat