- 博客(5)
- 收藏
- 关注
原创 爬虫:自动搜索爬取平台搜索数据,anti_content怎么破
声明:本文仅用于技术交流。 很多网站对爬虫封杀的很厉害,比如说天猫比如说拼多多,去抓取拼多多的时候,拼多多的前端anti_content参数我相信很多人都绕不过去,anti_content并且这个参数代码更改频繁,没有一定的功力很难破解。 本文介绍利用pyautogui模拟人操作去处理这种限制,无需再去处理anti_content这些参数。通过找到坐标点,然后模拟复制粘贴滚动点击等动作达到我们的目的。这些pyautogui都帮我们封装好了,我们要做的就是把整个流程代码化而已。相当的方便。 ...
2022-01-13 21:49:57
900
原创 laravel-excel使用3(老猫包子店的故事)
突然有一天,我的包子铺的员工对我有所不满,于是动手把我的excel表格的一些金额改成了负数,日期也被动了手脚,那肯定不行啊,当务之急就是找出这些负数的金额和这些奇怪的日期,我们姑且称之为坏账吧。 于是我在我的AccountImport中加入了两条验证规则,由于老猫的英语不太好,于是不得不加入些中文提示来告诉我。这时我是这样做的。 <?php namespace App\Imports; use App\Models\Account; use Illuminate\Validat
2021-12-18 19:43:07
459
原创 laravel-excel使用2(老猫包子店的故事)
先看下导入的操作,一个很简单的需求,假设老猫开了一家包子铺,每天的收入流水是这样的。 我想把这些数据导入到我的MySQL数据表中去,怎么操作?首先肯定是要建一张表: CREATE TABLE `account` ( `id` int(11) NOT NULL AUTO_INCREMENT, `date` varchar(255) NOT NULL COMMENT '日期', `money` DECIMAL(11,2) NOT NULL COMMENT '收款', `created.
2021-12-18 19:37:19
482
原创 laravel-excel使用(老猫包子店的故事)
在日常工作中,使用excel的频率还是很高的,所以免不了使用laravel-excel来处理,laravel-excel其实使用的还是phpexcel,只是做了很多封装,更加方便我们调用而已。 先来看一个有趣的现象:我这里有一份excel数据文件test.xlsx,如图所示: 我们现在将这个文件改成zip格式,然后打开看看,里面究竟有些什么? 打开xl 可以看到 原来所有的数据都是xml。这几个文件之间的关系,我看到很多人解析过,有兴趣的可以.
2021-12-18 18:40:19
1821
原创 php超大数组插入数据库处理
php大数组数据通常直接批量插入数据库可能导致的问题是: 情况1.php内存限制。常见的提示是这种 Fatal Error: Allowed memory size of xxxxxx bytes exhausted 通常设置 ini_set('memory_limit',-1); 即可解决这种问题。 情况2.一次性插入的sql语句过长,可能导致失败。 2.1 prepared statement contains too many place...
2021-12-05 12:00:27
1200
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人