Puppeteer 反爬设置及XSS在线站点推荐

don6105

已于 2024-09-27 11:56:50 修改

阅读量2k

点赞数

分类专栏： Puppeteer 文章标签： puppeteer 反爬爬虫自动化 nodejs xss

于 2020-07-28 11:26:06 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_42557486/article/details/107631294

版权

Puppeteer 专栏收录该内容

1 篇文章

订阅专栏

本文详细探讨了如何利用Puppeteer库在Web爬虫中实施反爬策略，通过模拟用户行为、设置头部信息和延迟操作等方式增强爬虫的隐蔽性和效率。适合对Node.js自动化和网页抓取感兴趣的读者深入学习。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在线XSS网站推荐点击进入

const puppeteer  = require('puppeteer');
const devices        = require('puppeteer/DeviceDescriptors');
const ipad              = devices['iPad Pro landscape'];

async function anti_detection(page) {
    await page.emulate(iphone);
	await page.setUserAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.157 Safari/537.36");
	await page.evaluateOnNewDocument(() => {
		delete navigator.__proto__.webdriver;
		Object.defineProperty(navigator, 'plugins', { get: () => [1, 2, 3, 4, 5] });
		Object.defineProperty(navigator, 'languages', { get: () => ['en-US', 'en'] });
		Object.defineProperty(navigator, 'platform', {
		   get: () => "Linux armxxxxx",
		   configurable: true
		});
		window.chrome = {
			app: {},
			runtime: {},
			getUserMedia: {}
		};
	});
	await page.setViewport({
		width: 1366,
		height: 1024,
		deviceScaleFactor: 1
	});
}


另外，headless = false 开启 GUI 图形界面伪装会更成功

xss站點推薦