Web Runner 2049:第三方反机器人服务评估
在当今数字化的时代,恶意机器人对网站的安全和内容构成了严重威胁。本文将深入探讨第三方反机器人服务的性能和效果,通过大规模的实验和分析,揭示这些服务在检测和阻止恶意机器人方面的能力。
1. 内容抓取测试结果
在内容抓取测试中,我们评估了不同反机器人服务对各种类型机器人的阻挡能力。测试包括基本机器人、自动化浏览器、不太流行的指纹识别工具等。以下是部分服务的测试结果:
| 反机器人服务 | 基本机器人 | 自动化浏览器 | 不太流行的指纹识别工具 | 去除IP敏感性 |
| — | — | — | — | — |
| Service #2 (G) | | | | 无 |
| Service #3 (G) | | | | 高 |
| Service #4 (G) | | | | 无 |
| Service #5 | | | | 无 |
| Service #6 | | | | 无 |
| Service #7 | | | | 低 |
注: 表示阻挡; 表示部分自动化工具可绕过; 表示未能阻挡。
从这些结果可以看出,不同服务对不同类型机器人的阻挡能力存在显著差异。例如,Service #2对所有测试的机器人类型都能有效阻挡,而Service #4在基本机器人和自动化浏览器的阻挡上表现不佳。
此外,一些不太流行的指纹识别工具,如Applescript - Safari和Android上的Chrome,能够绕过大多数反机器人服务的限制。只有Service #5的部分客户端能够阻挡这些工具,但也是在300 - 600次尝试