Scylla：一款智能代理池开源项目

Scylla：一款智能代理池开源项目

scylla Intelligent proxy pool for Humans™ to extract content from the internet and build your own Large Language Models in this new AI era 项目地址: https://gitcode.com/gh_mirrors/sc/scylla

Scylla 是一个由 Python 和 TypeScript 编写的开源项目，旨在为用户提供一个智能代理池，帮助用户从互联网上提取内容并构建自己的大型语言模型。

1. 项目基础介绍

Scylla 是一个智能代理池，它能够自动爬取和验证代理 IP，并通过一个简单的 JSON API 提供代理服务。项目拥有一个简洁美观的基于 Web 的用户界面，用户可以通过一个命令即可开始使用。Scylla 还支持简单的 HTTP 正向代理服务器，并与 Scrapy 和 requests 库无缝集成。

主要编程语言：

• Python
• TypeScript

2. 核心功能

• **自动代理 IP 爬取与验证：**Scylla 能够自动爬取互联网上的代理 IP，并进行验证以确保其有效性。
• **易于使用的 JSON API：**项目提供了一个简单的 JSON API，用户可以通过该 API 获取代理 IP 列表。
• **基于 Web 的用户界面：**Scylla 拥有一个简洁美观的 Web 用户界面，方便用户查看和管理代理池。
• **HTTP 正向代理服务器：**Scylla 默认会在端口 8081 上启动一个 HTTP 正向代理服务器，用于转发 HTTP 请求。
• **Scrapy 和 requests 集成：**Scylla 可以与 Scrapy 和 requests 库无缝集成，用户只需一行代码即可使用代理。

3. 最近更新的功能

• **性能优化：**项目对代理池的性能进行了优化，提高了代理 IP 的获取速度和验证效率。
• **稳定性改进：**对代理池的稳定性进行了改进，减少了代理 IP 的失效率。
• **用户界面更新：**对 Web 用户界面进行了更新，提高了用户体验。
• **API 功能扩展：**扩展了 JSON API 的功能，增加了对匿名代理和 HTTPS 代理的筛选支持。

请注意，以上内容仅为项目的一般性介绍，具体功能和更新请参考项目的官方文档和仓库。

scylla Intelligent proxy pool for Humans™ to extract content from the internet and build your own Large Language Models in this new AI era 项目地址: https://gitcode.com/gh_mirrors/sc/scylla