Scrapling

它的功能

一个自适应的网页抓取框架，可以处理从单个请求到全面爬取的所有内容。智能反检测、自动重试和MCP服务器支持AI驱动的抓取工作流程。

如何设置

• 安装: pip install scrapling
• 基本用法: from scrapling import Fetcher; page = Fetcher().get('https://example.com')
• 对于MCP: 将Scrapling MCP服务器添加到您的AI客户端配置中
• 使用CSS选择器或AI驱动的元素查找

主要特性

• 自适应反检测系统
• AI驱动的元素选择
• MCP服务器集成
• 自动重试和速率限制
• 完全浏览器渲染支持