ScrapeGraphAI MCP

ScrapeGraphAI MCP 是一个生产级 Model Context Protocol 服务器，将 ScrapeGraph AI 的智能网页抓取能力无缝集成到 AI 工作流中。

核心功能

• AI 驱动抓取：利用 LLM 智能理解页面结构，自动提取所需数据
• 结构化输出：支持 JSON、Markdown、CSV 等多种输出格式
• 动态页面支持：处理 JavaScript 渲染的单页应用（SPA）
• 多种抓取策略：支持智能爬取（SmartScraper）、搜索爬取（SearchScraper）等
• API v2 支持：最新版本已迁移到 ScrapeGraph API v2，性能和稳定性大幅提升
• Google ADK 集成：原生支持 Google Agent Development Kit

适用场景

• 竞品价格监控和市场情报收集
• 新闻文章和博客内容聚合
• 电商产品信息和评论采集
• 招聘信息和简历数据提取
• 学术论文和研究数据收集
• 社交媒体舆情监控

安装配置

本地 stdio 模式安装：

pip install scrapegraph-mcp

或通过 Smithery 远程使用。需要配置 ScrapeGraphAI API Key。

使用示例

配置 MCP 后，AI 代理可以直接调用抓取工具：

帮我抓取 https://example.com/products 页面上所有产品的名称、价格和评分

开源地址：https://github.com/ScrapeGraphAI/scrapegraph-mcp（MIT 协议）