AI Awesome
主页
发现最出色的 AI 工具
为您寻找解决任何合适 AI 方案的终极导航目录。
Search
人工智能网页抓取
(17)
S
unknown
scraperapi/scraperapi-mcp
用于 ScraperAPI 网络爬取的 MCP 服务器,支持 JavaScript 渲染、地理位置定向、高级代理和自动解析功能。
人工智能网页抓取
JavaScript 渲染
地理位置定向
高级代理
+1
M
open source
markmircea/Selenix-MCP-Server
MCP服务器通过自然语言将Claude桌面与Selenix桥接,用于浏览器自动化和测试。
人工智能网页抓取
创建、运行、调试和管理浏览器测试
浏览器自动化的自然语言界面
U
open source
urldna/mcp
MCP是一个用于自动化URL扫描和法医钓鱼分级的开源服务器
人工智能网页抓取
捕获完整的DOM快照
记录网络请求
获取可视化截图
+1
O
open source
ofershap/mcp-server-scraper
一个网络抓取工具,用于从任何URL中提取干净的Markdown、链接和元数据。
人工智能网页抓取
提取Markdown
提取链接
提取元数据
M
paid
MarcinDudekDev/the-data-collector
一个用于抓取 Hacker News、Bluesky 和 Substack 的 MCP 服务器,支持 x402 微支付。
人工智能网页抓取
hn_search
bluesky_search
substack_search
+1
A
free
aparajithn/agent-scraper-mcp
使用多种工具抓取 AI 代理的 MCP 服务器。
人工智能网页抓取
清理内容提取
使用 CSS 选择器的结构化抓取
使用 Playwright 进行全页面截图
+3
S
open source
Steel Browser
Steel Browser是一个为AI代理提供开源浏览器基础设施,具有会话支持的自动化、提取、截图/PDF、AI原生CLI和可重用技能的功能
人工智能网页抓取
会话支持的自动化
提取功能
截图和PDF生成
+2
B
open source
BrowserGym
BrowserGym是一个用于评估使用浏览器的网络代理的健身房式基准和环境工具包。
人工智能网页抓取
为网络代理的健身房式基准测试
浏览器评估的环境工具包
B
open source
browser-use
使 AI 代理能够通过结构化和可重复的浏览器界面控制网站
人工智能网页抓取
结构化浏览器界面
可重复的浏览器控制
AI 代理兼容性
A
unknown
apify/agent-skills
官方 Apify 技能用于网页抓取、数据提取和自动化。
人工智能网页抓取
网页抓取
数据提取
自动化
W
open source
webpeel/webpeel
适用于 AI 代理的智能网络抓取器,支持从 HTTP 自动升级到无头浏览器再到隐蔽模式。
人工智能网页抓取
抓取、搜索、爬取、映射、提取、批量处理、截图、任务和代理工具
在 30 个 URL 的基准测试中 100% 成功率
W
open source
webscraping-ai/webscraping-ai-mcp-server
AI驱动的服务器,用于网页数据提取和抓取
人工智能网页抓取
与WebScraping.ai交互
自动化网页数据提取
可扩展的抓取解决方案
S
open source
scrapeless-ai/scrapeless-mcp-server
用于 Google SERP API 网络搜索的 MCP 服务器连接器
人工智能网页抓取
连接 MCP 到 Google SERP API
在 MCP 中启用网络搜索
促进生态系统内搜索
P
open source
PhungXuanAnh/selenium-mcp-server
用于 Selenium WebDriver 网络自动化的模型上下文协议服务器
人工智能网页抓取
提供网络自动化功能
基于 Selenium WebDriver
支持模型上下文协议
M
unknown
modelcontextprotocol/server-puppeteer
用于网络抓取和交互的浏览器自动化工具
人工智能网页抓取
自动化网络抓取任务
处理浏览器交互
基于Puppeteer构建
B
open source
brutalzinn/simple-mcp-selenium
Cursor IDE的自然语言浏览器控制服务器
人工智能网页抓取
使用自然语言控制浏览器
非常适合测试和自动化
支持多用户场景
S
open source
Selenium-Agent
使用selenium作为网络交互工具的LLM代理
人工智能网页抓取
使用selenium进行网络自动化
集成LLM实现智能交互
基于代理的方法处理网络任务