# 网页抓取

这是一个基于Model Context Protocol (MCP)的Playwright网页内容获取服务，提供网页导航、内容抓取、交互元素检测和鼠标操作模拟等功能。

Crawl4AI MCP服务器为Cursor AI提供网页抓取和爬取功能，集成于Composer代理模式中。

Scrapezy MCP服务器是一个为AI模型提供从网站提取结构化数据的服务，支持通过Claude等工具进行数据抓取。

Fetcher MCP是一个基于Playwright无头浏览器的网页内容抓取服务器，利用AI技术高效获取网页信息。

Data MCP Server是一个提供网页抓取、结构化数据提取和爬取功能的工具集，同时支持多种浏览器代理工具如OpenAI CUA和Claude Computer Use。

一个为Claude桌面版设计的MCP服务器，能够通过链接抓取网页文本、YouTube视频字幕和PDF文件内容。

MCP Fetch是为Claude Desktop设计的网页内容抓取和图像处理工具，支持自动下载和运行，需配合macOS系统使用。

Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器，提供网页抓取、爬取、搜索、内容提取和深度研究等功能，支持JavaScript渲染、URL发现、批量处理和自动重试等特性。

MCP Fetch是一个为Claude Desktop设计的网页内容抓取和图像处理服务工具，支持自动化提取网页内容、标题和优化图像处理。

一个提供HTTP请求能力的MCP服务器，支持LLM获取和处理网页内容，包括内容转换、过滤和自定义请求等功能。

一个基于Cloudflare浏览器渲染API的MCP服务器，为LLM提供网页内容获取、处理及上下文整合工具

Olostep MCP Server是一个集成了Olostep服务的MCP服务器实现，提供网页内容提取、搜索引擎结果获取和网站URL发现等功能，支持多国家请求路由和JavaScript渲染等待。

该项目展示如何利用Cloudflare浏览器渲染技术提取网页内容作为LLM上下文，包含API实验和MCP服务器实现。

Scraper.is MCP是一个基于模型上下文协议(MCP)的网页抓取工具集成包，允许AI助手通过MCP协议抓取网页内容，支持多种格式输出和实时进度更新。

Model Context Protocol (MCP) Server 是一个模块化的服务器，支持多种上下文感知任务，目前包括研究和网页抓取功能，适合需要自动化研究或实时数据提取的项目。

Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器，提供网页抓取、爬取、搜索、内容提取和批量处理等功能，支持云端和自托管部署。

一个用于执行XPath查询的MCP服务器，支持对XML/HTML内容进行查询，并可从URL获取内容进行查询。

XFetch MCP Server是一个增强型网页内容获取服务，专为LLM设计，能够突破Cloudflare等安全防护，支持JavaScript渲染和精准内容提取，并提供Markdown转换功能。

一个连接Claude桌面版与本地eGet网页爬虫的MCP服务，实现通过本地API抓取网页内容的功能

一个用于获取网页内容和YouTube视频字幕的MCP服务器

Olostep MCP Server是一个集成网页抓取、内容提取和搜索功能的协议服务器，支持谷歌搜索结构化数据获取、网页内容标记化提取及网站URL发现等功能。

Minion Works是一个模块化的AI代理框架，可连接浏览器自主执行复杂任务，适用于开发者、研究人员和创意构建者。

一个包含YouTube、Mermaid图表、Reddit和网页抓取功能的MCP服务集合项目

一个用于执行XPath查询的MCP服务器，支持本地XML和远程URL内容查询。

MCP Fetch是一个为Claude Desktop设计的服务工具，主要用于抓取网页内容并处理图片，使其适合粘贴到Claude中使用。它支持自动下载和运行，需要macOS系统，并提供图片大小和数量的限制处理。

基于Node.js undici库的网页内容获取MCP服务

Fetcher MCP是一个基于Playwright无头浏览器的网页内容抓取服务，支持JavaScript渲染、智能内容提取和并行处理，提供HTML/Markdown输出格式，适用于动态网页内容获取。

一个提供多种网页内容抓取功能的MCP服务器

这是一个基于Model Context Protocol (MCP)的Playwright网页内容获取服务器，提供网页导航、内容抓取、交互元素检测和鼠标操作模拟等功能。

一个用于抓取和转换网页内容的MCP服务器，支持多种格式输出和媒体文件处理。