UseScraper MCP 服务器
这是一个基于 TypeScript 的 MCP 服务器，使用 UseScraper API 提供网页抓取功能。它提供了一个名为“scrape”的工具，可以从各种格式的网页中提取内容。
特征
工具
scrape从网页中提取内容参数：
url（必填）：要抓取的网页的 URLformat（可选）：保存内容的格式（text、html、markdown）。默认值：markdownadvanced_proxy（可选）：使用高级代理来规避机器人检测。默认值：falseextract_object（可选）：指定要提取的数据的对象
Related MCP server: MD Webcrawl MCP
安装
通过 Smithery 安装
要通过Smithery自动为 Claude Desktop 安装 UseScraper：
npx -y @smithery/cli install usescraper-server --client claude
手动安装
克隆存储库：
git clone https://github.com/your-repo/usescraper-server.git cd usescraper-server安装依赖项：
npm install构建服务器：
npm run build
配置
要与 Claude Desktop 一起使用，请添加服务器配置：
在 MacOS 上： ~/Library/Application Support/Claude/claude_desktop_config.json在 Windows 上： %APPDATA%/Claude/claude_desktop_config.json
{
"mcpServers": {
"usescraper-server": {
"command": "node",
"args": ["/path/to/usescraper-server/build/index.js"],
"env": {
"USESCRAPER_API_KEY": "your-api-key-here"
}
}
}
}
将/path/to/usescraper-server替换为服务器的实际路径，并将your-api-key-here替换为您的 UseScraper API 密钥。
用法
配置完成后，您可以通过 MCP 界面使用“scrape”工具。示例用法：
{
"name": "scrape",
"arguments": {
"url": "https://example.com",
"format": "markdown"
}
}
发展
对于使用自动重建的开发：
npm run watch
调试
由于 MCP 服务器通过 stdio 进行通信，调试起来可能比较困难。我们推荐使用MCP Inspector ，它以包脚本的形式提供：
npm run inspector
检查器将提供一个 URL 来访问浏览器中的调试工具。