Crawlee MCP
Crawlee MCP
로컬 Model Context Protocol 서버로, Crawlee를 사용하여 웹 가져오기, 크롤링, 스크린샷을 제공합니다. stdio를 통해 실행되므로 Claude Code, Claude Desktop, Codex, Cursor 및 모든 MCP 호환 클라이언트에서 사용할 수 있습니다.
도구
도구 | 설명 |
| 단일 URL을 가져와 깨끗한 마크다운 반환 |
| 여러 URL을 병렬로 가져오기 |
| 사이트를 크롤링하고 링크를 발견하여 페이지 콘텐츠 반환 |
| 페이지의 PNG 스크린샷 촬영 |
| 상태 확인 |
Related MCP server: Crawl4AI MCP
설치
Node.js 20 이상이 필요합니다. JavaScript 렌더링 또는 스크린샷을 처음 사용할 때는 Chromium 브라우저도 필요합니다:
npx playwright install chromiumnpm에 게시되면 모든 클라이언트가 다음 명령어로 시작할 수 있습니다:
npx -y @patrikmichi/crawlee-mcpnpm 패키지가 게시될 때까지 GitHub에서 직접 설치하세요:
npx -y github:patrikmichi/crawlee-mcp클라이언트 설정
Claude Code
claude mcp add --transport stdio crawlee -- npx -y @patrikmichi/crawlee-mcpClaude Desktop
Claude Desktop 설정 파일에 다음을 추가하세요:
{
"mcpServers": {
"crawlee": {
"command": "npx",
"args": ["-y", "@patrikmichi/crawlee-mcp"]
}
}
}Codex
~/.codex/config.toml에 다음을 추가하세요:
[mcp_servers.crawlee]
command = "npx"
args = ["-y", "@patrikmichi/crawlee-mcp"]기타 MCP 클라이언트
동일한 명령어와 인수를 사용하세요: npx -y @patrikmichi/crawlee-mcp.
설정
cp env.example .env변수 | 필수 | 설명 |
| 아니오 | 교체를 위한 쉼표로 구분된 프록시 URL |
| 아니오 | 요청 제한 시간 (ms) (기본값: |
| 아니오 | 스텔스 모드를 비활성화하려면 |
개발
npm install
npm start # Run with tsx (no build needed)
npm run build # Compile TypeScript
npm run typecheck # Type check only이 서버는 의도적으로 로컬 및 stdio 전용입니다. JavaScript 렌더링과 스크린샷에는 로컬 Playwright 브라우저가 필요하기 때문입니다.
Maintenance
Resources
Unclaimed servers have limited discoverability.
Looking for Admin?
If you are the server author, to access and configure the admin panel.
Related MCP Servers
- Alicense-qualityCmaintenanceEnables web scraping and crawling capabilities for LLM clients, supporting single-page scraping, multi-page website crawling, and web search with multiple engines (Playwright, Cheerio, Puppeteer) and flexible output formats including markdown, HTML, text, and screenshots.186MIT
- AlicenseBqualityAmaintenanceEnables AI assistants to crawl websites, extract dynamic content, navigate links, and save structured Markdown files via the MCP protocol, with support for anti-bot bypass, CSS selectors, and custom JavaScript execution.142MIT
- AlicenseAqualityBmaintenanceEnables web scraping of URLs, including extracting text, links, images, metadata, taking screenshots, and using CSS selectors for structured data extraction.611MIT
- Alicense-qualityCmaintenanceEnables AI agents to fetch and render web pages (including JavaScript-heavy SPAs) with headless Chromium, extract readable content with Mozilla Readability, capture navigation links, download images, and return a clean markdown file path.12ISC
Related MCP Connectors
Read a URL as clean markdown, screenshot a website, url to PDF. Web access for agents, no signup.
Screenshots, PDFs and Markdown from any URL or HTML for AI agents, via the SnapForge API
Web tools for agents: fetch URL as markdown (free MCP) + x402 scrape, links, AI JSON, snapshot.
Latest Blog Posts
- Who's Calling? MCP Hosts Are an Identity Blind Spot (And the Spec Knows It)By Om-Shree-0709 on .mcpAgent IdentityOAuth 2.1
- Your AI Chatbot Just Exposed Your CEO's Salary to an InternBy Om-Shree-0709 on .Agent IdentityMCP SecurityOAuth Delegation
- Why MCP Servers Need Execution Sandboxing (And Why Your Current Stack Isn't Enough)By Om-Shree-0709 on .Agentic AiPrompt InjectionWebAssembly
MCP directory API
We provide all the information about MCP servers via our MCP API.
curl -X GET 'https://glama.ai/api/mcp/v1/servers/patrikmichi/crawlee-mcp'
If you have feedback or need assistance with the MCP directory API, please join our Discord server