llms.txt Generator MCP Server — llms.txt 생성, 검증 및 감사 (AI 에이전트 도구)

**llms.txt Generator**는 웹사이트를 큐레이션된 llms.txt로 변환합니다. llms.txt는 AI 시스템이 실제로 중요한 콘텐츠를 가리키도록 하는 Markdown 파일입니다. 이 MCP 서버는 이를 Claude, ChatGPT, Cursor 같은 에이전트에서 사용할 수 있게 해줍니다: 도메인 크롤링, 초안 생성, 기존 파일 검증, Google의 새로운 Lighthouse Agentic Browsing 감사에 대한 확인까지. 무료이며 API 키도 등록도 필요 없습니다.

• 엔드포인트: https://www.llms-txt-generator.de/api/mcp (Streamable HTTP)

• MCP 레지스트리: de.llms-txt-generator/llms-txt — 게시됨, 상태 active

• npm 브리지: llmstxtgenerator-mcp

• 웹 앱: llms-txt-generator.de

• 포맷 입문서: What is llms.txt? · FAQ

• 자체 파일: /llms.txt · /llms-full.txt

llms.txt는 공개 제안(llmstxt.org)이며, 비준된 웹 표준이 아닙니다. robots.txt나 sitemap.xml을 대체하지 않으며, 접근 제어도 아니고, 순위나 AI 인용을 보장하지도 않습니다.

상태

라이브. 엔드포인트가 가동 중이며 네 가지 도구를 모두 제공합니다:

curl -s https://www.llms-txt-generator.de/api/mcp \
  -H 'Content-Type: application/json' \
  -H 'Accept: application/json, text/event-stream' \
  -d '{"jsonrpc":"2.0","id":1,"method":"tools/list"}'

웹 앱을 구동하는 것과 동일한 결정적(deterministic) 크롤러, 생성기, 검증기입니다 — 별도 구현이 아닙니다.

지금 llms.txt가 중요한 이유

Lighthouse 13.3(2026년 8월)부터 Google Lighthouse와 PageSpeed Insights는 Agentic Browsing이라는 카테고리에서 /llms.txt를 감사합니다. 이 감사는 구조 검사이며 Google 검색 순위 요소가 아닙니다. 의도적으로 최소한으로 설계되었습니다 — 세 가지 규칙:

대부분의 사람을 놀라게 하는 두 가지:

1. 일반 텍스트 링크는 인정되지 않습니다. Homepage: https://example.com은 링크가 작동해도 감사를 통과하지 못합니다. 손으로 작성한 파일이 실패하는 가장 흔한 이유입니다.

2. 파일이 없으면 통과합니다. llms.txt가 없으면 해당 없음으로 보고됩니다. 실패하는 경우는 파일이 있지만 손상된 경우뿐입니다. 손상된 llms.txt를 게시하는 것은 아예 게시하지 않는 것보다 나쁩니다 — 이것이 바로 validate_* 도구가 존재하는 이유입니다.

이 서버를 사용해야 하는 경우

에이전트가 llms.txt를 생성, 검사 또는 수리해야 할 때마다 사용하세요:

• "example.com용 llms.txt를 생성해줘"

• "우리가 게시한 llms.txt가 Google의 Agentic Browsing 감사를 통과하나요?"

• "이 llms.txt에서 깨진 링크와 외부 도메인 링크를 확인해줘"

• "PageSpeed Insights가 우리 llms.txt에 대해 왜 불만을 표시하나요?"

다음 용도로는 사용하지 마세요: 크롤링 제어(robots.txt의 역할), URL 검색(sitemap.xml의 역할), 전체 사이트 SEO 감사.

연결

Claude Code(한 줄):

claude mcp add --transport http llms-txt https://www.llms-txt-generator.de/api/mcp

mcpServers 블록이 있는 모든 클라이언트(Cursor, Windsurf, VS Code, …):

{
  "mcpServers": {
    "llms-txt": {
      "type": "streamable-http",
      "url": "https://www.llms-txt-generator.de/api/mcp"
    }
  }
}

stdio 전용 클라이언트(예: Claude Desktop)는 이 저장소의 npm 브리지를 통해:

{
  "mcpServers": {
    "llms-txt": {
      "command": "npx",
      "args": ["-y", "llmstxtgenerator-mcp"]
    }
  }
}

ChatGPT / OpenAI: 이 서버는 일반 Streamable HTTP를 사용하므로 커넥터 및 Apps SDK 내부에서 작동합니다 — OpenAI의 플러그인이 2026년부터 기반으로 하는 것과 동일한 MCP 표준입니다.

도구

일반적인 흐름: check_published_llms_txt → generate_llms_txt → validate_llms_txt → check_lighthouse_agentic_browsing.

모든 응답에는 Lighthouse 규칙을 다시 설명하는 note가 포함되어 있어, 결과를 추론하는 에이전트가 이 README를 읽지 않아도 됩니다.

크롤러가 수행하는 작업과 수행하지 않는 작업

• 시작 페이지, robots.txt, 사이트맵, 그리고 우선순위가 지정된 내부 HTML 페이지 선택을 읽습니다 — 최대 15페이지, 동일한 등록 가능한 도메인만.

• 제목, 설명, 제목(heading), canonical, JSON-LD 유형을 결정적으로 추출합니다. 없는 사실은 그대로 비어 있습니다.

• 차단됨: 사설 네트워크, 내부 호스트 이름, 외부 리디렉션 대상, 비표준 포트, 자격 증명이 포함된 URL, HTTP(S)가 아닌 스킴, 과도하게 큰 응답.

• 출력에서 제외: 매개변수 URL, noindex 페이지, 중복, 오류 응답, HTML이 아닌 파일 유형 — 각각 명시된 이유와 함께.

• 빠른 크롤링은 페이지 JavaScript를 실행하지 않습니다. 클라이언트 측 전용 콘텐츠는 누락될 수 있습니다.

자주 묻는 질문

llms.txt란 무엇인가요? /llms.txt에 있는 Markdown 파일에 대한 공개 제안으로, 인간과 기계에게 사이트의 큐레이션된 개요를 제공합니다: 이름을 위한 H1, blockquote 요약, 절대 링크의 H2 섹션. llmstxt.org와 입문서를 참조하세요.

llms.txt가 Google 순위를 향상시키나요? 아니요. Google 검색은 이를 순위 신호로 무시합니다. 2026년에 변경된 것은 Google Lighthouse가 이제 구조를 감사한다는 점입니다. 이는 서로 다른 것이며, 그 외의 주장은 과장입니다.

API 키가 필요한가요? 아니요. 엔드포인트는 공개이며 IP별로 속도 제한이 있습니다.

언어 모델이 관여하나요? 아니요. 크롤러와 생성기는 완전히 결정적입니다. 설명은 소스 페이지 자체의 메타데이터 또는 표시되는 텍스트에서만 가져옵니다.

왜 15페이지만인가요? 무료 서비스를 빠르고 저렴하게 운영하기 위해서이며, 좋은 llms.txt는 완전한 것보다 큐레이션된 것입니다. 더 큰 사이트는 연락을 환영합니다.

누가 운영하나요? track by track GmbH, 베를린 — 소셜 미디어 에이전시 famefact를 운영하는 팀.

개인정보 처리방침은 어디에 있나요? 개인정보 처리방침 · 이용약관.

독일어: KI 에이전트로 llms.txt 생성, 검사 및 수리

**llms.txt Generator**는 웹사이트에서 큐레이션된 llms.txt를 생성합니다 — AI 시스템에 어떤 콘텐츠가 실제로 중요한지 보여주는 Markdown 파일입니다. 이 MCP 서버는 이를 AI 에이전트에서 사용할 수 있게 합니다: 도메인 크롤링, 초안 생성, 기존 파일 검증, Google의 새로운 Lighthouse 감사 **„Agentic Browsing"**에 대한 확인. 무료이며 API 키도 등록도 필요 없습니다.

상태: 라이브. 엔드포인트: https://www.llms-txt-generator.de/api/mcp

claude mcp add --transport http llms-txt https://www.llms-txt-generator.de/api/mcp

지금 왜 관련이 있는가

Lighthouse 13.3(2026년 8월)부터 Google Lighthouse와 PageSpeed Insights는 „Agentic Browsing" 카테고리에서 /llms.txt도 검사합니다. 감사는 세 가지를 요구합니다: H1 제목, 최소 하나의 실제 Markdown 링크(대괄호 안의 링크 텍스트, 괄호 안의 URL), 그리고 50자 이상의 콘텐츠.

대부분을 놀라게 하는 두 가지:

• 일반 텍스트 링크는 인정되지 않습니다. Startseite: https://beispiel.de는 링크가 작동해도 실패합니다. 손으로 작성한 파일이 실패하는 가장 흔한 이유입니다.

• 파일이 없으면 통과합니다. llms.txt가 없으면 „해당 없음"으로 간주됩니다. 실패하는 경우는 파일이 있지만 오류가 있는 경우뿐입니다. 손상된 llms.txt를 게시하는 것은 아예 없는 것보다 나쁩니다.

이 감사는 구조 검사이며 Google 검색의 순위 요소가 아닙니다.

도구

크롤링 보안

사설 네트워크, 내부 호스트 이름, 외부 리디렉션 대상, 비표준 포트, 자격 증명이 포함된 URL, HTTP(S)가 아닌 스킴이 차단됩니다. 매개변수 URL, noindex 페이지, 중복, 오류 응답은 제외됩니다 — 각각 이유와 함께. 빠른 크롤링은 페이지 JavaScript를 실행하지 않습니다.

유용한 링크

• 생성기: llms-txt-generator.de

• 포맷 설명: Was ist llms.txt?

• 자주 묻는 질문: FAQ

• GEO 및 llms.txt 블로그: Blog

• 더 큰 웹사이트? 약속 요청

이 저장소에는 문서, 검색 메타데이터(server.json), npm stdio 브리지가 포함되어 있습니다. 서버 자체는 베를린의 track by track GmbH가 운영합니다(Impressum).

라이선스: MIT — LICENSE 참조.