Skip to main content
Glama
yoloyash

web-basics-mcp

by yoloyash

web-basics-mcp

에이전트를 위한 작고 신뢰할 수 있는 웹 도구입니다. API 키가 필요 없고 번들 인프라도 없습니다.

도구

도구

기능

web_search

기존 SearXNG 인스턴스를 통해 하나의 쿼리를 검색합니다.

fetch_url

하나의 페이지, 텍스트 문서, PDF, 이미지 또는 Reddit 게시물을 가져옵니다.

fetch_url은 HTML 페이지와 Reddit 게시물의 경우 깔끔한 Markdown을, PDF의 경우 선택 가능한 텍스트를, text/Markdown/JSON/XML 응답의 경우 직접 콘텐츠를, PNG, JPEG, WebP, GIF 이미지의 경우 네이티브 MCP 이미지 콘텐츠를 반환합니다.

긴 텍스트는 제한된 청크 단위로 읽힙니다. 반환된 next_start_index를 사용하여 동일한 URL을 다시 호출하세요:

{
  "url": "https://example.com/long-page",
  "start_index": 8000,
  "max_length": 8000
}

성공적인 가져오기는 메모리에 5분간 캐시되므로 오프셋 읽기는 일반적으로 동일한 추출 문서를 사용합니다. 검색 결과는 2분간 캐시되어 에이전트 실행 중 동일한 SearXNG 작업이 반복되는 것을 방지합니다. 두 캐시 모두 크기가 제한되어 있고, 동시 중복 요청을 병합하며, 언제든지 폐기될 수 있습니다. 도구의 정확성은 이 캐시에 의존하지 않습니다.

Related MCP server: Basic MCP Tools

요구 사항

  • Node.js 20.18.1 이상

  • JSON 응답이 활성화된 기존 SearXNG 인스턴스

기본 URL을 환경 변수 또는 이 패키지의 .env 파일에 설정하세요:

SEARXNG_URL=http://127.0.0.1:8088

서버는 SearXNG를 사용할 수 없어도 시작되므로 fetch_url은 계속 사용할 수 있습니다. web_search 호출은 SearXNG에 연결 가능해질 때까지 명확한 연결 오류를 반환합니다.

설치

git clone https://github.com/yoloyash/web-basics-mcp.git
cd web-basics-mcp
npm install
npm run build

MCP 클라이언트가 stdio를 통해 build/index.js를 실행하도록 구성하세요. 예를 들어:

codex mcp add web-basics -- node /absolute/path/to/web-basics-mcp/build/index.js

도구 입력

{
  "query": "Model Context Protocol",
  "limit": 5
}

limit의 기본값은 5이며 1부터 10까지의 값을 허용합니다. 결과는 안정적인 형태 {link, title, snippet}을 사용합니다.

fetch_url

{
  "url": "https://example.com",
  "start_index": 0,
  "max_length": 8000
}
  • start_index의 기본값은 0입니다.

  • max_length의 기본값은 8000이며 최대 20000으로 제한됩니다.

  • 텍스트 응답은 total_chars, returned_chars, truncated를 보고하며, 더 많은 콘텐츠가 남아 있을 경우 next_start_index도 보고합니다.

  • HTML은 먼저 Defuddle을 사용하고, 게이트된 폴백으로 Mozilla Readability를 사용합니다. 응답은 선택된 extractor와 해당되는 경우 폴백 이유를 보고합니다.

  • Defuddle의 선택적 네트워크 기반 추출기는 비활성화됩니다. 모든 원격 요청은 이 서버의 검증된 HTTP 경로 내에서 이루어집니다.

  • Reddit 게시물 URL은 Reddit의 RSS 피드를 통해 가져오며, 게시물과 해당 피드에서 사용 가능한 댓글을 포함합니다. RSS에는 웹사이트보다 적은 댓글이 포함될 수 있습니다.

안전 및 제한 사항

  • 공개 HTTP(S) URL만 허용됩니다.

  • URL 자격 증명, 개인 호스트 이름, 개인 DNS 결과, 안전하지 않은 리디렉션은 거부됩니다.

  • 각 리디렉션은 독립적으로 검증됩니다.

  • 요청에는 타임아웃, 제한된 재시도, 응답 크기 제한, 안정적인 사용자 에이전트가 사용됩니다.

  • 표준 응답 및 이미지는 5MiB로 제한되며, PDF는 15MiB로 제한됩니다.

  • 가져오기 캐싱은 Cache-Control: no-store, no-cache, max-age=0을 준수합니다.

이 서버는 의도적으로 브라우저 자동화, JavaScript 렌더링, 크롤링, 인증, 쿠키, 프록시/VPN 라우팅 또는 답변 합성을 제공하지 않습니다.

개발

npm test
npm pack --dry-run

테스트는 공개 서비스를 반복적으로 쿼리하는 대신 저장된 픽스처와 로컬 스텁을 사용합니다.

Available Tools

2 tools
fetch_urlA
Read-onlyIdempotent

Fetch one public HTTP(S) URL. Returns clean Markdown for pages and Reddit posts, extracted PDF text, direct text data, or a supported image. Use start_index to continue truncated text.

ParametersJSON Schema
NameRequiredDescriptionDefault
urlYesTarget URL
max_lengthNoMaximum text characters to return
start_indexNoCharacter index to start text content from

Output Schema

ParametersJSON Schema
NameRequiredDescription
urlYes
linksNo
titleNo
contentNo
metadataNo
extractorYes
pageCountNo
truncatedNo
wordCountNo
byteLengthNo
contentTypeYes
start_indexNo
total_charsNo
returned_charsNo
fallback_reasonNo
next_start_indexNo

TDQS

A4.2/5.0
Behavior4/5

Does the description disclose side effects, auth requirements, rate limits, or destructive behavior?

Annotations already declare the tool read-only, idempotent, and non-destructive. The description adds useful behavior: it specifies supported content types (Markdown, PDF text, etc.) and discloses that text can be truncated, with a pointer to start_index for continuation. No contradiction with annotations.

Agents need to know what a tool does to the world before calling it. Descriptions should go beyond structured annotations to explain consequences.

Conciseness5/5

Is the description appropriately sized, front-loaded, and free of redundancy?

Two sentences with zero filler. The main action and return types are front-loaded, and the start_index hint is a separate, purposeful clause. Nothing extraneous.

Shorter descriptions cost fewer tokens and are easier for agents to parse. Every sentence should earn its place.

Completeness4/5

Given the tool's complexity, does the description cover enough for an agent to succeed on first attempt?

Given the presence of an output schema and the simple nature of the tool, the description covers the essential aspects: what it fetches, what it returns, and how to handle truncation. It does not mention error cases or rate limits, but those are not critical for correct invocation and are partially implied by the annotations.

Complex tools with many parameters or behaviors need more documentation. Simple tools need less. This dimension scales expectations accordingly.

Parameters4/5

Does the description clarify parameter syntax, constraints, interactions, or defaults beyond what the schema provides?

Schema coverage is 100% describing all three parameters. The description supplements the start_index parameter by explicitly connecting it to truncated text continuation, which adds semantic value beyond the generic schema description. max_length and url are already well-documented in the schema.

Input schemas describe structure but not intent. Descriptions should explain non-obvious parameter relationships and valid value ranges.

Purpose5/5

Does the description clearly state what the tool does and how it differs from similar tools?

The description clearly states the action ('Fetch') and the resource ('one public HTTP(S) URL'), and enumerates the output types. This unambiguously distinguishes it from the sibling web_search (which searches rather than fetches a known URL).

Agents choose between tools based on descriptions. A clear purpose with a specific verb and resource helps agents select the right tool.

Usage Guidelines3/5

Does the description explain when to use this tool, when not to, or what alternatives exist?

The description implies usage: you should use this tool when you have a specific URL to fetch. However, it never explicitly contrasts with web_search or states when NOT to use it. The only usage hint provided is about start_index for continuing truncated text, which is a parameter-level instruction, not a tool-selection guideline.

Agents often have multiple tools that could apply. Explicit usage guidance like "use X instead of Y when Z" prevents misuse.

Tool Schema Changelog

Recent tool additions, removals, and schema changes observed during successful MCP inspections.

  1. 2 tool updatesv0.5.0
    • Changedfetch_url3 fields changed
      • addedInput schema / properties / max_length
        Added value: +{
        +  "default": 8000,
        +  "description": "Maximum text characters to return",
        +  "maximum": 20000,
        +  "minimum": 1,
        +  "type": "integer"
        +}
      • addedInput schema / properties / start_index
        Added value: +{
        +  "default": 0,
        +  "description": "Character index to start text content from",
        +  "minimum": 0,
        +  "type": "integer"
        +}
      • changedOutput schema / (root)
        Previous value: -nullNew value: +{
        +  "$schema": "http://json-schema.org/draft-07/schema#",
        +  "additionalProperties": false,
        +  "properties": {
        +    "byteLength": {
        +      "minimum": 0,
        +      "type": "integer"
        +    },
        +    "content": {
        +      "type": "string"
        +    },
        +    "contentType": {
        +      "type": "string"
        +    },
        +    "extractor": {
        +      "enum": [
        +        "defuddle",
        +        "readability",
        +        "unpdf",
        +        "reddit",
        +        "text",
        +        "image"
        +      ],
        +      "type": "string"
        +    },
        +    "fallback_reason": {
        +      "type": "string"
        +    },
        +    "links": {
        +      "items": {
        +        "type": "string"
        +      },
        +      "type": "array"
        +    },
        +    "metadata": {
        +      "additionalProperties": {
        +        "type": [
        +          "string",
        +          "number",
        +          "boolean",
        +          "null"
        +        ]
        +      },
        +      "type": "object"
        +    },
        +    "next_start_index": {
        +      "minimum": 0,
        +      "type": "integer"
        +    },
        +    "pageCount": {
        +      "minimum": 1,
        +      "type": "integer"
        +    },
        +    "returned_chars": {
        +      "minimum": 0,
        +      "type": "integer"
        +    },
        +    "start_index": {
        +      "minimum": 0,
        +      "type": "integer"
        +    },
        +    "title": {
        +      "type": "string"
        +    },
        +    "total_chars": {
        +      "minimum": 0,
        +      "type": "integer"
        +    },
        +    "truncated": {
        +      "type": "boolean"
        +    },
        +    "url": {
        +      "type": "string"
        +    },
        +    "wordCount": {
        +      "minimum": 0,
        +      "type": "integer"
        +    }
        +  },
        +  "required": [
        +    "url",
        +    "contentType",
        +    "extractor"
        +  ],
        +  "type": "object"
        +}
    • Changedweb_search5 fields changed
      • addedInput schema / properties / max_tokens
        Added value: +{
        +  "description": "Provider answer token cap when supported",
        +  "exclusiveMinimum": 0,
        +  "type": "integer"
        +}
      • addedInput schema / properties / num_search_results
        Added value: +{
        +  "description": "Requested search breadth or local result cap",
        +  "maximum": 10,
        +  "minimum": 1,
        +  "type": "integer"
        +}
      • addedInput schema / properties / recency
        Added value: +{
        +  "description": "Relative time filter",
        +  "enum": [
        +    "day",
        +    "week",
        +    "month",
        +    "year"
        +  ],
        +  "type": "string"
        +}
      • addedInput schema / properties / temperature
        Added value: +{
        +  "description": "Provider sampling temperature when supported",
        +  "type": "number"
        +}
      • changedOutput schema / (root)
        Previous value: -nullNew value: +{
        +  "$schema": "http://json-schema.org/draft-07/schema#",
        +  "additionalProperties": false,
        +  "properties": {
        +    "error": {
        +      "type": "string"
        +    },
        +    "response": {
        +      "additionalProperties": false,
        +      "properties": {
        +        "answer": {
        +          "type": "string"
        +        },
        +        "authMode": {
        +          "type": "string"
        +        },
        +        "citations": {
        +          "items": {
        +            "additionalProperties": false,
        +            "properties": {
        +              "citedText": {
        +                "type": "string"
        +              },
        +              "title": {
        +                "type": "string"
        +              },
        +              "url": {
        +                "type": "string"
        +              }
        +            },
        +            "required": [
        +              "url",
        +              "title"
        +            ],
        +            "type": "object"
        +          },
        +          "type": "array"
        +        },
        +        "model": {
        +          "type": "string"
        +        },
        +        "provider": {
        +          "enum": [
        +            "brave",
        +            "duckduckgo",
        +            "exa",
        +            "firecrawl",
        +            "none",
        +            "searxng"
        +          ],
        +          "type": "string"
        +        },
        +        "relatedQuestions": {
        +          "items": {
        +            "type": "string"
        +          },
        +          "type": "array"
        +        },
        +        "requestId": {
        +          "type": "string"
        +        },
        +        "searchQueries": {
        +          "items": {
        +            "type": "string"
        +          },
        +          "type": "array"
        +        },
        +        "sources": {
        +          "items": {
        +            "additionalProperties": false,
        +            "properties": {
        +              "ageSeconds": {
        +                "type": "number"
        +              },
        +              "author": {
        +                "type": "string"
        +              },
        +              "publishedDate": {
        +                "type": "string"
        +              },
        +              "snippet": {
        +                "type": "string"
        +              },
        +              "title": {
        +                "type": "string"
        +              },
        +              "url": {
        +                "type": "string"
        +              }
        +            },
        +            "required": [
        +              "url",
        +              "title"
        +            ],
        +            "type": "object"
        +          },
        +          "type": "array"
        +        },
        +        "usage": {
        +          "additionalProperties": false,
        +          "properties": {
        +            "inputTokens": {
        +              "type": "number"
        +            },
        +            "outputTokens": {
        +              "type": "number"
        +            },
        +            "searchRequests": {
        +              "type": "number"
        +            },
        +            "totalTokens": {
        +              "type": "number"
        +            }
        +          },
        +          "type": "object"
        +        }
        +      },
        +      "required": [
        +        "provider",
        +        "sources"
        +      ],
        +      "type": "object"
        +    }
        +  },
        +  "required": [
        +    "response"
        +  ],
        +  "type": "object"
        +}
  2. 2 tool updatesv1.0.0
    • First observedfetch_url
    • First observedweb_search

TDQS

A3.9/5.0

Scored across 2 tools

Disambiguation5/5

The two tools perform fundamentally different operations: one searches the web, the other fetches a specific URL. There is zero overlap in purpose, so an agent can clearly distinguish which tool to use for a given task.

Naming Consistency4/5

Both tools use a verb_noun pattern ('web_search' and 'fetch_url'), which is consistent and readable. 'web_search' could be parsed as 'search the web' but the prefix 'web_' is used similarly, so the pattern is predictable. Minor deviation: 'web_search' vs 'fetch_url' both place the verb first, so it's actually consistent.

Tool Count3/5

With only two tools, the server feels minimal, which is on the borderline for a dedicated web-basics server. Both tools are essential and non-redundant, but the count is thin—though it may be appropriate for a focused utility server.

Completeness4/5

For a 'web-basics' domain, search and fetch cover the core operations an agent would need. The fetch tool handles multiple content types and page truncation, which is good. Minor gaps exist (e.g., no way to submit forms or list search history), but these are not expected for a basics server.

Maintenance

ActivitySlowing
ResponsivenessNo issues

Related MCP Connectors

Related MCP Servers

  • F
    license
    A
    quality
    D
    maintenance
    MCP server that provides a search_web tool to query a self-hosted SearXNG instance and return structured web search results.
    1
    -
  • F
    license
    Not graded
    quality
    C
    maintenance
    A self-hosted MCP server providing private web search, web page fetching, and current date/time tools, powered by a bundled SearXNG instance for API-key-free local search.
    2
    -