Skip to main content
Glama

ConKurrence

Одна команда. Узнайте, согласен ли ваш ИИ сам с собой.

ConKurrence — это инструментарий для измерения консенсуса с подтвержденной статистической базой, предназначенный для конвейеров оценки ИИ. Он использует несколько моделей ИИ в качестве независимых оценщиков, измеряет надежность между оценщиками с помощью каппы Фляйса и бутстреп-доверительных интервалов, а также направляет спорные элементы экспертам-людям.

Установка

npm install -g conkurrence

Related MCP server: CI-1T Prediction Stability Engine

MCP-сервер

Используйте ConKurrence как MCP-сервер в Claude Desktop или любом другом MCP-совместимом клиенте:

npx conkurrence mcp

Конфигурация Claude Desktop

Добавьте в ваш claude_desktop_config.json:

{
  "mcpServers": {
    "conkurrence": {
      "command": "npx",
      "args": ["-y", "conkurrence", "mcp"]
    }
  }
}

Плагин Claude Code

/plugin marketplace add AlligatorC0der/conkurrence

Возможности

  • Мультимодельная оценка — запускайте вашу схему одновременно для моделей Bedrock, OpenAI и Gemini

  • Статистическая строгость — каппа Фляйса с бутстреп-доверительными интервалами, коэффициент Кендалла для проверки валидности

  • Режим самосогласованности — не требуются API-ключи; использует хост-модель через MCP Sampling

  • Предложение схемы — проектирование схемы на базе ИИ на основе ваших данных

  • Отслеживание трендов — сравнивайте запуски во времени, обнаруживайте снижение уровня согласованности

  • Оценка стоимости — знайте стоимость до начала запуска

Инструменты MCP

Инструмент

Описание

conkurrence_run

Выполнение оценки с использованием нескольких ИИ-оценщиков

conkurrence_report

Создание подробного отчета в формате markdown

conkurrence_compare

Сравнение двух запусков бок о бок

conkurrence_trend

Отслеживание согласованности по нескольким запускам

conkurrence_suggest

Предложение схемы на базе ИИ на основе ваших данных

conkurrence_validate_schema

Проверка схемы перед запуском

conkurrence_estimate

Оценка стоимости и использования токенов

Ссылки

Лицензия

BUSL-1.1 — Business Source License 1.1

Tool Schema Changelog

Recent tool additions, removals, and schema changes observed during successful MCP inspections. Dates show when Glama detected each change.

No tool schema history has been recorded yet.

Maintenance

ActivityInactive
ResponsivenessSyncing

Resources

Unclaimed servers have limited discoverability.

Looking for Admin?

If you are the server author, to access and configure the admin panel.

Related MCP Connectors

Related MCP Servers

  • A
    license
    Not graded
    quality
    C
    maintenance
    Provides advanced evaluation tools for assessing AI safety, alignment, and performance of LLM outputs. Enables programmatic evaluation of quality, safety metrics like toxicity and PII detection, and operational metrics including carbon footprint and cost estimation.
    4
    Apache 2.0
  • A
    license
    A
    quality
    C
    maintenance
    An MCP server that audits LLM-as-judge evaluations, detecting judge drift across runs, measuring bias through controlled probes, and comparing judge agreement with human raters.
    6
    MIT

Latest Blog Posts

MCP directory API

We provide all the information about MCP servers via our MCP API.

curl -X GET 'https://glama.ai/api/mcp/v1/servers/AlligatorC0der/conkurrence'

If you have feedback or need assistance with the MCP directory API, please join our Discord server