agentsready

О проекте

Зачем это нужно

AI-агенты (Claude, GPT, Cursor, Perplexity и десятки других) всё чаще читают сайты не глазами человека, а через специальные стандарты доступа: robots.txt с правилами для AI-ботов, llms.txt с инструкциями, MCP для функциональных API, OAuth для авторизации.

Эти стандарты появились за последние 1–2 года, и большинство сайтов не успели адаптироваться. Из-за этого они либо невидимы для агентов, либо отдают им HTML вместо машиночитаемого формата, либо блокируют ценный трафик через слишком жёсткие правила.

Наш сканер — это публичный аудит, который покажет, где ваш сайт стоит на этой шкале и что конкретно изменить.

Что значит «agent-ready» и при чём тут GEO

Сайт agent-ready — это сайт, на котором AI-агент может:

  • Найти контент (через robots.txt, sitemap, llms.txt, ai-agent.json, link headers)
  • Прочитать контент (через Markdown for Agents, Schema.org)
  • Понять политику доступа (AI bot rules, Content Signals)
  • Взаимодействовать с API (OAuth, MCP, Agent Skills, A2A, WebMCP)
  • Совершать транзакции (x402, MPP, UCP, ACP — пока международные)

Первые три блока — технический фундамент GEO (Generative Engine Optimization). Без него сайт невидим в ответах ChatGPT, YandexGPT, GigaChat и Perplexity.

Остальные блоки (API, транзакции) — это уже про agent-driven workflows: агент не просто читает ваш сайт, а использует его функции от имени пользователя. Здесь мы предлагаем не аудит, а реализацию под ключ.

Кто делает

Независимая команда разработчиков и консультантов. Специализируемся на реализации стандартов AI-доступа для веб-сайтов и API. Открыты к фидбеку и предложениям новых проверок.

Связаться: hello@agentsready.io

Что мы проверяем

23 открытых стандарта по 5 категориям. Глоссарий →

Discoverability

  • robots.txt /robots.txt

    Опубликовать /robots.txt с понятными правилами для поисковых и AI-ботов.

  • Sitemap /sitemap.xml

    Опубликовать sitemap и сослаться на него из robots.txt.

  • Link headers /

    Включить Link response headers (RFC 8288) для discovery агентами.

  • llms.txt /llms.txt

    Опубликовать /llms.txt со структурированными инструкциями для LLM.

  • ai-agent.json /.well-known/ai-agent.json

    Опубликовать /.well-known/ai-agent.json — единый манифест для AI-агентов.

Content Accessibility

  • Markdown for Agents /

    Поддерживать content negotiation: при Accept: text/markdown отдавать markdown-версию страницы.

  • Schema.org JSON-LD /

    Использовать Schema.org JSON-LD для структурированной семантики контента.

Bot Access Control

  • AI bot rules /robots.txt

    Явно настроить правила для AI-ботов (GPTBot, ClaudeBot, PerplexityBot).

  • Content Signals /robots.txt

    Декларировать политику AI-использования через Content Signals в robots.txt.

  • Web Bot Auth /.well-known/http-message-signatures-directory

    (Опционально) Опубликовать Web Bot Auth directory для крипто-идентификации AI-ботов.

API / Auth / MCP

  • API Catalog /.well-known/api-catalog

    Опубликовать API Catalog (RFC 9727) для discovery агентами.

  • OAuth discovery /.well-known/openid-configuration

    Опубликовать OAuth/OIDC discovery endpoint.

  • OAuth Protected Resource /.well-known/oauth-protected-resource

    Опубликовать OAuth Protected Resource Metadata (RFC 9728).

  • auth.md /auth.md

    Опубликовать /auth.md — инструкции для регистрации агентов (открытый протокол auth.md от WorkOS).

  • MCP Server Card /.well-known/mcp/server-card.json

    Опубликовать MCP Server Card для discovery вашего MCP-сервера.

  • A2A Agent Card /.well-known/agent-card.json

    Опубликовать A2A Agent Card для agent-to-agent взаимодействия.

  • Agent Skills /.well-known/agent-skills/index.json

    Опубликовать индекс агентских скиллов.

  • WebMCP /

    Реализовать WebMCP API для browser-based AI-агентов.

  • RateLimit headers /

    (Опционально) Публиковать RateLimit headers для предотвращения throttling.

Commerce

  • x402

    Объявить поддержку HTTP 402 для агентских микроплатежей.

  • MPP

    Объявить поддержку Merchant Payment Protocol.

  • UCP

    Объявить поддержку Universal Commerce Protocol.

  • ACP

    Объявить поддержку Agent Commerce Protocol.

Дополнительно

→ Запустить сканирование → Прочитать FAQ