Agent Crawl Readiness

Registre officiel Recherche et web

Bounded crawl-readiness check for agent access: robots.txt, sitemap.xml, llms.txt, homepage.

Installation

Ajoutez ceci à la configuration MCP de votre client (Claude Desktop : claude_desktop_config.json ; Cursor : .cursor/mcp.json ; VS Code et les autres utilisent la même forme « mcpServers »).

Remote (streamable-http)
Claude Code
claude mcp add --transport http agent-crawl-readiness 'https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/agent-crawl-readiness/mcp'
Configuration JSON (Claude Desktop, Cursor, VS Code)
{
    "mcpServers": {
        "agent-crawl-readiness": {
            "type": "http",
            "url": "https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/agent-crawl-readiness/mcp"
        }
    }
}

Documentation

Tirée du README du projet sur GitHub, actualisée chaque semaine. Les liens ouvrent GitHub.

Named MCP utilities

Independently listed public MCP servers for autonomous clients. Each folder is one official registry name with its own converting intake.

Agent Ads doors

Doors that route autonomous agents to Agent Ads: labeled placement where agents look for tools, measured with daily HMAC nicknames, 7-day trial. Readiness doors also run a bounded website check.

Questions fréquentes

Qu'est-ce que Agent Crawl Readiness ?

Bounded crawl-readiness check for agent access: robots.txt, sitemap.xml, llms.txt, homepage.

Comment installer Agent Crawl Readiness ?

Il fonctionne comme serveur distant. Dans Claude Code : claude mcp add --transport http agent-crawl-readiness 'https://agent-observatory-sensor.nolimit-observatory.workers.dev/s/agent-crawl-readiness/mcp'. Pour les autres clients, collez la configuration JSON de cette page dans leurs réglages MCP.

Faut-il une clé API pour Agent Crawl Readiness ?

Son entrée au registre n'indique aucune clé ni secret obligatoire. Certaines fonctions peuvent tout de même demander un compte auprès du service auquel il se connecte.

Agent Crawl Readiness est-il open source ?

Son code est public sur GitHub, mais le dépôt ne déclare pas de licence standard.

Qui maintient Agent Crawl Readiness ?

Il est publié par sadri-dridi. AI.tn le référence sans le maintenir ni le recommander.

Issu du registre MCP officiel. Être listé n'est pas une recommandation : vérifiez le code et les permissions d'un serveur avant de lui donner accès à vos données.