English Français العربية

GenPark Bloom Filter URL Dedup Crawler

Registre officiel Recherche et web

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler inge

Code source Site web Documentation

Que pouvez-vous faire avec GenPark Bloom Filter URL Dedup Crawler ?

  • 100% Python Standard Library: Zero third-party runtime dependencies.
  • MCP Native: Plugs directly into Claude Desktop, Cursor, LobeChat, and autonomous agent DAGs.
  • Production Resilience: Strict schema conformance, zero data loss, enterprise hardened.

Installation

Ajoutez ceci à la configuration MCP de votre client (Claude Desktop : claude_desktop_config.json ; Cursor : .cursor/mcp.json ; VS Code et les autres utilisent la même forme « mcpServers »).

MCPB package https://github.com/Alpha-Park/genpark-bloom-filter-url-dedup-crawler-skill/releases/download/v1.0.1/genpark-bloom-filter-url-dedup-crawler-skill-v1.0.1.mcpb

Documentation

Tirée du README du projet sur GitHub, actualisée chaque semaine. Les liens ouvrent GitHub.

Sommaire
  1. GenPark Bloom Filter URL Dedup Crawler
  2. 🌟 Key Features
  3. 🚀 Installation & Usage
  4. 📄 License

GenPark Bloom Filter URL Dedup Crawler

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler ingestion.

Part of the GenPark AI Agent Skills Ecosystem.

🌟 Key Features

  • 100% Python Standard Library: Zero third-party runtime dependencies.
  • MCP Native: Plugs directly into Claude Desktop, Cursor, LobeChat, and autonomous agent DAGs.
  • Production Resilience: Strict schema conformance, zero data loss, enterprise hardened.

🚀 Installation & Usage

Run as an MCP server:

python mcp_server.py

Use directly as a library:

from client import *

See example_usage.py for comprehensive integration demonstrations.

📄 License

MIT License. Maintained by GenPark AI.

Questions fréquentes

Qu'est-ce que GenPark Bloom Filter URL Dedup Crawler ?

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler inge

Comment installer GenPark Bloom Filter URL Dedup Crawler ?

Suivez les étapes d'installation de sa documentation, affichée sur cette page et dans son dépôt.

Faut-il une clé API pour GenPark Bloom Filter URL Dedup Crawler ?

Son entrée au registre n'indique aucune clé ni secret obligatoire. Certaines fonctions peuvent tout de même demander un compte auprès du service auquel il se connecte.

GenPark Bloom Filter URL Dedup Crawler est-il open source ?

Son code est public sur GitHub, mais le dépôt ne déclare pas de licence standard.

Qui maintient GenPark Bloom Filter URL Dedup Crawler ?

Il est publié par alphaparkinc. AI.tn le référence sans le maintenir ni le recommander.

Issu du registre MCP officiel. Être listé n'est pas une recommandation : vérifiez le code et les permissions d'un serveur avant de lui donner accès à vos données.