English Français العربية

GenPark Bloom Filter URL Dedup Crawler

السجل الرسمي البحث والويب

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler inge

الشيفرة المصدرية الموقع التوثيق

ماذا يمكنك أن تفعل مع GenPark Bloom Filter URL Dedup Crawler؟

  • 100% Python Standard Library: Zero third-party runtime dependencies.
  • MCP Native: Plugs directly into Claude Desktop, Cursor, LobeChat, and autonomous agent DAGs.
  • Production Resilience: Strict schema conformance, zero data loss, enterprise hardened.

التثبيت

أضف هذا إلى إعدادات MCP في عميلك (Claude Desktop: claude_desktop_config.json، وCursor: ‏.cursor/mcp.json، ويستخدم VS Code وغيره الصيغة نفسها «mcpServers»).

MCPB package https://github.com/Alpha-Park/genpark-bloom-filter-url-dedup-crawler-skill/releases/download/v1.0.1/genpark-bloom-filter-url-dedup-crawler-skill-v1.0.1.mcpb

التوثيق

مأخوذ من ملف README للمشروع على GitHub ويُحدَّث أسبوعيًا. تفتح الروابط على GitHub.

المحتويات
  1. GenPark Bloom Filter URL Dedup Crawler
  2. 🌟 Key Features
  3. 🚀 Installation & Usage
  4. 📄 License

GenPark Bloom Filter URL Dedup Crawler

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler ingestion.

Part of the GenPark AI Agent Skills Ecosystem.

🌟 Key Features

  • 100% Python Standard Library: Zero third-party runtime dependencies.
  • MCP Native: Plugs directly into Claude Desktop, Cursor, LobeChat, and autonomous agent DAGs.
  • Production Resilience: Strict schema conformance, zero data loss, enterprise hardened.

🚀 Installation & Usage

Run as an MCP server:

python mcp_server.py

Use directly as a library:

from client import *

See example_usage.py for comprehensive integration demonstrations.

📄 License

MIT License. Maintained by GenPark AI.

الأسئلة الشائعة

ما هو GenPark Bloom Filter URL Dedup Crawler؟

In-memory Bloom filter for URL and document hash deduplication preventing redundant web crawler inge

كيف أثبّت GenPark Bloom Filter URL Dedup Crawler؟

اتبع خطوات التثبيت في توثيقه المعروض في هذه الصفحة وفي مستودعه.

هل يحتاج GenPark Bloom Filter URL Dedup Crawler إلى مفتاح API؟

لا يذكر إدراجه في السجل أي مفتاح أو سر إلزامي. قد تتطلب بعض الميزات حسابًا لدى الخدمة التي يتصل بها.

هل GenPark Bloom Filter URL Dedup Crawler مفتوح المصدر؟

شيفرته علنية على GitHub، لكن المستودع لا يعلن ترخيصًا قياسيًا.

من يصون GenPark Bloom Filter URL Dedup Crawler؟

ينشره alphaparkinc. يدرجه AI.tn لكنه لا يصونه ولا يوصي به.

من سجل MCP الرسمي. الإدراج ليس توصية: راجع شيفرة الخادم وصلاحياته قبل منحه الوصول إلى بياناتك.