firecrawl-policy-guardrails
Automatyczne zasady bezpieczeństwa dla web scrapingu — blokady domen, limity kredytów i zgodność z robots.txt
Instalacja
Wybierz klienta i sklonuj repozytorium do odpowiedniego katalogu skilli.
Instalacja
O skillu
Skill do implementacji polityk bezpieczeństwa dla Firecrawl. Chroni Twoje scraping pipeline'y przed ryzykami prawnymi, etycznymi i finansowymi. Konfiguruj listy zablokowanych domen (Facebook, LinkedIn, Twitter), ustawiaj budżety kredytów, filtruj treści wrażliwe i egzekwuj limity zapytań na domenę. Automatycznie sprawdzaj zgodność z robots.txt i Terms of Service. Idealny dla zespołów integrujących Firecrawl w produkcji.
Jak używać
Zainstaluj skill w swoim projekcie Claude Code, Codex lub OpenClaw. Skill wymaga dostępu do narzędzi Read, Write, Edit i Bash z uprawnieniami npx.
Ustaw zmienną środowiskową FIRECRAWL_API_KEY z kluczem API Firecrawl, który będzie używany do inicjalizacji FirecrawlApp.
Wyzwól skill frazami takimi jak "firecrawl policy", "firecrawl guardrails", "firecrawl domain blocklist", "firecrawl scraping rules" lub "firecrawl compliance".
Zdefiniuj politykę domenową poprzez BLOCKED_DOMAINS (domeny zakazane w ToS, np. Facebook, LinkedIn) i SENSITIVE_DOMAINS (domeny wrażliwe, np. .gov, .mil, .edu). Skill automatycznie waliduje URL-e przed scraping'iem.
Skonfiguruj limity kredytów i rate limiting na domenę, aby uniknąć przypadkowego spalenia budżetu. Skill egzekwuje te ograniczenia na każde żądanie.
Uruchom scraping z włączonymi guardrails — skill będzie blokować żądania do zakazanych domen, sprawdzać robots.txt i wymuszać limity zapytań zgodnie z Twoją polityką.