firecrawl-reference-architecture

Skill do implementacji produkcyjnej architektury Firecrawl z pipelinami scrapingu, crawlingu, mapowania i ekstrakcji. Używaj przy projektowaniu nowych integracji Firecrawl, przeglądaniu struktury projektu lub budowaniu systemów ingestii treści dla aplikacji RAG i baz wiedzy. Obejmuje trzy warstwy: scraping na żądanie, zaplanowane pipeline'y crawlingu oraz ingestię w czasie rzeczywistym. Skill pracuje ze wszystkimi czterema endpointami Firecrawl.

1. Zainstaluj skill w swoim środowisku Claude Code, Codex lub OpenClaw, dodając go do katalogu skills.
2. Wyzwól skill frazami takimi jak "firecrawl architecture", "firecrawl project structure", "firecrawl pipeline", "firecrawl RAG" lub "firecrawl knowledge base".
3. Skill przeanalizuje Twoją strukturę projektu za pomocą narzędzi Read i Grep, aby zrozumieć obecny układ katalogów i pliki konfiguracyjne.
4. Otrzymasz rekomendacje dotyczące implementacji trzech warstw architektury: na żądanie (scrapeUrl dla pojedynczych stron), zaplanowanej (crawlUrl dla wielu stron) oraz ingestii RAG (extract z LLM i JSON).
5. Zastosuj sugerowaną warstwę przetwarzania treści, która obejmuje czyszczenie markdown, walidację, deduplikację i chunking danych z Firecrawl.
6. Skonfiguruj warstwę przechowywania i wyjścia: wybierz między plikami, bazą danych, magazynem wektorowym lub wyszukiwaniem, w zależności od potrzeb Twojej aplikacji RAG.