Toolverse
Wszystkie skille

brightdata-web-mcp

autor: patchy631

Pobieraj dane ze stron internetowych, omijaj blokady i CAPTCHA, automatyzuj przeglądarkę

Instalacja

Wybierz klienta i sklonuj repozytorium do odpowiedniego katalogu skilli.

Instalacja

Szybkie info

Kategoria
Frontend
Wyświetlenia
42

O skillu

Skill do niezawodnego dostępu do sieci web w agentach MCP. Automatycznie radzi sobie z zabezpieczeniami antybot, CAPTCHA i dynamiczną zawartością. Wyszukuj wyniki Google, Bing i Yandex, pobieraj strony jako Markdown lub HTML, wyciągaj ustrukturyzowane dane z produktów Amazon, eBay, mediów społecznościowych. Obsługuje wyszukiwanie równoległe, batch scraping i przeglądarkę automatyczną dla stron opartych na JavaScript.

Jak używać

  1. Uzyskaj token API od Bright Data i przygotuj go do konfiguracji. Skill dostępny jest zdalnie bez instalacji lokalnej — możesz połączyć się bezpośrednio z endpointem SSE na https://mcp.brightdata.com/sse?token=TWÓJ_TOKEN lub endpointem HTTP na https://mcp.brightdata.com/mcp?token=TWÓJ_TOKEN.

  2. Aby wyszukać w sieci, użyj narzędzia search_engine z zapytaniem i wyborem wyszukiwarki (Google, Bing, Yandex). Wyniki zwracane są w formacie JSON dla Google i Markdown dla pozostałych. Do paginacji użyj parametru cursor.

  3. Do pobrania zawartości strony jako czystego tekstu użyj narzędzia scrape_as_markdown, podając URL artykułu lub strony. To narzędzie dostępne jest w trybie darmowym (Rapid).

  4. Aby wyciągnąć ustrukturyzowane dane z produktów lub stron, użyj narzędzia extract z URL-em i promptem opisującym, co chcesz pobrać (np. nazwa, cena, dostępność). To wymaga trybu Pro/advanced_scraping.

  5. Dla stron z dynamiczną zawartością załadowaną przez JavaScript użyj narzędzi scraping_browser_* z trybu Pro/browser, które automatycznie obsługują interakcje przeglądarki.

  6. Jeśli potrzebujesz przetwarzać wiele stron jednocześnie, użyj narzędzi batch (search_engine_batch, scrape_batch) dostępnych w trybie Pro/advanced_scraping, aby przyspieszić pracę.

Podobne skille