Toolverse
All skills

brightdata

by openclaw

Web scraping and search via Bright Data API. Requires BRIGHTDATA_API_KEY and BRIGHTDATA_UNLOCKER_ZONE. Use for scraping any webpage as markdown (bypassing bot detection/CAPTCHA) or searching Google with structured results.

Installation

Pick a client and clone the repository into its skills directory.

Installation

Quick info

Author
openclaw
Category
Backend
Views
5

About this skill

Web scraping and search via Bright Data API. Requires BRIGHTDATA_API_KEY and BRIGHTDATA_UNLOCKER_ZONE. Use for scraping any webpage as markdown (bypassing bot detection/CAPTCHA) or searching Google with structured results.

How to use

  1. Załóż konto na Bright Data (brightdata.com) i zaloguj się do panelu kontrolnego, aby uzyskać swój klucz API.

  2. W panelu Bright Data utwórz nową strefę Web Unlocker, klikając przycisk "Add" w górnym prawym rogu i wybierając typ "Unlocker zone". Zapamiętaj nazwę strefy.

  3. Ustaw zmienne środowiskowe na swoim komputerze: BRIGHTDATA_API_KEY (twój klucz API) oraz BRIGHTDATA_UNLOCKER_ZONE (nazwa utworzonej strefy). W systemach Linux/macOS użyj komendy export, na Windows ustaw zmienne w ustawieniach systemowych.

  4. Aby pobrać zawartość strony internetowej, uruchom skrypt scrape.sh z adresem URL jako argument. Skill zwróci czystą zawartość strony w formacie markdown, gotową do dalszego przetwarzania.

  5. Aby wyszukać informacje w Google, użyj skryptu search.sh z zapytaniem jako argument. Otrzymasz strukturalny wynik JSON zawierający listę wyników organicznych z polami: link, title i description.

  6. Dla wyszukiwań wielostronicowych dodaj parametr cursor (numer strony, zaczynając od 0) do komendy search.sh, aby przejść do następnych stron wyników.

Related skills

api-design-principles

by wshobson

Master REST and GraphQL API design principles to build intuitive, scalable, and maintainable APIs that delight developers. Use when designing new APIs, reviewing API specifications, or establishing API design standards.

Backend
50146

architecture-decision-records

by wshobson

Write and maintain Architecture Decision Records (ADRs) following best practices for technical decision documentation. Use when documenting significant technical decisions, reviewing past architectural choices, or establishing decision processes.

Backend
29130

humanizer

by davila7

Remove signs of AI-generated writing from text. Use when editing or reviewing\ntext to make it sound more natural and human-written. Based on Wikipedia's\ncomprehensive \

Backend
2873

sql-optimization-patterns

by wshobson

Master SQL query optimization, indexing strategies, and EXPLAIN analysis to dramatically improve database performance and eliminate slow queries. Use when debugging slow queries, designing database schemas, or optimizing application performance.

Backend
40163

dotnet-backend

by anton-abyzov

.NET/C# backend developer for ASP.NET Core APIs with Entity Framework Core. Builds REST APIs, minimal APIs, gRPC services, authentication with Identity/JWT, authorization, database operations, background services, SignalR real-time features. Activates for: .NET, C#, ASP.NET

Backend
92296

literature-review

by K-Dense-AI

Conduct comprehensive, systematic literature reviews using multiple academic databases (PubMed, arXiv, bioRxiv, Semantic Scholar, etc.). This skill should be used when conducting systematic literature reviews, meta-analyses, research synthesis, or comprehensive literature

Backend
238507