brightdata-core-workflow-b
/brightdata-core-workflow-b
Analizuje i obsługuje asynchroniczny cykl życia migawek Web Scraper API Bright Data z kontrolą stanów końcowych i dostarczania, w tym odpytywanie migawki i pobieranie dużych wyników.
- Autor
- jeremylongshore ↗
- Repozytorium
- tons-of-skills-marketplace ↗
- Licencja
- MIT
- Ostatnia zmiana repozytorium
- 26.10.2026
Ocena i bezpieczeństwo
- Pliki w paczce
- 2
- Skrypty
- 0
- Komentarze HTML
- 0
- Adresy URL w SKILL.md
- 5
Brak sygnałów. Repozytorium zmienione 26.10.2026, bez odwołań do wycofanych modeli i API.
MIT, otwarta: można używać i zmieniać, z zachowaniem informacji o autorze.
Co robi i kiedy
Analizuje i obsługuje asynchroniczny cykl życia migawek Web Scraper API Bright Data z kontrolą stanów końcowych i dostarczania, w tym odpytywanie migawki i pobieranie dużych wyników.
Wyzwalacze z opisu
Argumenty
/brightdata-core-workflow-b [dataset-run-manifest]
Oryginalny opis (EN)
Analyze and operate the Bright Data Web Scraper API async snapshot lifecycle with terminal-state and delivery controls. Use when collecting an approved batch, polling a snapshot, or downloading large structured results. Trigger with: "run a Bright Data dataset job", "poll a Bright Data snapshot", "download Web Scraper API results".
Jak działa
- Overview
- Prerequisites
- Instructions
- Tool Discipline
- Output
- Examples
- Error Handling
- Resources
Podgląd SKILL.md
--- name: brightdata-core-workflow-b description: 'Analyze and operate the Bright Data Web Scraper API async snapshot lifecycle with terminal-state and delivery controls. Use when collecting an approved batch, polling a snapshot, or downloading large structured results. Trigger with: "run a Bright Data dataset job", "poll a Bright Data snapshot", "download Web Scraper API results".' allowed-tools: Read, Grep, Write, Edit, Bash(curl:*) version: 2.0.0 argument-hint: "[dataset-run-manifest]" model: inherit effort: high license: MIT author: Jeremy Longshore <jeremy@intentsolutions.io> tags: - saas - web-data - bright-data - core-workflow-b - operations compatibility: 'Requires an approved Bright Data account or offline fixtures, current Bright Data documentation, and an authorized public-data collection purpose' --- # Bright Data Async Snapshot Pipeline ## Overview Implement the documented trigger, progress, and download lifecycle as a state machine. Keep dataset identifiers and approved inputs separate from the API key; cap polling, validate terminal states, and stream results rather than loading arbitrary payloads into memory. ## Prerequisites - A reviewed dataset ID and approved public input manifest - A named-user Bright Data API key in the runtime secret manager - A retention, schema, maximum-record, and maximum-byte policy ## Instructions ### Step 1: Validate the manifest Read the requested dataset/inputs and Grep for disallowed target classes or fields. Hash the approved input manifest before submission. ### Step 2: Trigger once Use Bash(curl:*) only against the fixed Bright Data API origin with the API key as a Bearer header. ```bash curl --fail-with-body --request POST \ 'https://api.brightdata.com/datasets/v3/trigger?dataset_id=DATASET_ID' \ --header "Authorization: Bearer $BRIGHTDATA_API_KEY" \ --header 'Content-Type: application/json' \ --data-binary @approved-inputs.json ``` ### Step 3: Poll deliberately Persist the returned `snapshot_id`; poll `GET /datasets/v3/progress/SNAPSHOT_ID` with bounded attempts and provider-directed delay. Handle `ready`, `failed`, empty, expired, and still-building states explicitly. ### Step 4: Download and verify Stream `GET /datasets/v3/snapshot/SNAPSHOT_ID` in the approved format. Use parts for large results, hold format/compression parameters constant, enforce byte/record ceilings, and validate the schema before promotion. ## Tool Discipline Use Read and Grep for policy and schema checks. Use Write and Edit only for the manifest, state machine, tests, and redacted receipt. Use Bash(curl:*) for fixed-origin Bright Data API calls after authorization; never print the Bearer value or raw result data. ## Output - Input-manifest hash and snapshot identifier - Bounded state-transition log without target data or credentials - Schema/size validation and a promoted-or-quarantined result ## Examples Submit a small approved URL batch, record the returned snapshot ID, poll until `ready`, and stream JSON to quarantine. Reject a response whose schema, record count, or byte count exceeds the manifest even if the provider marks it ready. ## Error Handling | Failure | Meaning | Response | |---------|---------|----------| | 400 validation response | Dataset ID or input shape is invalid | Correct the manifest; do not retry unchanged input | | 429 or too many jobs | Tenant or dataset concurrency is exhausted | Pause new triggers and wait for owned jobs | | Snapshot expired or empty | Result cannot be promoted | Trigger a newly approved run or investigate inputs | ## Resources - [Web Scraper API asynchronous requests](https://docs.brightdata.com/api-reference/rest-api/scraper/asynchronous-requests) - [Download snapshot](https://docs.brightdata.com/api-reference/scrapers/delivery-apis/download-snapshot) - [Scraper async requests guide](https://docs.brightdata.com/products/scrapers/scrapers-library/async-requests) - [Authentication and API keys](https://docs.brightdata.com/api-reference/authentication)
Pliki w paczce (2)
- SKILL.md 4 KB
- references/official-docs.md 1 KB
Wersje
W bazie nie ma innych skilli o nazwie brightdata-core-workflow-b.
Identyczna treść występuje jeszcze w 1 innych folderach na GitHubie. Tu pokazujemy jedną, najlepiej ocenioną kopię.
Migawka bazy z 13.11.2026 · wersja paczki 1e044dce97aa (skrót SHA-256 całej paczki)
Pobrania w ostatnich 30 dniach: 0 · ranking
Zgłoś problem z tym skillem: szkodliwa treść, błędny opis albo prośba autora o usunięcie.
Podobne skille
- 100brightdata-core-workflow-a
Analizuje zatwierdzone zadanie na stronie renderowanej w JavaScript przez Bright Data Browser API, z ograniczoną interakcją i dowodami, gdy zwykłe żądanie statyczne nie wystarcza. - 100brightdata-prod-checklist
Bramkuje integrację z Bright Data przed produkcją na podstawie dowodów autoryzacji, niezawodności, kosztów, danych i wycofania, przy promowaniu proxy, Browser API, scrapera, migawek lub dostarczania. - 90brightdata-sdk
Pomaga pisać kod wołający Bright Data przez SDK w Pythonie i Node.js: Web Scraper API, SERP i Web Unlocker w zadaniach cyklicznych. - 100brightdata-cli
Uruchamia zadania Bright Data z terminala przez CLI bdata do jednorazowych sprawdzeń stron, wyszukiwań i rachunków. - 95BrightData
Pobiera treść ze stron URL stopniowo, od prostych metod po usługi Bright Data. - 95BrightData
Pobiera treść z adresów URL, a przy trudnych stronach korzysta z usług Bright Data.