community-automations/data-forge-url

Araştırma ve İstihbarat

PublicClaude otomasyonu

URL Veri Çıkarıcı

Bir web sayfasından yapılandırılmış veri çekmek genelde, site değişir değişmez bozulan tek seferlik bir scraper yazmak demektir. Bu çıkarıcı bunun yerine bir URL ile bir şema alır.

sonnet4 günFirecrawlPlaywrightOpenAIPostgres
ClaudeClaude
ROI for
README.md

Bu otomasyon neden işinize yarar

Bir web sayfasından yapılandırılmış veri çekmek genelde, site değişir değişmez bozulan tek seferlik bir scraper yazmak demektir. Bu çıkarıcı bunun yerine bir URL ile bir şema alır.

İstediğiniz alanları tarif edersiniz; o da sayfayı render eder, öğeleri eşler ve temiz, doğrulanmış kayıtlar döndürür. Siteyi değiştirmek için şemayı değiştirin; yeni bir scraper yazmaya gerek yok ve sayfada bulunmayan her alan uydurulmak yerine işaretlenir.

Nasıl çalışır

    • Read

      Used at step 01 to kick off the pipeline.

    • Write

      Used at step 01 to kick off the pipeline.

    • WebFetch

      Used at step 01 to kick off the pipeline.

    • WebSearch

      Used at step 01 to kick off the pipeline.

Örnek çıktı

json
// Sample output
// (generated when the pipeline finishes)

Given a URL and a target schema, extract matching records as JSON conforming to the schema; set missing fields null and never invent values.

Unlock the rest

The full agent definition, install snippet, and starter task are gated for community members.

Members get the full `.md` agent file, the npm / pnpm install one-liners, a starter prompt that we've tuned against real runs, and the open-source repo when this automation ships there. One email, magic link, done.