community-automations/data-forge-url

Research og innsikt

PublicClaude-subagent

URL-datauthenter

Å hente strukturerte data fra en nettside betyr som regel å skrive en engangs-scraper som ryker i det øyeblikket siden endres. Denne uttrekkeren tar i stedet en URL og et skjema.

sonnet4 dagerFirecrawlPlaywrightOpenAIPostgres
ClaudeClaude
ROI for
README.md

Hvorfor denne subagenten

Å hente strukturerte data fra en nettside betyr som regel å skrive en engangs-scraper som ryker i det øyeblikket siden endres. Denne uttrekkeren tar i stedet en URL og et skjema.

Du beskriver feltene du vil ha, så rendrer den siden, mapper elementene og returnerer rene, validerte poster. Bytt side ved å bytte skjema; ingen ny scraper å skrive, og felt siden mangler blir flagget i stedet for diktet opp.

Slik kjører den

    • Read

      Used at step 01 to kick off the pipeline.

    • Write

      Used at step 01 to kick off the pipeline.

    • WebFetch

      Used at step 01 to kick off the pipeline.

    • WebSearch

      Used at step 01 to kick off the pipeline.

Eksempel på output

json
// Sample output
// (generated when the pipeline finishes)

Given a URL and a target schema, extract matching records as JSON conforming to the schema; set missing fields null and never invent values.

Unlock the rest

The full agent definition, install snippet, and starter task are gated for community members.

Members get the full `.md` agent file, the npm / pnpm install one-liners, a starter prompt that we've tuned against real runs, and the open-source repo when this automation ships there. One email, magic link, done.