community-automations/data-forge-url

リサーチ＆インテリジェンス

PublicClaude サブエージェント

URL データ抽出ツール

Web ページから構造化データを取得するには、通常、サイトが変わった途端に壊れる使い捨てのスクレイパーを書く必要があります。このエクストラクターは代わりに URL とスキーマを受け取ります。

sonnet4日FirecrawlPlaywrightOpenAIPostgres
ClaudeClaude
ROI for
README.md

このサブエージェントを選ぶ理由

Web ページから構造化データを取得するには、通常、サイトが変わった途端に壊れる使い捨てのスクレイパーを書く必要があります。このエクストラクターは代わりに URL とスキーマを受け取ります。

取得したいフィールドを指定すれば、ページをレンダリングして要素をマッピングし、クリーンで検証済みのレコードを返します。スキーマを切り替えれば別のサイトにも対応でき、新しいスクレイパーを書く必要はありません。ページに存在しないフィールドはでっち上げず、フラグを立てて明示します。

動作の流れ

    • Read

      Used at step 01 to kick off the pipeline.

    • Write

      Used at step 01 to kick off the pipeline.

    • WebFetch

      Used at step 01 to kick off the pipeline.

    • WebSearch

      Used at step 01 to kick off the pipeline.

出力サンプル

json
// Sample output
// (generated when the pipeline finishes)

Given a URL and a target schema, extract matching records as JSON conforming to the schema; set missing fields null and never invent values.

Unlock the rest

The full agent definition, install snippet, and starter task are gated for community members.

Members get the full `.md` agent file, the npm / pnpm install one-liners, a starter prompt that we've tuned against real runs, and the open-source repo when this automation ships there. One email, magic link, done.