DevOps & Code

PublicSous-agent Claude

Pipeline ETL

Les jobs ETL riches en texte échouent en silence : quelques lignes mal formées, une source instable, et vous l'apprenez des jours plus tard quand un rapport semble faux. Ce runner rend chaque lot traçable.

sonnet1 semainePythonPostgresS3Slack
ClaudeClaude
ROI for
README.md

Pourquoi ce sous-agent

Les jobs ETL riches en texte échouent en silence : quelques lignes mal formées, une source instable, et vous l'apprenez des jours plus tard quand un rapport semble faux. Ce runner rend chaque lot traçable.

Il valide contre le schéma, nettoie et enrichit le texte, relance les erreurs transitoires avec un backoff et met en quarantaine les enregistrements qui continuent d'échouer plutôt que de les jeter. Chaque run se termine par un journal d'audit qui compte ce qui est entré, ce qui a été rejeté et ce qui a atterri, pour que vous puissiez faire confiance aux chiffres.

Comment il s'exécute

    • Read

      Used at step 01 to kick off the pipeline.

    • Write

      Used at step 01 to kick off the pipeline.

    • WebFetch

      Used at step 01 to kick off the pipeline.

    • WebSearch

      Used at step 01 to kick off the pipeline.

Exemple de sortie

json
// Sample output
// (generated when the pipeline finishes)

Given a source batch, run extract-transform-load with retries and return a JSON audit log of rows read, transformed, retried, quarantined, and loaded.

Unlock the rest

The full agent definition, install snippet, and starter task are gated for community members.

Members get the full `.md` agent file, the npm / pnpm install one-liners, a starter prompt that we've tuned against real runs, and the open-source repo when this automation ships there. One email, magic link, done.