Các job ETL nặng về text thường hỏng trong im lặng: vài dòng lỗi định dạng, một nguồn chập chờn, và bạn chỉ phát hiện ra nhiều ngày sau khi báo cáo trông sai sai. Runner này giúp mọi batch đều có thể truy vết.
sonnet1 tuầnPythonPostgresS3Slack
Claude
85ROI
91Scale
$3.3k93Saved
ROI for
README.md
Tại sao chọn subagent này
Các job ETL nặng về text thường hỏng trong im lặng: vài dòng lỗi định dạng, một nguồn chập chờn, và bạn chỉ phát hiện ra nhiều ngày sau khi báo cáo trông sai sai. Runner này giúp mọi batch đều có thể truy vết.
Nó kiểm tra đối chiếu schema, làm sạch và bổ sung dữ liệu text, thử lại các lỗi tạm thời với backoff, và cách ly những bản ghi liên tục thất bại thay vì xoá bỏ. Mỗi lần chạy kết thúc bằng một nhật ký kiểm đếm ghi rõ bao nhiêu bản ghi đầu vào, bao nhiêu bị từ chối, và bao nhiêu đã cập bến, để bạn thực sự tin được vào con số.
Cách vận hành
Used at step 01 to kick off the pipeline.
Write
Used at step 01 to kick off the pipeline.
WebFetch
Used at step 01 to kick off the pipeline.
WebSearch
Used at step 01 to kick off the pipeline.
Biến đổi các trường văn bản theo quy tắc làm sạch và làm giàu đã định nghĩa, bỏ qua các dòng không vượt qua xác thực.
pending
Thử lại các lỗi tạm thời với cơ chế backoff và cách ly các bản ghi bị lỗi lặp lại.
pending
Nạp các bản ghi sạch vào kho lưu trữ đích và ghi tóm tắt phiên chạy bao gồm số lượng và các bản ghi bị từ chối.
pending
Ví dụ đầu ra
json
// Sample output
// (generated when the pipeline finishes)
Given a source batch, run extract-transform-load with retries and return a JSON audit log of rows read, transformed, retried, quarantined, and loaded.
Unlock the rest
The full agent definition, install snippet, and starter task are gated for community members.
Members get the full `.md` agent file, the npm / pnpm install one-liners, a starter prompt that we've tuned against real runs, and the open-source repo when this automation ships there. One email, magic link, done.