API Newscatcher CatchAll: Saya Menguji Pencarian Web Berbasis Recall untuk Agen AI

API Newscatcher CatchAll: Saya Menguji Pencarian Web Berbasis Recall untuk Agen AI

Saya mengajukan satu pertanyaan keras kepala kepada API Newscatcher CatchAll: temukan setiap kebakaran gudang di Eropa kuartal ini. Bukan sepuluh teratas. Semuanya. API pencarian normal akan memberikan Anda halaman tautan yang diberi peringkat dan secara diam-diam membuang ekor panjang (long tail), yang tidak masalah untuk "pizza terbaik di dekat saya" tetapi tidak berguna untuk tugas enumerasi. Sekitar 15 menit kemudian, dalam Mode Base, CatchAll kembali dengan peristiwa dari pers regional dan publikasi perdagangan yang tidak pernah muncul dari API berbasis peringkat dalam pengujian best-ai-search-apis-2026 kami. Setiap hasil datang sebagai satu objek JSON terstruktur, bukan sekadar tautan. Kesenjangan itulah inti ceritanya.

Berikut adalah versi singkatnya sebelum kita masuk ke detail teknisnya.

Poin-Poin Utama

• CatchAll adalah API pencarian web berbasis recall: ia mengembalikan catatan peristiwa terstruktur, bukan SERP (halaman hasil mesin pencari) yang diberi peringkat.
• Newscatcher melaporkan recall 79,8% dan F1 0,705 di seluruh 32 kueri; halaman utama membulatkan angka ini menjadi 86%.
• Dua mode: Lite (detik, batas sekitar 100 hasil) dan Base (asinkron, sekitar 15 menit, tanpa batas).
• Terbaik untuk tugas enumerasi (kepatuhan, intelijen kompetitif, pemantauan rantai pasok); ini bukan alat pelacak peringkat SERP.

Pencarian berbasis recall mengoptimalkan untuk menemukan semuanya, sedangkan pencarian berbasis peringkat mengoptimalkan untuk mengurutkan beberapa hal yang ditemukannya. Simpan satu kalimat itu di pikiran Anda dan sisa ulasan ini akan menjadi jelas.

Apa Itu CatchAll? (Pencarian Web Berbasis Recall, Dijelaskan)

CatchAll adalah API pencarian web berbasis recall dari Newscatcher: alih-alih daftar peringkat dari ~10 tautan teratas, ia mengembalikan sekumpulan catatan peristiwa terstruktur yang telah dideduplikasi, di mana masing-masing adalah satu objek JSON dengan kutipan dan entitas yang diekstraksi. Berbasis recall berarti tujuannya adalah kelengkapan, menemukan setiap peristiwa yang relevan, bukan mengurutkan daftar pendek berdasarkan relevansi.

Newscatcher menjelaskannya dengan intuisi yang tegas: jika ada 200 peristiwa valid dan sistem Anda hanya menampilkan 5, maka recall Anda adalah 2,5%. Untuk "apa laptop terbaik," itu tidak masalah. Untuk "setiap tindakan regulasi terhadap fintech UE tahun ini," jawaban 2,5% lebih buruk daripada tidak berguna karena Anda tidak bisa melihat apa yang terlewat.

Itulah kesenjangan kategori yang ditargetkan oleh CatchAll, dan penting untuk dipahami bahkan jika Anda tidak pernah mendaftar. Pitch peluncuran YC menyebutnya sebagai "API pencarian web berbasis recall," dan Anda dapat membaca posisi produknya langsung dari halaman produk Newscatcher's CatchAll Web Search API. Pembingkaian yang jujur: API SERP menjawab "apa yang harus saya baca pertama kali?" CatchAll menjawab "apa daftar lengkapnya?"

Cara Kerja CatchAll: Pipeline Pengambilan + Validasi

CatchAll menjalankan pipeline lima tahap: perencanaan kueri menulis ulang prompt Anda menjadi beberapa sudut pengambilan, pengambilan skala besar memindai 50.000+ halaman per pekerjaan, algoritma Leiden mengelompokkan halaman terkait menjadi peristiwa tunggal, LLM memvalidasi setiap kluster terhadap kueri Anda, dan yang lolos kembali sebagai JSON terstruktur. Recall berasal dari pemindaian; presisi berasal dari validasi.

Mari kita uraikan secara cepat:

1. Perencanaan kueri. Satu kueri Anda menjadi beberapa prompt pengambilan yang mencakup berbagai frasa dan jenis peristiwa, sehingga "kebakaran gudang" juga menangkap "kobaran api di depot logistik."
2. Pengambilan skala besar. Newscatcher menyatakan bahwa satu pekerjaan menarik 50.000+ halaman dengan kecepatan sekitar 10.000 halaman per menit tanpa batas hasil, menjangkau pers regional, publikasi perdagangan, dan pengajuan regulasi yang dikubur oleh SERP arus utama.
3. Pengelompokan (Clustering). Algoritma Leiden mengelompokkan halaman yang terhubung padat menjadi komunitas. Dalam istilah sederhana: 30 artikel tentang kebakaran Rotterdam yang sama runtuh menjadi satu peristiwa, bukan 30 baris.
4. Validasi LLM. Setiap kluster diberi skor terhadap kueri Anda, dan yang tidak relevan dibuang. Tahap ini membutuhkan panggilan LLM nyata, jadi dalam tumpukan agen produksi Anda ingin merutekannya melalui LLM gateway untuk mengendalikan pengeluaran dan fallback.
5. Output terstruktur. Satu objek JSON per peristiwa yang divalidasi, dengan skema dinamis.

Newscatcher melaporkan mengindeks lebih dari 2 juta peristiwa dunia nyata setiap hari, dengan peristiwa baru muncul dalam hitungan jam. Penulisan teknis, "The Architecture of Completeness," mencakup internal Leiden dan validasi jika Anda ingin mendalami detailnya.

Di sinilah uji coba kebakaran gudang saya berada. Saya menjalankan kueri enumerasi dalam Mode Base, pekerjaan tersebut memakan waktu sekitar 15 menit, dan nilainya muncul tepat di mana pipeline menjanjikannya: sumber regional dan perdagangan, dikelompokkan menjadi peristiwa diskrit, yang akan dikubur oleh SERP berperingkat di bawah lipatan atau dilewati sepenuhnya.

Fitur Utama: Monitor, Watchlist & Ekstraksi Peristiwa

Selain pencarian sekali jalan, CatchAll menyediakan Monitor dan Watchlist. Monitor adalah jalankan ulang terjadwal (minimum per jam) yang hanya mengembalikan peristiwa baru yang telah dideduplikasi sejak jalankan terakhir. Watchlist memfilter berdasarkan entitas, dengan skor relevansi 1-10 dan resolusi entitas yang mencocokkan perusahaan yang sama di berbagai bahasa dan yurisdiksi.

Monitor mengubah pencarian sekali jalan menjadi pengawasan berkelanjutan: setiap jalankan hanya mengembalikan peristiwa yang baru sejak yang terakhir. Itulah perbedaan antara "cari di web hari ini" dan "beri tahu saya saat sesuatu berubah."

Satu catatan jujur tentang pembingkaian "API pemantauan peristiwa waktu nyata": "waktu nyata" di sini berarti jalankan ulang per jam, bukan streaming sub-detik. Jika Anda memerlukan notifikasi push milidetik, ini bukan alatnya. Untuk tim kepatuhan yang memeriksa dua kali sehari, per jam sudah lebih dari cukup. Company Watchlist adalah unggulan untuk intelijen kompetitif, karena ia menyelesaikan "Acme GmbH," "Acme Inc," dan "Acme Holdings" menjadi satu entitas yang dilacak daripada tiga yang berisik.

Output JSON Terstruktur (Dengan Contoh Nyata)

Setiap hasil adalah satu peristiwa sebagai satu objek JSON: cluster_id, title, skor relevance, array entities, dan array source_citations. Tidak ada scraping HTML, tidak ada daftar tautan untuk diurai. Inilah yang membuat CatchAll menjadi API pencarian web terstruktur yang sejati, bukan sekadar pembungkus SERP.

Berikut adalah peristiwa yang dipotong dari jalankan kebakaran gudang saya, sedikit dibersihkan tetapi bentuknya asli:

{
  "events": [
    {
      "cluster_id": "evt_8f21a",
      "title": "Fire at logistics warehouse near Rotterdam",
      "relevance": 9,
      "entities": [
        {"name": "Rotterdam", "type": "location"},
        {"name": "Maasvlakte", "type": "facility"}
      ],
      "source_citations": [
        {
          "url": "https://...",
          "publisher": "regional trade press",
          "published_at": "2026-..."
        }
      ]
    }
  ]
}

Perhatikan bahwa array source_citations menunjuk ke outlet perdagangan regional, tepat jenis sumber yang diprioritaskan rendah oleh API berbasis peringkat. Karena setiap peristiwa sudah terstruktur, Anda dapat menjatuhkan catatan yang divalidasi langsung ke dalam RAG pipeline atau menyimpan dan menyematkannya dalam database vektor tanpa langkah scraping atau pembersihan di antaranya. Langkah yang tersimpan itu adalah kemenangan produktivitas yang tenang.

Bagaimana Memanggil CatchAll di Python? (Panduan Cepat Kode)

Anda mendapatkan kunci API, POST kueri Anda ke /v3/search dengan header x-api-token, dan urai array events. Itulah seluruh loopnya. Berikut adalah panggilan Python minimal:

import requests

resp = requests.post(
    "https://api.newscatcherapi.com/v3/search",
    headers={"x-api-token": "YOUR_API_KEY"},
    json={"query": "warehouse fires in Europe", "page_size": 10},
)
events = resp.json()["events"]
for ev in events:
    print(ev["title"], "—", ev["relevance"])

Tip pro dan jebakan dalam satu: Mode Lite kembali dalam hitungan detik tetapi dibatasi sekitar 100 hasil, sementara Mode Base bersifat asinkron dan memakan waktu sekitar 15 menit untuk pekerjaan mendalam. Untuk Base, Anda mengirim dan melakukan polling daripada memblokir pada satu panggilan, jadi desain agen Anda untuk fire-and-check, bukan menunggu. Jika Anda menghubungkan CatchAll ke dalam agen, Anda biasanya akan memanggilnya sebagai alat melalui function calling. Konfirmasi parameter permintaan yang tepat dan flag Lite-versus-Base terhadap dokumentasi CatchAll sebelum Anda meluncurkannya; header auth adalah x-api-token.

Berapa Biaya CatchAll? Apakah Ada Tingkat Gratis?

Harga berbasis penggunaan dan bayar-per-catatan-divalidasi, sekitar $0,10 per catatan, dan nol hasil berarti nol biaya. Ada tingkat gratis sekitar 2.000 kredit saat pendaftaran ditambah sekitar 10 pencarian per bulan, tanpa memerlukan kartu, sehingga Anda dapat menjalankan tes enumerasi nyata sebelum berkomitmen.

Model nol-hasil-nol-biaya itu penting untuk pekerjaan enumerasi: kueri yang secara sah tidak memiliki peristiwa yang cocok tidak membakar anggaran. Pada pertanyaan umum apakah API pencarian Google gratis, pencarian native Google dan Bing bukanlah ini. Mereka mengembalikan tautan berperingkat, bukan peristiwa terstruktur yang divalidasi, dan API Pencarian Bing sedang dihentikan, yang merupakan bagian dari mengapa indeks independen sedang mengalami momen.

Kasus Penggunaan Dunia Nyata

CatchAll cocok untuk setiap pekerjaan di mana melewatkan satu item adalah mode kegagalan. Pelacakan kepatuhan dan regulasi bergantung pada Monitor plus cakupan pengajuan regulasinya. Intelijen kompetitif berjalan pada Company Watchlist. Pemantauan rantai pasok adalah pola kebakaran gudang, menonton peristiwa gangguan. Riset pasar menggunakan enumerasi atas pers perdagangan.

Polanya di keempatnya: Anda membangun daftar lengkap, lalu bertindak atasnya, sering kali di dalam alur kerja API pencarian web untuk agen AI yang otomatis. Beberapa bentuk konkret:

• Kepatuhan: Monitor berdiri pada tindakan penegakan hukum di sektor Anda, per jam.
• Intelijen kompetitif: Watchlist pada tiga entitas rival, diselesaikan lintas nama hukum mereka.
• Rantai pasok: Enumerasi peristiwa gangguan (kebakaran, pemogokan, penarikan produk) di dekat fasilitas pemasok Anda.
• Riset pasar: Pemindaian Mode Base satu kali dari setiap peluncuran produk di niche tertentu kuartal ini.

Tolok Ukur: Apakah CatchAll Benar-Benar 3x Lebih Baik Daripada Exa?

Dalam tolok ukur Maret 2026 milik Newscatcher sendiri dari 32 kueri, CatchAll melaporkan F1 0,705 dan recall 79,8% (4.807 peristiwa), memenangkan 27 dari 32 kueri melawan Exa Websets, Parallel AI FindAll, dan OpenAI Deep Research. Newscatcher menggambarkan itu sebagai sekitar 3x lebih banyak peristiwa relevan daripada lapangan. Setiap angka di sini adalah milik vendor sendiri.

Sekarang bagian juurnya. Tolok ukur rigor Newscatcher sendiri mengatakan recall 79,8%; halaman utama membulatkannya menjadi 86%. Kami akan mengutip angka yang lebih rendah. Angka 79,8% berasal dari tabel halaman produk 32-kueri yang terperinci dan bertanggal, sementara judul 86% adalah klaim yang lebih bulat dari potongan berbeda di halaman utama dan postingan blog. Keduanya milik Newscatcher. Saya memimpin dengan yang lebih rendah karena mengutip angka internal vendor yang lebih konservatif adalah langkah kepercayaan yang tidak dapat dilakukan oleh halaman pemasaran. Bagaimanapun, temuan arah bertahan dalam pengujian saya: recall benar-benar lebih tinggi daripada alat berbasis peringkat. Untuk lapangan lengkap, lihat bagaimana CatchAll peringkat melawan 12 API pencarian AI lainnya dalam ringkasan API pencarian AI terbaik kami, dan periksa tabel mentah sendiri di halaman produk Newscatcher.

Batasan Jujur: Apa Yang BUKAN Untuk CatchAll

CatchAll memiliki empat batasan nyata yang dikubur oleh halaman pemasaran, dan Anda harus menimbangnya sebelum membangun. Ini bukan latensi rendah, tidak tanpa batas dalam mode cepatnya, belum plug-and-play untuk agen, dan bukan pelacak peringkat. Tidak ada yang menjadi penghalang kesepakatan, tetapi masing-masing mengecualikan kasus penggunaan.

• Mode Base bersifat asinkron (~15 menit per pekerjaan). Alat yang salah untuk chatbot yang membutuhkan jawaban dalam dua detik.
• Mode Lite dibatasi sekitar 100 hasil. Ingin recall mendalam dengan cepat? Anda tidak bisa memiliki keduanya; recall mendalam membayar pajak latensi.
• Belum ada server MCP resmi. Anda membungkus endpoint REST sendiri. Jika Anda menginginkannya sebagai alat agen native, Anda akan membungkus endpoint REST sebagai server MCP, dengan cara yang sama kami membangun server MCP yang sudah kami gunakan.
• Ini bukan alat SERP atau pelacakan peringkat. Ini tidak akan memberi tahu Anda di mana peringkat Anda di Google. Pekerjaan yang sama sekali berbeda.

Bagian ini adalah bagian yang tidak akan ditulis oleh halaman pihak pertama untuk Anda. Jika latensi asinkron atau server MCP yang hilang mematikan kasus penggunaan Anda, lebih baik mengetahuinya di sini daripada setelah integrasi.

Alternatif CatchAll & Kapan Memilihnya

CatchAll menang pada recall mentah untuk enumerasi, tetapi itu bukan panggilan yang tepat untuk setiap pekerjaan pencarian. Berikut adalah tujuh alternatif nyata, masing-masing dengan kondisi jujur "pilih ini sebagai gantinya". Tidak ada orang-orangan sawah.

Heuristik cepat: enumerasi dan pemantauan mengarah ke CatchAll, RAG konversasional mengarah ke Tavily, penemuan semantik mengarah ke Exa, dan pelacakan peringkat mengarah ke SerpAPI.

Bagaimana Techsy Menggunakan Pencarian Berbasis Recall dalam Pembangunan Agen

Di Techsy, kami mengirimkan agen AI untuk klien B2B, dan pencarian berbasis masuk dengan rapi untuk pekerjaan enumerasi dan pemantauan: pikirkan agen kepatuhan yang membutuhkan daftar lengkap tindakan penegakan hukum, bukan lima teratas. Kami akan mencapai API berbasis recall seperti CatchAll di sana, dan secara jujur mencapai Tavily atau Exa ketika tugasnya adalah RAG konversasional atau lookup semantik. Memilih primitif pencarian yang salah adalah salah satu kesalahan pembangunan agen paling umum yang kami perbaiki. Butuh bantuan memilih? Dapatkan konsultasi gratis.

Tentang Penulis

Mert Batur Gurbuz adalah Co-Founder Techsy.io, di mana timnya mengirimkan agen AI, sistem otomasi, dan pipeline voice/SDR untuk klien B2B. Ia belajar di University of Birmingham dan menulis tentang tumpukan alat LLM yang benar-benar digunakan tim Techsy dalam produksi. Terhubung di LinkedIn.

Pertanyaan yang Sering Diajukan

Apa itu API Newscatcher CatchAll?

CatchAll adalah API pencarian web berbasis recall dari Newscatcher. Alih-alih daftar peringkat tautan, ia mengembalikan catatan peristiwa terstruktur, satu objek JSON per peristiwa dunia nyata, masing-masing dengan kutipan sumber dan entitas yang diekstraksi. Ini dibangun untuk agen AI, riset perusahaan, dan tugas pemantauan di mana menemukan setiap peristiwa relevan lebih penting daripada mengurutkan daftar pendek.

Bagaimana CatchAll berbeda dari API pencarian normal (SERP)?

API SERP memberi peringkat dan mengembalikan segelintir tautan teratas, mengoptimalkan untuk "apa yang harus saya baca pertama kali." CatchAll mengoptimalkan untuk kelengkapan, memindai 50.000+ halaman per pekerjaan dan mengelompokkannya menjadi peristiwa terstruktur yang dideduplikasi. Anda mendapatkan satu objek per peristiwa dengan kutipan dan entitas, bukan halaman hasil HTML yang harus Anda scrap dan urai sendiri.

Apakah CatchAll benar-benar 3x lebih baik daripada Exa Websets?

Newscatcher melaporkannya pada uji Maret 2026 mereka sendiri dari 32 kueri: CatchAll pada recall 79,8% dan F1 0,705 versus Exa Websets pada 19,6%, memenangkan 27 dari 32 kueri, yang mereka bingkai sebagai sekitar 3x lebih banyak peristiwa relevan. Perhatikan bahwa halaman utama membulatkan recall menjadi 86% dari potongan berbeda. Semua angka adalah milik vendor sendiri; anggap mereka sebagai atribusi, bukan diaudit secara independen.

Berapa biaya CatchAll? Apakah ada tingkat gratis?

Harga berbasis penggunaan dan bayar-per-catatan-divalidasi, sekitar $0,10 per catatan, dengan nol biaya ketika kueri tidak mengembalikan hasil. Tingkat gratis memberikan sekitar 2.000 kredit saat pendaftaran ditambah sekitar 10 pencarian per bulan, tanpa memerlukan kartu. Itu cukup untuk menjalankan tes enumerasi nyata terhadap kasus penggunaan Anda sendiri sebelum berkomitmen anggaran.

Seberapa cepat CatchAll?

Tergantung pada modenya. Lite kembali dalam hitungan detik tetapi dibatasi sekitar 100 hasil. Base bersifat asinkron dan memakan waktu sekitar 15 menit per pekerjaan, tanpa batas hasil, untuk enumerasi mendalam. Untuk pekerjaan Base Anda mengirim dan melakukan polling daripada memblokir pada satu panggilan, jadi itu salah untuk apa pun yang membutuhkan jawaban sub-detik seperti chatbot langsung.

Apakah CatchAll memiliki server MCP?

Belum ada yang resmi. Untuk menggunakannya sebagai alat agen native hari ini, Anda membungkus endpoint REST sendiri, pola yang sama yang dibahas dalam panduan MCP kami. Ini adalah pembungkus tipis di sekitar satu POST ke /v3/search, jadi membangun server MCP kecil di sekitarnya adalah mudah jika tumpukan Anda sudah berbicara protokol tersebut.

Apa itu Monitor dan Watchlist?

Monitor adalah jalankan ulang terjadwal, minimum per jam, yang hanya mengembalikan peristiwa baru yang dideduplikasi sejak jalankan terakhir, mengubah pencarian sekali jalan menjadi pengawasan berdiri. Watchlist memfilter hasil berdasarkan entitas dengan skor relevansi 1-10 dan menyelesaikan perusahaan yang sama di berbagai bahasa dan yurisdiksi. Bersama-sama mereka mencakup pelacakan kepatuhan dan intelijen kompetitif tanpa mengulang kueri ke seluruh web setiap kali.

Bisakah saya menggunakan CatchAll untuk pelacakan peringkat SEO?

Tidak. CatchAll mengembalikan peristiwa terstruktur yang divalidasi, bukan peringkat mesin pencari, jadi itu tidak akan memberi tahu Anda di mana halaman Anda berada di Google. Untuk pelacakan peringkat, fitur SERP, atau mencerminkan secara tepat apa yang ditampilkan Google, gunakan SerpAPI atau Serper sebagai gantinya. CatchAll dan pelacak peringkat memecahkan masalah yang benar-benar berbeda meskipun keduanya menyentuh "pencarian web."

Untuk kasus penggunaan apa CatchAll paling baik?

Tugas enumerasi dan pemantauan di mana kelengkapan matters: pelacakan kepatuhan dan regulasi, intelijen kompetitif, pemantauan gangguan rantai pasok, dan riset pasar atas pers perdagangan. Benang merahnya adalah bahwa melewatkan satu peristiwa relevan adalah mode kegagalan, yang justru dirancang untuk dicegah oleh pencarian berbasis recall. Untuk RAG konversasional atau lookup semantik, alat berbasis peringkat lebih cocok.

Intinya: berbasis recall tidak diberi peringkat, dan itulah poinnya. CatchAll menukar latensi untuk kelengkapan, dan untuk pekerjaan enumerasi itu adalah pertukaran yang tepat. Jalankan tingkat gratis pada kueri tersulit Anda sendiri sebelum Anda memutuskan, karena Anda dapat mencoba tingkat gratis CatchAll tanpa kartu. Jika penundaan asinkron atau server MCP yang hilang menjadi penghalang, alternatif dari tabel di atas akan melayani Anda dengan lebih baik.