RISET - 11 November 2026

CS AI di WhatsApp: Claude Opus 5.5 atau Gemini 4 Argon?

Pertanyaan: kalau CS AI yang membalas konsumen lewat WhatsApp (bahasa Indonesia, jualan produk digital/jasa, jawab dari basis pengetahuan, ikut aturan panjang, pakai alat/tool calling, tidak boleh mengarang fakta atau harga, sesi panjang dengan konteks ratusan ribu token) memakai salah satu dari dua model ini, mana yang lebih bagus? Riset ini memakai sumber publik saja. Label: UNGGUL SEIMBANG / TIDAK PASTI LEMAH BELUM DIKETAHUI

Soal nama: "Gemini Argon 4" di pertanyaan = produk resminya bernama Gemini 4 Argon (Google). Modelnya nyata dan sudah bisa dipakai lewat API berbayar. Sebagian artikel awal (akhir September) menyebut akses masih terbatas; itu sudah usang sejak 13 Oktober 2026.

Kesimpulan singkat

1. Perbandingan berdampingan

Sumber di tiap baris ada di daftar sumber (bagian 8). V = klaim vendor, I = uji independen, S = sumber sekunder/blog.

HalClaude Opus 5.5Gemini 4 Argon
Rilis22 September 2026 [1]Diumumkan 30 September 2026; model card dan akses API berbayar 13 Oktober 2026 [4][5]
ID model / ketersediaanclaude-opus-5-5; API Claude, Amazon Bedrock, Google Cloud, Microsoft Foundry [1]gemini-4-argon; Gemini API (hanya tier berbayar, tidak ada tier gratis), Google AI Studio [5][6]
Jendela konteks1 juta token, output maks 128 ribu [1]1 juta token (batas gabungan input + output); output bisa sampai 1 juta [4][3]
Harga input / output per juta token$4 / $20 [1]$2 / $10 sampai 30 Nov 2026; $4 / $20 mulai 1 Des 2026 [6]
Cache (penyimpanan konteks)Eksplisit, bisa diatur. Baca $0,20 per juta token; tulis 5 menit $5, tulis 1 jam $8. Umur default 5 menit, opsi 1 jam, diperpanjang tiap kena. Minimal 512 token [1][2]Implisit saja (eksplisit tidak didukung). Baca $0,10 (promo) lalu $0,20 mulai 1 Des; minimal 4.096 token; umur cache: belum diketahui; tidak ada jaminan kena [6][7]
KecepatanAnthropic: "Moderate", output >30% lebih cepat dari Opus 5; Fast mode sampai 2,5x ($8/$40, antre/waitlist) [1][8]. Artificial Analysis (mode Max, tak mewakili CS): 115 token/detik [9]Model card Google mengakui "sesekali lambat atau timeout" [4]. Artificial Analysis (mode High): 66 token/detik, 39 detik sampai token jawaban pertama [10]. IrisAgent: waktu terlambat 1% teratas ±4x Sonnet 5.5 [11]
Skor umum (AA Intelligence Index, I)58-59 [9][12]50-53 [10][12] (angka beda antar halaman; pengaturan reasoning juga beda, tidak apel-ke-apel)
Uji CS (IrisAgent, vendor, sekali jalan)Total 94,1; akurasi jawaban 97,6; sitasi sumber 87,1; routing 95,0 [11]Total 90,5 (high) / 90,3 (low); akurasi 87,1; sitasi 75,3; routing 95,0. Menolak sebagian tiket yang bisa dijawab; run kedua akurasi 92,9 [11]
Tidak mengarang / halusinasiAngka independen terverifikasi: belum diketahui. Satu agregator menyebut ±59% di AA-Omniscience (tidak bisa dicek di sumber aslinya) [13]. IrisAgent: tahan halusinasi 95,0 [11]AA-Omniscience 15% (terendah di antara model sekelasnya, I) [12][14]. IrisAgent: tahan halusinasi 100 [11]
Ikut aturan panjang (instruction following)Belum diketahui (tak ada benchmark langsung di sumber)Belum diketahui. Opini blog: ketat mengikuti rubrik/checklist [15]
Tool calling / agenToolathlon-Verified 77,8 [16]. Catatan teknis: Opus 5.5 menolak "paksa pilih alat" (error 400) [8]Toolathlon: belum ada. AutomationBench 51,3 vs Opus 40,0-42,5 (V, bisnis end-to-end) [4][16]
tau-bench / tau2-bench (retail/airline)Tidak ada angkanya di sumber mana punTidak ada angkanya di sumber mana pun
Konteks panjangGraphWalks 128rb: 90,6; 256rb-1jt: 66,8 (V) [4]GraphWalks 128rb: 99,7; 256rb-1jt: 84,2 (V, tes sintetis) [4]
Bahasa IndonesiaTidak ada uji khusus. GMMLU (multibahasa umum) 94,3 [16]; MILU 93,1 adalah uji bahasa India, tidak relevanTidak ada uji khusus; skor GMMLU "belum terbit" [16]. Evaluasi keselamatan multibahasa turun 3,16 poin menurut artikel sekunder [15]
Nada dan kesopananTidak ada uji independen. Klaim vendor: menulis seperti "rekan kerja yang baik"; blog: lebih disukai untuk tulisan kreatif [15]Tidak ada uji independen. Klaim Google: komunikasi lebih jelas, langsung, prosedural [15]
Suara pengguna (Arena)Text Arena 1.504 Elo [14]Text Arena 1.525 Elo, peringkat 1 [14] (penilai umum, bukan khusus CS Indonesia)
Batas pemakaian API (rate limit)Belum diketahuiBelum diketahui

2. Kelebihan dan kekurangan

Claude Opus 5.5

Plus

  • Skor tertinggi di satu-satunya uji CS yang ada (94,1), terutama akurasi jawaban dan sitasi sumber.
  • Cache bisa diatur (5 menit atau 1 jam) dan dicek lewat data pemakaian; penting untuk sesi dengan konteks besar.
  • Lebih tinggi di indeks kecerdasan independen dan tes agen/tool (Toolathlon).
  • Ada pilihan "effort" rendah sampai max untuk mengatur kecepatan vs mutu.

Minus

  • Harga normal $4/$20; biaya melonjak bila cache hangus.
  • Kecepatan "Moderate"; berpikir adaptif selalu menyala (tak bisa dimatikan).
  • Angka halusinasi independen belum terverifikasi.
  • Kalah di tes konteks 256rb-1 juta (versi vendor lawan).

Gemini 4 Argon

Plus

  • Separuh harga sampai 30 November 2026.
  • Halusinasi rendah di tes independen (15%) dan tahan halusinasi 100 di uji CS; cenderung menolak dibanding mengarang.
  • Unggul di tes konteks panjang versi vendor dan di suara pengguna Arena.

Minus

  • Di uji CS: sering menolak jawab yang sebenarnya ada di basis pengetahuan; akurasi 87,1 vs 97,6.
  • Latensi: ekor terlambat sangat panjang, Google mengakui timeout sesekali.
  • Cache implisit: umur dan tingkat kena tidak diketahui; tidak bisa dipaksa.
  • Skor indeks independen lebih rendah; mulai 1 Desember harga sama dengan Opus.

3. Catatan jujur tentang sumber

4. Hitungan biaya per bulan (perkiraan)

Asumsi: 300 balasan per hari x 30 hari = 9.000 balasan per bulan. Tiap balasan membawa konteks 150.000 token. Tiap giliran menambah 2.000 token baru (pesan konsumen + hasil alat) yang ikut ditulis ke cache. Output 800 token per balasan (sudah termasuk token berpikir). "Cache hit" = persen balasan yang konteksnya masih tersimpan; sisanya konteks 150.000 token harus ditulis ulang.

Cache hitOpus 5.5 ($4/$20)Argon promo (s/d 30 Nov: $2/$10)Argon normal (mulai 1 Des: $4/$20)
100%±$504 ($0,056/balasan)±$243±$486
90%±$1.152±$499±$999
70%±$2.448±$1.013±$2.025
50%±$3.744±$1.526±$3.051

5. Rekomendasi

6. Yang belum diketahui

7. Usul langkah berikut (belum dikerjakan)

  1. Uji A/B nyata: kumpulkan 20 pertanyaan CS yang sama (harga produk, fitur, garis besar cara pakai, komplain marah, permintaan di luar aturan, pertanyaan yang jawabannya tidak ada di basis pengetahuan, campur bahasa gaul) dan jalankan ke kedua model dengan aturan dan basis pengetahuan yang sama.
  2. Ukur: benar/salah fakta dan harga, taat aturan, nada sopan, panjang balasan, apakah menolak padahal jawabannya ada, ketepatan pemanggilan alat, waktu respon (median dan terlambat 10%), cache hit, biaya per balasan.
  3. Nilai buta (nama model disembunyikan) oleh dua orang; ulangi sekali di hari lain karena hasil satu kali jalan bisa bergeser.
  4. Uji juga sesi panjang (konteks ±150 ribu token) sebelum memutuskan.

8. Daftar sumber

Diakses 11 November 2026. V = vendor, I = independen, S = sekunder/blog.

  1. [1] V - Anthropic, ikhtisar Claude Opus 5.5 (rilis, harga, konteks, cache, latensi): platform.claude.com/docs/en/models/opus-5-5/overview
  2. [2] V - Anthropic, dokumentasi prompt caching (umur 5 menit/1 jam, diperpanjang saat kena, minimal 512 token): platform.claude.com/docs/en/build-with-claude/prompt-caching
  3. [3] V - Google, pengumuman Gemini 4 Argon (30 Sep 2026): blog.google/.../gemini-4-argon
  4. [4] V - Google DeepMind, model card Gemini 4 Argon (benchmark berdampingan dengan Opus 5.5): deepmind.google/models/model-cards/gemini-4-argon
  5. [5] S - Toolhalla, ringkasan harga dan ketersediaan Argon: toolhalla.ai/blog/gemini-4-argon-api-price-context-2026
  6. [6] V - Google AI Studio, halaman harga Gemini API: aistudio.google.com/docs/pricing
  7. [7] V - Google AI Studio, dokumentasi context caching (implisit, minimal 4.096 token): aistudio.google.com/docs/caching
  8. [8] V/S - Anthropic, pengumuman Opus 5.5 dan liputan Mixed (Fast mode, effort, forced tool use): anthropic.com/claude-opus-5-5, mixed-news.com
  9. [9] I - Artificial Analysis, Claude Opus 5.5: artificialanalysis.ai/models/claude-opus-5-5
  10. [10] I - Artificial Analysis, Gemini 4 Argon: artificialanalysis.ai/models/gemini-4-argon
  11. [11] S/vendor CS AI - IrisAgent, uji dukungan pelanggan Argon vs Opus 5.5 vs Sonnet 5.5: irisagent.com/blog/gemini-4-argon-customer-support-benchmark
  12. [12] S - Emergent, ringkasan skor Argon (Intelligence Index v4.3.2: Opus 58, Argon 53): emergent.sh/learn/gemini-4-argon-benchmarks
  13. [13] S - Suprmind, tabel statistik halusinasi (Opus 5.5 ±58,6%, satu agregator, tidak terverifikasi): suprmind.ai/hub/ai-hallucination-statistics-research-report
  14. [14] S - DeepLearning.AI The Batch, ulasan Argon (AA-Omniscience 15%, Arena 1.525 vs 1.504): deeplearning.ai/the-batch/argon-a-low-hallucination-model-build-for-knowledge-work
  15. [15] S - Woltrio, perbandingan Argon vs Opus 5.5 (klaim nada, instruction following, evaluasi multibahasa; opini, tak diverifikasi): woltrio.com/insights/gemini-4-argon-vs-claude-opus-5-5
  16. [16] S - BenchLM, perbandingan skor (GMMLU, Toolathlon, Gray Swan): benchlm.ai/compare/claude-opus-5-5-vs-gemini-4-argon
  17. [17] S - Layer3Labs, panduan Argon (tidak cocok untuk CS latensi rendah, opini): layer3labs.io/guides/gemini-4-argon-explained
  18. [18] S - Analytics Vidhya, uji langsung Argon (tanpa data kecepatan/Indonesia): analyticsvidhya.com/blog/2026/10/gemini-4-argon-review
Dokumen internal, bukan untuk disebar. Hitungan biaya adalah perkiraan dari harga resmi dan asumsi di bagian 4.