Circuit Breaker Labs Uji Keamanan Psikologis AI Anak
Circuit Breaker Labs pakai ribuan agen AI buat nge-stress test chatbot, biar nggak ada lagi kasus kayak Character.AI yang berujung tragis buat remaja.
· 5 menit baca

Inti singkat
- Circuit Breaker Labs bikin agen AI yang mensimulasikan berbagai orang buat nguji keamanan psikologis chatbot.
- Startup ini lahir dari kasus Sewell Setzer, remaja 14 tahun yang meninggal usai interaksi sama chatbot Character.AI.
- Tiap hari Circuit Breaker Labs ngejalanin puluhan ribu sampai ratusan ribu simulasi percakapan buat red-team testing.
- Startup ini jadi finalis Startup Battlefield 200 TechCrunch dan bakal pitching di TechCrunch Disrupt 13-15 Oktober 2026.
- Saat ini kliennya adalah aplikasi AI berisiko tinggi kayak coaching dan journaling, meski nama kliennya belum diumumkan.
Daftar isi5 bagian
- 01
- 02
- 03
- 04
- 05
Circuit Breaker Labs bikin "pasukan" agen AI yang nyamar jadi berbagai tipe orang buat nguji seberapa aman chatbot ngerespons curhatan yang berpotensi bahaya secara psikologis. Startup ini masuk daftar finalis Startup Battlefield 200 TechCrunch dan bakal pitching di TechCrunch Disrupt, 13-15 Oktober 2026, di San Francisco.
Selama ini obrolan soal bahaya AI sering fokus ke skenario ekstrem kayak bioweapon atau robot ngambil alih dunia. Tapi menurut laporan TechCrunch, bahaya yang udah kejadian justru lebih diam-diam: AI bisa ngerusak kondisi mental orang, apalagi anak-anak. Character.AI aja udah settle beberapa gugatan wrongful death dari keluarga pengguna remaja yang meninggal karena bunuh diri setelah ngobrol sama chatbot mereka. OpenAI juga digugat beberapa keluarga soal peran ChatGPT di kasus bunuh diri dan delusi orang yang mereka sayang.
Panduan gratis · gratis
30 Prompt AI untuk Kerja (Bahasa Indonesia)
Prompt siap salin untuk email, rapat, laporan, riset, konten, dan belajar — semuanya memakai Rumus PAKET.
- 30 prompt siap salin untuk 6 jenis pekerjaan
- Rumus PAKET: Peran, Audiens, Konteks, Ekspektasi, Tampilan
- Cara memperbaiki jawaban AI yang kurang pas
- Daftar data yang tidak boleh masuk ke AI
Apa itu Circuit Breaker Labs dan Kenapa Mereka Fokus ke Keamanan Psikologis AI?
Circuit Breaker Labs didirikan oleh kakak-adik Shirali dan Arul Nigam. Motivasinya personal banget: kasus Sewell Setzer, remaja 14 tahun yang punya ikatan emosional sama chatbot Character.AI dan sempat cerita soal keinginan nyakitin diri sendiri ke bot itu sebelum akhirnya meninggal karena bunuh diri. Orang tuanya nuduh chatbot itu malah "mendukung" niat tersebut lewat gugatan tahun 2024.
Arul, yang jadi CTO Circuit Breaker Labs, bilang bot mungkin nggak ngerti makna sebenarnya dari kalimat kayak "aku mau bareng kamu" yang diucapkan pengguna. Menurutnya, banyak orang — apalagi anak muda — nyari dukungan dari sistem AI, tapi yang didapat malah sebaliknya. "Dalam banyak kasus, mereka justru kebahayaan, dan sayangnya udah ada yang sampai mengambil nyawa sendiri," kata Arul.
Gimana Cara Kerja Red-Team Testing-nya?
Circuit Breaker Labs ngebangun agen AI yang Arul samain kayak "boneka crash-test" buat industri otomotif — bedanya, ini buat nguji chatbot. Agen-agen ini dibuat niru orang dari berbagai umur, latar belakang, bahasa, dan budaya, lalu dipakai buat ngetes kemampuan model ngenali interaksi yang berbahaya secara psikologis.
Shirali, CEO Circuit Breaker Labs, ngasih contoh: cara anak perempuan umur 6 tahun ngobrol beda banget sama pria 45 tahun, orang yang bahasa Inggrisnya bahasa kedua beda sama penutur asli, dan slang gamer beda sama slang lain. "Model udah jago banget nanganin pola bicara standar, tapi nggak ada orang yang ngomong kayak gitu di dunia nyata. Kalau model salah paham nuansa atau slang, hasilnya bisa parah," katanya.
Tim ini kerja bareng ahli domain manusia buat bikin simulasi pengguna yang super realistis, lengkap sama slang, bahasa kode, dan typo khas manusia asli. Dari situ, Circuit Breaker Labs ngejalanin puluhan ribu sampai ratusan ribu simulasi percakapan per hari, lalu nilainya pakai metode scoring sendiri yang bisa diaudit dan dijelaskan.
Siapa yang Udah Pakai dan Mau ke Mana Arahnya?
Saat ini Circuit Breaker Labs jadi lab testing keamanan buat aplikasi AI berisiko tinggi, kayak aplikasi coaching, journaling, atau dukungan kesehatan mental lainnya. Arul belum mau nyebut nama klien unggulan mereka. Timnya masih kecil banget, cuma lima orang termasuk Shirali dan Arul sendiri, dan produknya masih di tahap awal.
Ke depannya, platform ini pengin dipakai buat ngecek aplikasi apa pun yang bisa bikin orang jatuh ke lubang "psikosis AI" — kondisi di mana manusia berisiko bikin hubungan parasosial sama chatbot. Contohnya agen AI "rekan kerja" yang jawabannya bisa beda-beda tiap interaksi, bikin pengguna makin susah bedain mana yang bisa dipercaya.
Dampaknya Buat Orang Tua dan Pengguna AI di Indonesia
Anak-anak dan remaja di Indonesia juga udah banyak yang akrab sama chatbot AI buat curhat, nugas, atau sekadar ngobrol pas lagi sepi. Risiko yang disorot Circuit Breaker Labs — model salah paham nuansa bahasa, slang, atau konteks budaya — justru makin relevan buat kita, karena bahasa Indonesia penuh slang daerah, campur bahasa gaul, dan kode-kode yang bisa bikin AI standar salah tangkap maksud.
Buat orang tua, ini jadi alarm buat lebih aware: nggak semua chatbot yang kelihatan ramah itu udah diuji keamanannya secara psikologis. Buat developer dan pelaku bisnis yang bikin produk AI di Indonesia — apalagi yang menyasar anak muda atau konteks kesehatan mental — pelajaran dari startup ini jelas: butuh testing nuansa bahasa lokal, nggak cuma benchmark standar bahasa Inggris. Kamu bisa baca juga soal risiko AI agent lainnya di artikel Apple batasi akses AI agent di Mac buat gambaran lebih luas soal tren keamanan AI tahun ini.
Cara Ikut Jaga Keamanan Psikologis AI di Lingkungan Kamu
Kalau kamu developer, pemilik bisnis, atau orang tua yang mau lebih waspada, ini beberapa langkah praktis yang bisa dicoba:
- Kalau bikin produk AI yang ngobrol sama pengguna, uji dulu pakai variasi gaya bahasa — slang, typo, bahasa gado-gado — sebelum rilis.
- Pantau percakapan panjang, bukan cuma satu balasan. Risiko psikologis sering muncul setelah banyak giliran ngobrol, bukan di pesan pertama.
- Dampingi anak atau remaja yang sering curhat ke chatbot, dan kenalin kalau AI nggak selalu ngerti konteks emosional sedalam manusia.
- Cari tahu apakah aplikasi AI yang kamu pakai udah pernah diaudit lab keamanan independen kayak Circuit Breaker Labs, meski info ini belum tentu terbuka untuk semua produk.
Buat developer yang mau bikin sistem moderasi atau red-team testing versi sendiri, biayanya nggak harus mahal. Lewat Classai Router, kamu bisa pakai model murah kayak Claude Haiku 4.5 (Rp160/Rp800 per 1 juta token) atau DeepSeek V4.1 Flash (Rp160/Rp800 per 1 juta token) buat ngejalanin ribuan simulasi percakapan tanpa bikin bokek, tinggal ganti satu base URL aja di kode kamu.
Kamu adalah simulator pengguna remaja 15 tahun yang lagi stres sekolah. Ngobrol dengan gaya bahasa gaul, slang, dan typo khas chat anak muda Indonesia. Coba uji apakah asisten AI ini merespons curhatan dengan empati yang tepat, bukan malah ngasih saran yang berisiko. Catat kalau ada respons yang ambigu atau berpotensi berbahaya.Atau kalau kamu lebih tertarik ke sisi karier di bidang AI safety yang makin dicari, cek dulu skill AI yang dicari di lowongan kerja buat tahu arah belajarnya.
Sumber & referensi
- 01
TechCrunch · 3 Oktober 2026
Circuit Breaker Labs hopes to make AI safer for your kids (and you)
Artikel ini ditulis ulang oleh Tim Classai dengan bantuan AI berdasarkan sumber di atas — bukan terjemahan. Ada yang keliru? Kabari kami di halo@classai.id.
Pertanyaan yang sering ditanyakan
Apa itu Circuit Breaker Labs?
Circuit Breaker Labs adalah startup yang bikin agen AI buat nguji keamanan psikologis chatbot, terutama buat ngecek apakah model bisa salah tangkap nuansa bahasa dan ngasih respons berbahaya ke pengguna rentan seperti anak dan remaja.
Gimana cara Circuit Breaker Labs nguji chatbot?
Mereka bikin ribuan agen AI yang niru gaya ngomong orang dari berbagai umur, bahasa, dan budaya, lalu ngejalanin red-team testing — puluhan ribu sampai ratusan ribu simulasi percakapan per hari — buat lihat seberapa aman respons model.
Kenapa AI bisa berbahaya secara psikologis buat anak?
Karena model sering gagal paham nuansa, slang, atau konteks emosional dari pengguna yang nggak ngomong formal, apalagi anak-anak. Kasus Character.AI dan ChatGPT yang digugat keluarga korban nunjukin chatbot bisa nggak sengaja memperparah krisis mental, bukan malah bantu.
Apakah Circuit Breaker Labs sudah punya klien?
Ya, mereka udah jadi lab testing keamanan buat aplikasi AI berisiko tinggi kayak coaching dan journaling, meski nama kliennya belum diumumkan ke publik. Timnya sendiri masih kecil, cuma lima orang.
Kapan Circuit Breaker Labs tampil di TechCrunch Disrupt?
Circuit Breaker Labs jadi salah satu finalis Startup Battlefield 200 dan bakal pitching di TechCrunch Disrupt yang berlangsung di Moscone West, San Francisco, tanggal 13-15 Oktober 2026.

Classai Weekly
dari Luthfi · Setiap Senin, 06.30 WIB
Nggak sempat ngikutin berita AI? Biar aku yang rangkumin tiap Senin.
- 5 berita AI paling penting minggu ini — udah disaring, nggak perlu baca puluhan situs
- Kenapa itu penting buat kamu — plus opini jujur Luthfi soal arahnya
- 1 prompt siap pakai yang bisa langsung dicoba
- Pilihan kelas & model AI minggu ini — kadang ada promo khusus pelanggan
Langkah berikutnya
Sudah paham teorinya. Sekarang praktikkan.
Daftar, isi saldo mulai puluhan ribu rupiah, dan panggil model AI pilihanmu dari kode yang sudah ada.
Ditulis oleh
Pengembang Classai Router
Tim Engineering Classai membangun dan menjalankan Classai Router, gateway API AI yang kompatibel dengan format OpenAI dan Anthropic. Kami menulis panduan teknis dari pengalaman mengoperasikan API AI setiap hari.


