Dalam artikel ini (4)
Keamanan AI Tim Kuning: Analisis Project Glasswing Builder
Poin utama
- Perlakukan keamanan AI sebagai siklus rekayasa, bukan artefak kepatuhan.
- Berikan ruang lingkup hukum yang jelas kepada yellow team sebelum mereka membangun alat pengujian ofensif.
- Perbarui pengujian seiring berubahnya model dan toolchain, karena kontrol statis cepat usang.
Pelaporan Project Glasswing dari Dark Reading menunjukkan mengapa keamanan AI membutuhkan insinyur yang dapat membangun jalur serangan sekaligus pertahanannya.
Pelaporan Project Glasswing dari Dark Reading menunjukkan mengapa keamanan AI membutuhkan para insinyur yang dapat membangun jalur serangan sekaligus pertahanannya.
Keamanan AI telah mendapatkan warna lain, karena tampaknya industri melihat merah, biru, ungu, hijau, oranye, dan putih lalu memutuskan bahwa lorong cat masih punya stok. Bagian yang berguna bukan warnanya. Melainkan model operasinya. Dark Reading melaporkan bahwa Anthropic mengundang lebih dari 50 organisasi untuk berpartisipasi dalam Project Glasswing guna melihat pratinjau Claude Mythos, sementara laporan yang sama menggambarkan para engineer membangun alat keamanan AI yang bersifat defensif maupun ofensif. Itulah bagian yang perlu diperhatikan para pembangun, karena daftar periksa dapat mengonfirmasi bahwa sebuah kebijakan ada, tetapi tidak dapat memberi tahu apakah rantai agen Anda akan terlipat seperti kursi taman ketika prompt datang memakai kumis palsu.
Dark Reading membingkai yellow team sebagai pekerjaan rekayasa
Nate Nelson dari Dark Reading melaporkan pada 13 Juli 2026 bahwa di beberapa perusahaan, para engineer membangun alat pertahanan dan serangan untuk menguji janji AI bagi keamanan siber serta ancamannya. Itu adalah perbedaan yang halus tetapi penting dibanding memperlakukan keamanan AI sebagai ritual tata kelola triwulanan yang dilakukan sambil menyantap bagel basi. Gagasan yellow team, sebagaimana disajikan oleh Dark Reading, berada dekat dengan lapisan implementasi: perilaku model, penggunaan alat, otomasi, dan celah-celah kecil aneh tempat sistem melakukan persis apa yang Anda minta dan sama sekali bukan apa yang Anda maksud.
Dark Reading juga menggambarkan sejumlah kecil tim rekayasa yang mengembangkan pertahanan yang akan dibutuhkan organisasi untuk menghadapi penyerang yang didukung AI. Terjemahannya, tim defensif harus memahami alur kerja penyerang dengan cukup baik untuk membangun pertahanan terhadapnya, bukan sekadar mengaguminya dari daftar risiko. Intelijen ancaman boleh berada di meja Sam, tetapi pelajaran AI dan ML-nya tegas: jika produk Anda menggunakan model untuk mengambil tindakan, merangkum data, memanggil alat, atau melakukan triase peringatan, pengujian keamanan Anda harus menyentuh alur kerja tersebut secara langsung. Jika tidak, Anda sedang menguji brosurnya, bukan mesinnya.
ITLawCo menunjukkan mengapa roda warna bukan sekadar finger painting korporat
Nathan Ross Adams dari ITLawCo menulis pada 18/11/2024 bahwa roda warna keamanan siber mencakup tim merah, biru, ungu, kuning, hijau, oranye, dan putih sebagai bagian dari strategi keamanan organisasi. Intinya bukan bahwa setiap perusahaan perlu melakukan reorganisasi berbasis Crayola sebelum Jumat. Melainkan bahwa berbagai latihan keamanan membawa peran, izin, dan tanggung jawab yang berbeda, terutama ketika latihan tersebut melibatkan pembangunan alat yang menyerupai hal yang sedang Anda coba pertahankan.
ITLawCo juga memperingatkan bahwa simulasi, pengujian, dan latihan pelatihan dapat membawa konsekuensi hukum dan memerlukan pengawasan hukum, kontrak yang kuat, serta pembagian tanggung jawab yang jelas. Itu penting bagi yellow team karena membangun perkakas AI ofensif untuk pembelajaran defensif hanya produktif ketika cakupannya eksplisit. Yellow team yang praktis harus memiliki batas tertulis tentang sistem apa yang boleh diuji, data apa yang boleh disentuh, log apa yang harus disimpan, dan kapan eskalasi terjadi. Nuansanya harus seperti buku catatan laboratorium, bukan rakun dengan akses root.
Axios dan arXiv menjelaskan tekanan di balik langkah ini
Axios menulis bahwa semakin sulit untuk mengikuti model AI baru, perang harga, dan kemajuan penting, serta menunjuk pada lab-lab Amerika yang merilis sistem seperti Meta's Muse Spark 1.1 dan keluarga GPT-5.6 dari OpenAI. Tempo rilis itu bukan catatan kaki keamanan. Setiap keluarga model baru, perubahan harga, dan peningkatan kemampuan dapat menggeser apa yang cukup murah untuk diotomatisasi, apa yang cukup andal untuk dioperasionalkan, dan apa yang mungkin dicoba berikutnya oleh penyerang atau pembela.
Arus deras riset juga tidak melambat. Daftar Artificial Intelligence arXiv untuk Senin, 13 Juli 2026 menampilkan 177 entri secara keseluruhan dan 27 kiriman baru. Sebagian besar tim tidak akan membaca semuanya sebelum makan siang, kecuali makan siang itu adalah teriakan minta tolong. Yellow team adalah respons terhadap realitas itu: alih-alih menunggu doktrin yang sempurna, para pembangun dapat membuat pengujian yang dapat diulang di sekitar jalur AI nyata yang mereka gunakan, lalu memperbarui pengujian tersebut saat model, alat, dan asumsi berubah.
TalTech mengingatkan kita bahwa otomasi memiliki memori
Sebuah disertasi doktoral tahun 2021 dari Tallinn University of Technology oleh Mauno Pihelgas berjudul Automating Defences against Cyber Operations in Computer Networks. Menurut dokumen tersebut, disertasi itu diterima untuk gelar Doctor of Philosophy in Computer Science pada 10 Juni 2021. Itu tidak membuat praktik yellow team hari ini sebagai keturunan langsung dari satu proyek akademik tertentu, tetapi menunjukkan bahwa mengotomatisasi pertahanan siber bukanlah mimpi demam baru yang ditemukan oleh keynote vendor.
Hal baru yang menarik adalah bahwa sistem AI kini menjadi bagian dari mesin pertahanan sekaligus kemungkinan permukaan serangan. Bagi para pembangun, langkah praktisnya adalah membuat sebuah loop: modelkan alur kerja penyerang, implementasikan kontrol defensif, jalankan pengujian, catat kegagalan, dan masukkan hasilnya kembali ke rekayasa. Dekatkan cakupan hukum, hadirkan pemilik produk di ruangan, dan buat pengujian cukup membosankan agar sering dijalankan. Keamanan yang hanya berhasil sebagai demo heroik hanyalah teater dengan hoodie yang lebih bagus.
Sinyal dari Project Glasswing adalah bahwa yellow team dapat menjadi disiplin keamanan AI yang serius karena memaksa organisasi untuk membangun jalan mereka menuju pemahaman. Perhatikan apakah ini menjadi praktik yang tahan lama dengan metode bersama, atau hanya stiker bagan organisasi lainnya. Apa pun hasilnya, pelajaran bagi pembangun AI bersifat langsung: jangan menunggu kepatuhan menemukan mode kegagalan Anda setelah pengguna Anda menemukannya. Bangun lab serangan kecil yang aneh itu sekarang, sebelum lab serangan kecil yang aneh itu membangun dirinya sendiri.
