
Dalam artikel ini (4)
Analisis Nemotron 3.5 Lightning: Kemudahan Penerapan yang Unggul
Poin utama
- Evaluasi kemampuan penerapan, bukan hanya jumlah parameter, saat membandingkan model agen berbobot terbuka.
- Uji perilaku konteks panjang dan kecepatan penyajian sebelum mengandalkan Nemotron 3.5 Lightning dalam produksi.
- Tinjau OpenMDW 1.1 dan resep Nvidia sejak awal jika Anda merencanakan kustomisasi komersial.
Model MoE 30B dengan 3B parameter aktif, konteks 1M, lisensi OpenMDW-1.1, dan resep yang menjadikan deployment sebagai inti ceritanya.
Model MoE 30B dengan 3B parameter aktif, konteks 1M, lisensi OpenMDW-1.1, dan resep membuat penerapan menjadi inti ceritanya.
Kontes model terbuka dulu seperti ajang binaraga untuk jumlah parameter. Semua orang memamerkan angka yang lebih besar, tetapi tidak ada yang bertanya apakah benda itu benar-benar bisa masuk lewat pintu deployment tanpa menghantam kusen, drywall, dan tiga anak magang. Nemotron 3.5 Lightning dari Nvidia menarik karena menyampaikan argumen yang lebih tenang: open weights kini makin bukan soal siapa yang punya model terbesar, melainkan siapa yang bisa mengirimkan model yang berguna. Menurut NVIDIA NIM, Nemotron 3.5 Lightning hadir pada 11 Agustus 2026 sebagai model 30B dengan 3B parameter aktif, sebuah pengaturan mixture of experts yang membuat sebagian besar model tetap tertidur sementara bagian yang lebih kecil melakukan pekerjaan. Itu bukan kerendahan hati, tepatnya. Lebih mirip mempekerjakan satu stadion penuh konsultan dan hanya membiarkan tiga orang masuk ke rapat, yang, terus terang, adalah kemajuan manajemen.
Artificial Analysis Membuat Pamer Ukuran Jadi Lebih Ramping
Artificial Analysis melaporkan bahwa Nemotron 3.5 Lightning adalah model Nemotron 3.5 pertama dan penerus NVIDIA Nemotron 3 Nano 30B A3B. Perhitungannya mencatat 31,6B total parameter dan 3,6B parameter aktif, sambil juga menyebutkan bahwa model ini mempertahankan arsitektur hibrida Mamba-Transformer dari Nemotron 3 Nano. Bagian yang berguna adalah pergerakan skornya: Artificial Analysis memberi Lightning skor 24 pada Intelligence Index-nya, naik dari 15 untuk Nemotron 3 Nano, membuatnya setara dengan gpt-oss-120b dari OpenAI di angka 24 dan hanya sedikit di belakang Nemotron 3 Super di angka 26, model yang digambarkan Artificial Analysis berukuran sekitar empat kali lebih besar.
Perbandingan itulah intinya. Model open-weight yang lebih kecil menyamai pesaing bernama yang jauh lebih besar pada satu indeks kecerdasan tidak berarti Anda membuang evaluasi dan langsung berlari ke produksi sambil memakai jubah pahlawan. Itu berarti pertanyaan pembangunan berubah dari bisakah model ini menang di leaderboard menjadi bisakah model ini berjalan dengan murah, cepat, dan legal di dalam produk yang benar-benar Anda miliki.
NVIDIA NIM Menawarkan Argumen Deployment
Kartu model NVIDIA NIM memberi bentuk yang menghadap pembangun dari argumen itu: NVIDIA-Nemotron-3.5-Lightning-30B-A3B-NVFP4 menggunakan arsitektur hibrida MoE, Mamba-2, MoE, dan Attention, mendukung panjang konteks hingga 1 juta token, dan mencantumkan bahasa Inggris, bahasa pemrograman, Spanyol, Prancis, Jerman, Italia, dan Jepang. Itu bukan sekadar hiasan lembar spesifikasi. Jendela satu juta token mengubah apa yang bisa dicoba tim dengan dokumen panjang, jejak tool, konteks repo, dan memori agen, dengan asumsi mereka bisa menjaga kebersihan retrieval agar tidak berubah menjadi laci rongsokan berisi JSON.
Kartu NVIDIA NIM yang sama mencantumkan lisensi sebagai OpenMDW License Agreement, versi 1.1. Untuk tim yang mengevaluasi penggunaan komersial, baris lisensi itu harus berada di samping latensi, biaya hosting, dan kebijakan data dalam checklist uji tuntas, bukan di folder PDF menyedihkan bernama legal nanti. NVIDIA juga mengatakan Nemotron adalah keluarga model terbuka dengan open weights, data pelatihan, dan resep, dan itulah bagian yang sering diremehkan: resep adalah tempat reproducibility berhenti menjadi sekadar vibes memakai jas lab.
Blog Teknis NVIDIA Membingkainya sebagai Pipa Agen
Blog teknis NVIDIA, oleh Chris Alexiuk dan Chintan Patel, membingkai Nemotron 3.5 Lightning di sekitar eksekusi tugas khusus yang cepat dan akurat untuk agen yang berjalan lama. NVIDIA NIM bahkan lebih eksplisit tentang peran yang dituju, menyebutnya paling cocok untuk agen otonom yang berjalan lama, deployment sub-agen pekerja utama, dan workflow agentic. Itu adalah bentuk produk yang sangat berbeda dari satu model raksasa seperti oracle yang menjawab setiap pertanyaan seperti penyihir kurang tidur dengan lencana pengadaan.
Di sinilah desain parameter aktif menjadi penting. Inferensi untuk agen sering kali mati oleh seribu panggilan kecil: rencanakan, cari, rangkum, panggil tool, periksa hasil, coba lagi, minta maaf kepada log, ulangi. Model yang menjaga compute aktif tetap rendah sambil mempertahankan penalaran yang dapat digunakan bisa menjadi lapisan tengah membosankan yang mengerjakan sebagian besar pekerjaan, dan lapisan tengah yang membosankan adalah cara software benar-benar menghasilkan uang.
Artificial Analysis Menunjukkan Tradeoff yang Harus Diuji Pembangun
Artificial Analysis berhati-hati tentang tradeoff-nya. Mereka mengatakan Nemotron 3.5 Lightning berada di belakang Qwen3.6 35B A3B, yang mencetak 32, dan Muse Glimmer, yang ditandai tinggi pada 35, di antara model kecil dalam kelas ukurannya. Namun dalam pengujian pra-rilis terhadap endpoint DeepInfra yang menyajikan bobot NVFP4 final, Artificial Analysis mengukur kecepatan output median hampir 670 token per detik, jenis angka yang membuat loop agen terasa tidak seperti menonton sup mendingin.
Angka agentic juga menjadi tempat rilis ini terasa lebih dari sekadar sedikit pedas. Artificial Analysis melaporkan peningkatan terbesar dibanding Nemotron 3 Nano pada evaluasi agentic, termasuk GDPval-AA v2 dengan kenaikan plus 334 ELO yang melewati gpt-oss-120b dan Nemotron 3 Super, plus peningkatan pada Termina. Itu tidak membuat Lightning menjadi jawaban universal, karena jawaban universal dalam AI biasanya hanyalah faktur yang memakai parfum. Namun itu menjadikannya kandidat serius bagi tim yang membangun agen yang membutuhkan kecepatan, konteks panjang, open weights, dan transparansi yang cukup untuk menyetel, bukan berdoa.
Bagi pembaca yang membangun dengan model terbuka, langkah berguna berikutnya bukan berdebat tentang total parameter di internet, meskipun saya menghormati kardionya. Uji permukaan deployment yang sebenarnya: penjejalan konteks versus retrieval, perilaku serving NVFP4, latensi loop agen, peninjauan lisensi, dan apakah resep NVIDIA cocok dengan data domain Anda sendiri. Kontes open-weight bukan lagi reli monster truck; sekarang ia adalah departemen pengiriman dengan anggaran latensi.