Karpathy: Kesenjangan Pemahaman LLM Kian Melebar
Judul asli: The gap in shared understanding of LLM capability is widening
Mengapa Ini Penting
Peta distribusi pengguna ini menjelaskan mengapa debat publik soal AI sering meleset dari realitas industri.
Andrej Karpathy memetakan 4 lapisan pengguna LLM: 6 miliar orang belum kenal, 1-2 miliar casual user, 20 juta profesional, dan ~5.000 orang dengan akses sistem frontier internal.
Andrej Karpathy memperbarui analisisnya tentang kesenjangan pemahaman kemampuan LLM yang ia sebut kini berbentuk 'corong tajam', bukan sekadar dua kelompok yang saling bicara tanpa nyambung.
Di lapisan terluar, sekitar 6 miliar orang (75% populasi dunia) hampir tidak pernah bersentuhan dengan LLM. Satu hingga dua miliar orang adalah pengguna kasual produk seperti ChatGPT versi gratis — mereka melihatnya sebagai mesin pencari yang lebih pintar atau alat bantu menulis.
Lalu ada sekitar 20 juta profesional (0,2%) yang menggunakan LLM frontier untuk pekerjaan matematis dan koding. Karpathy mengakui bahwa kurang dari setahun lalu ia masih menulis kode secara manual karakter per karakter. Kini proyek kompleks yang butuh berminggu-minggu bisa diselesaikan oleh agen dengan satu prompt.
Di puncak corong: sekitar 5.000 orang dengan akses sistem frontier internal menyaksikan ribuan agen berkolaborasi dalam 'mega proyek' perangkat lunak, menemukan sains baru, hingga mengadvance matematika frontier. Karpathy mencatat tiga pendorong kesenjangan ini: skala dampak bergantung pada ambisi masalah, kemampuan LLM terkonsentrasi di domain yang bisa diverifikasi seperti kode dan matematika, serta perbedaan level akses.