AI mengganti metrik produktivitas coding dari hasil ke volume
Judul asli: Lines of code got a better publicist
Mengapa Ini Penting
Mengungkap bagaimana industri AI beralih dari metrik hasil ke volume untuk menutupi kompleksitas pengukuran dampak produktivitas sesungguhnya.
Perusahaan AI seperti Google, Anthropic, dan OpenAI klaim 75-80% kode baru ditulis AI, namun peneliti seperti METR menunjukkan pengukuran dampak produktivitas sesungguhnya menjadi semakin kompleks dan sulit diverifikasi.
David Curlewis mengkritik pergeseran metrik produktivitas pengembangan dari hasil ke volume kode. Google mengklaim 75% kode baru ditulis AI, Anthropic melaporkan 80% kode produksi ditulis Claude dengan engineer mengirim 8x lebih banyak kode per kuartal, sementara Cursor mencatat 100 juta+ baris kode enterprise per hari. Namun penelitian METR menunjukkan developer berpengalaman 19% lebih lambat dengan AI meski merasa 20% lebih cepat. Studi NBER terhadap 6.000 eksekutif menemukan 69% perusahaan menggunakan AI namun 90% tidak melaporkan dampak produktivitas terukur. Konsensus lintas-studi menunjukkan keuntungan organisasi sekitar 10%.