Gelişmiş yapay zeka sistemlerinin yazılım geliştirme süreçlerine katkısını ölçmek amacıyla yürütülen çarpıcı bir çalışma, sonuçlarıyla dikkat çekti. Kâr amacı gütmeyen Model Evaluation & Threat Research (METR) tarafından 2025 başlarında yürütülen araştırma, yapay zekanın deneyimli geliştiricilere beklenenden az katkı sunduğunu gösterdi.
GERÇEKLERLE BEKLENTİLER UYUŞMADI
Araştırma kapsamında, 16 deneyimli açık kaynak geliştirici, yakından tanıdıkları büyük ölçekli kod tabanları üzerinde 246 gerçek dünya görevini yerine getirdi. Görevler, yapay zeka araçlarının kullanımına izin verilen ve verilmeyen gruplara rastgele atandı. Katılımcılar yapay zekanın kendilerini yüzde 24 daha hızlı yapacağını düşünüyordu. Görev sonrasında dahi üretkenliklerinin yüzde 20 arttığına inandılar. Ancak veriler tam tersini gösterdi: Yapay zeka araçları kullanıldığında görevler ortalama yüzde 19 daha uzun sürdü.
KODDA GERİYE GİDİŞ
Araştırmacılar, bu beklenmedik yavaşlamanın nedenlerini detaylı olarak inceledi. Öncelikle, katılımcılar zaten projelere oldukça hâkimdi; bu nedenle yapay zekanın sunabileceği faydalar sınırlı kaldı. Projelerin büyüklüğü (çoğu bir milyon satırın üzerindeydi) yapay zeka için dezavantaj oluşturdu. Önerilen kodların sadece yüzde 44’ü geliştiriciler tarafından kabul edildi. Geri kalan önerilerin doğrulanması ve düzeltilmesi zaman kaybına yol açtı. Ayrıca, yapay zeka araçları büyük kod depolarındaki bağlamı anlamakta zorlandı ve alakasız önerilerde bulundu.
DENEY TASARIMI TİTİZ YAPILDI
Araştırmada katılımcılar her göreve başlamadan önce, yapay zeka kullanımıyla tahmini süreyi bildirdi. Görev sürecinde ekran görüntüleri alındı ve zamanlamalar kayıt altına alındı. Geliştiricilere profesyonelliklerini korumaları için saat başına 150 dolar ödeme yapıldı. Veriler, çeşitli ölçümlerle tutarlılık gösterdi ve önyargı ya da deneysel hata izine rastlanmadı.
YORUCU GÖREVLERİ KOLAYLAŞTIRIYOR
Araştırmacılar bu bulguların genelleştirilmemesi gerektiğini vurguluyor. Daha az deneyimli yazılımcılar veya yeni projeler üzerinde çalışanlar için yapay zekanın katkısı daha yüksek olabilir. Ayrıca, teknolojinin hızla evrildiği ve yakın gelecekte farklı sonuçlar elde edilebileceği de ifade ediliyor. Katılımcıların çoğu, üretkenlik artmasa da yapay zekanın kodlamayı zihinsel olarak daha az yorucu hâle getirdiğini ve süreci daha akışkan kıldığını belirtiyor.
