Ars: Modeller o kadar hızlı gelişiyor ki, herhangi bir varsayımla bir şey inşa etmenin anlamsız olduğu söyleniyor. Bu, çok hafif bir harness kullanmayı ya da hiçbir şey yapmamayı savunan bir argüman; çünkü üstel ilerleme devam ederken altı ay ya da on iki ay sonra nerede olacağınızı bilemezsiniz.
Perneti: Bunda çok doğruluk payı var ama bence birkaç farklı perspektiften düşünmek gerek.
Augment'te biz şöyle düşünüyoruz: Daha yüksek kaliteli sonuçlar için iki bileşen gerekir: zeka ve bağlam. Modeller gerçekten iyi hale gelirken, zeka şüphesiz üstel olarak daha iyi olacak. Ancak daha zeki olmaları, bağlama sahip oldukları anlamına gelmez.
Şimdi, bir kişi token harcayarak istediği bağlamı elde edebilir. İşte burada ikinci boyut devreye giriyor: maliyet. Mühendislik liderlerinin şu anda sorduğu soru bu: Token bütçenizin ne kadarı bağlam toplamaya ve doğru sonuçları üretmeye gidiyor? Modeli doğru şekilde kullanarak en yüksek kaliteli sonuçları mı alıyorsunuz?
İşte bu noktada harness tasarımı ve bağlamın önemli olduğunu düşünüyorum. Yani benim için bu, zeka ve bağlamın birleşimi ve ardından bir sistem mühendisliği problemi: en düşük maliyetle en optimal sonucu elde etmek için bu dikeylerin her birine doğru enerjiyi nasıl koyarsınız?
Ars: Yazılım geliştirmede yapay zekaya şüpheyle yaklaşan birçok okuyucumuz var. İki itiraz özellikle yaygın. Birincisi, bu sistemlere yeterince güvenemeyecekleri ve değmeyecek teknik borç yaratacakları. İkincisi, bu ajan tabanlı iş akışlarının çok pahalı olması. Ne düşünüyorsunuz?
Perneti: İkisine de değineceğim. Öncelikle şunu söyleyeyim: Umarım herkes modellerin üstel bir hızla gelişmeye devam ettiği temel gerçeğinde hemfikirdir. Dolayısıyla ne yaparsanız yapın, üstel eğriye binmek istersiniz ki nereye gittiğini anlayın ve bundan faydalanmak için kendinizi yönlendirin.
Güven, doğrulama ve teknik borç konusundaki sorunuza dönersek, eğer bu soruna 'Bunu ajanlara devredip gidiyorum' şeklinde yaklaşırsanız, bu doğru değil. İşler böyle yürümeyecek. Bu yüzden insanlardan oluşan ekiplerin ajanlardan oluşan ekiplerle çalıştığı, insanların hâlâ daha uygun olduğu birçok nokta olduğu bir modelden bahsediyorum. Örneğin spesifikasyon incelemeleri. Ajanların spesifikasyon yazmada iyi olmadığını görüyoruz. Bu yüzden bir ajana rehberlik ederek iyi bir spesifikasyon yazdırmak gerekiyor. Ancak spesifikasyon bir kez hazır olduğunda, ajanlar uygulamada çok iyiler. Dolayısıyla bundan faydalanmamak anlamsız.