DesignArena'nın kurucu ortaklarından Grace Li, şirketin 2025 yılında, birkaç kolej arkadaşının AI oyun motorunu çalıştırma çabalarıyla başladığını anlatıyor. Modeller işlevsel oyunlar oluşturabiliyordu, ancak hiçbir oyun eğlenceli değildi - bu da ilginç bir soruyu gündeme getirdi: Bir oyunun eğlenceli olup olmadığını nasıl anlayabilirsiniz?
Bu soruya cevap bulmak için, insan yargısının yerini hiçbir şeyin alamayacağı sonucuna vardılar ve kısa sürede, büyük ölçekte dürüst insan geri bildirimi almak için yollar brainstorm etmeye başladılar.
DesignArena, şimdi dünya çapında 5.3 milyon kişi tarafından kullanılan bir AI aracı haline geldi. AI şirketlerinin ölçeklenebilir kullanıcı geri bildirimi için ödeme yapmaya hazır olduğu ortaya çıktı.
Li, "Bu, birçok AI modelinin tasarım alanında ilerleme kaydetmesi için eksik bir halkaydı" diyor. "Bir hafta sonra, ilk büyük anlaşmamızı bir ön uç laboratuvarı ile kapattık ve gerisi tarih oldu."
Pazartesi günü, DesignArena'nın arkasındaki şirket - Intelligence - Index Ventures'ın liderliğinde 7.9 milyon dolarlık bir tohum turu açıkladı. Bu turda Conviction, A*, Valkyrie ve diğerleri de yer aldı.
DesignArena, gelişmiş bir model yönlendiricisi gibi çalışıyor. Kullanıcılar, bir dizi "A karşı B" seçeneği sunulana kadar taleplerini, formatlarını ve stillerini girebiliyorlar. Gerçek değer, platformun empresa tarafında yatıyor - burada katılan modeller, medya oluşturan modelleri için anlık geri bildirimi bir kaynak olarak kullanabiliyor.
Kullanıcılar, hangi modelleri derecelendirdiklerine aldırmıyor - Li'nin sözleriyle, "en iyi çıktıyı elde etmek istiyorlar" - bu nedenle derecelendirmeleri, kullanıcıların gerçekten ne istediğine dair kritik girdi sağlıyor.
Ön uç laboratuvarları için bu, ödemeye değer bir hizmet - Li, sitenin şu anda 60 milyon dolarlık yıllık geliri olduğunu ve AI endüstrisi için insan tarafından yönlendirilen değerlendirme verilerinin önemli bir kaynağı olduğunu belirtiyor.
Kullanıcıların çıktılarını alabilmek için giriş yapmaları gerekiyor, bu nedenle Intelligence, farklı kıtalarda ve zaman içinde lezzetlerin nasıl değiştiğini de takip edebiliyor. (Li, Asya'daki web panellerinin daha çok maksimalist bir tasarım stiline sahip olduğunu not ediyor.)
Bu ölçümlere, otomatik benchmark'lar - büyük ölçekte çalışabiliyorlar ancak genellikle manipülasyona açık olabiliyorlar - önemli bir katkı sağlıyor. Hugging Face ihlali, bu durumun dramatik bir şekilde nasıl ortaya çıkabileceğini gösterdi.
Bununla birlikte, crowdsourced insan geri bildiriminin otomatik olarak kazandıran bir pazar olmayacağı da unutulmamalı. Yupp, geçen yıl kapılarını kapatmadan önce 33 milyon dolarlık yatırım almış ve 1.3 milyon kullanıcısı olmuştu, ancak sürdürülebilir bir uzun vadeli iş kuramadı.
Bununla beraber, insan değerlendirmesine dayanan diğer bazı girişimler başarılı gibi görünüyor. Metin tabanlı yanıtlara benzer bir yaklaşım benimseyen LM Arena, Ocak ayında sadece dört aydır ürününü resmi olarak piyasaya sürmüş olmasına rağmen 150 milyon dolarlık bir Serie A yatırımını aldı.
