Property Finder, Amazon Bedrock ile Yapay Zeka Değerlendirme Yanlılığını Giderdi
Property Finder, yapay zeka modellerindeki değerlendirme yanlılığını tespit ederek Amazon Bedrock üzerinde Llama 4 Maverick 17B Instruct modeline geçti. Bu süreçte maliyetlerini yüzde 86 oranında düşüren şirket, daha yüksek doğruluk oranlarına ulaştı.
Property Finder, Orta Doğu ve Kuzey Afrika genelinde günlük on binlerce emlak görselini işleyen yapay zeka sistemindeki değerlendirme etiketlerinin yüzde 96,8'inin tek bir modelin tahminlerinden miras kaldığını ve bu durumun yanlılığa yol açtığını belirledi.
Şirket, vizyon yapay zeka iş yükünü Amazon Bedrock'a taşırken karşılaştığı bu sorunu çözmek için insan tarafından doğrulanmış temel bir veri seti oluşturdu. Birleşik Arap Emirlikleri ve Mısır'dan seçilen görsellerin manuel olarak etiketlenmesiyle, mevcut modelin tahminlerine dayalı yanlılık döngüsü kırıldı.
AWS Üretken Yapay Zeka İnovasyon Merkezi ile iş birliği yapan ekip, yinelemeli bir optimizasyon süreciyle 'v27_PF' adlı nihai istemi geliştirdi. Bu çalışma sonucunda Llama 4 Maverick 17B Instruct modeli, 356 görselden oluşan test setinde 0,80 Micro F1 skoru elde ederek, önceki modelin 0,56'lık skorunu geride bıraktı.
Kaynaklar
- aws.amazon.com · Bağlantı