Değerlendirme veri kümesi
Evaluation dataset
D4
Değerlendirme veri kümesi, bir sistemi belirtilmiş bir amaç için değerlendirmede kullanılan tanımlı girdi veya referans bilgi koleksiyonudur.
İnceleme durumu: 2026-11-26
Teknik açıklama
Belgelenmiş doğruluğu, temsil gücü, ilgililiği ve uygunluğu, değerlendirme sonucunun neyi betimleyebileceğini tanımlamaya yardımcı olur.
Kavramsal sınırlar
Değerlendirme veri kümesi, kullanım koşullarını kendiliğinden temsil etmez; eğitim, doğrulama ve test rolleri belirtildiğinde bu roller örtük biçimde birbirine karıştırılmamalıdır.
Sağlayıcıdan bağımsız örnek
Bir hizmet ekibi, yönlendirme modelinin belirtilmiş yönlendirme ölçütlerini karşılayıp karşılamadığını incelemek için izinli geçmiş destek taleplerinden etiketlenmiş bir kümeyi ayrı tutabilir.
Sınırlılıklar
Belgeleme veya bilinen referans veri olarak kullanım, veri kümesinin temsilî olduğunu ya da her etiketin tartışmasız olduğunu tek başına göstermez.
İlişkili kavramlar
Atomik iddialar ve kanıt
1.1NIST AI 600-1, Generative Artificial Intelligence Profile — D4 evidence slice
- Kaynak
- NIST AI 600-1, Generative Artificial Intelligence Profile — D4 evidence slice
- Kaynak rolü
- Yetkili kaynak
- Tam konum
- MAP 2.3, MP-2.3-002, printed p. 28
- Desteklenen iddia
- NIST, yapay zekâ yaşam döngüsünün farklı aşamalarında kullanılan verinin doğruluğunun, temsil gücünün, ilgililiğinin ve uygunluğunun gözden geçirilmesini ve belgelenmesini önerir.
- Son doğrulama
- Gözden geçirme tarihi
- Kapsam sınırlaması
- Bu rehber, yalnızca belgelenmiş olduğu için herhangi bir veri kümesini temsilî olarak onaylamaz.
2.1NIST AI 600-1, Generative Artificial Intelligence Profile — D4 evidence slice
- Kaynak
- NIST AI 600-1, Generative Artificial Intelligence Profile — D4 evidence slice
- Kaynak rolü
- Yetkili kaynak
- Tam konum
- MAP 2.3 action text, printed p. 27
- Desteklenen iddia
- NIST, bilinen referans gerçeklik verisini çeşitli değerlendirme yöntemleri arasındaki karşılaştırma girdilerinden biri olarak belirtir.
- Son doğrulama
- Gözden geçirme tarihi
- Kapsam sınırlaması
- Bilinen referans veri göreve özgü karşılaştırmayı destekleyebilir; tüm etiketlerin eksiksiz veya tartışmasız olduğunu göstermez.
3.1Regulation (EU) 2024/1689 (Artificial Intelligence Act)
- Kaynak
- Regulation (EU) 2024/1689 (Artificial Intelligence Act)
- Kaynak rolü
- Yetkili kaynak
- Tam konum
- Article 3(29)-(32)
- Desteklenen iddia
- AB Yapay Zekâ Tüzüğü; öğrenilebilir parametreleri veriye uydurmada kullanılan eğitim verisini, eğitilmiş sistemi değerlendirmek ve öğrenilemeyen parametreleri ile öğrenme sürecini ayarlamak için kullanılan doğrulama verisini ve sistem piyasaya sunulmadan veya hizmete alınmadan önce bağımsız değerlendirmede kullanılan test verisini birbirinden ayırır.
- Son doğrulama
- Gözden geçirme tarihi
- Kapsam sınırlaması
- Bunlar Tüzüğün tanımladığı rollerdir; her teknik iş akışının aynı veri kümesi bölümlerini kullanmasını gerektirmez.