Model Gallery, büyük dil modellerini değerlendirmeniz için bir giriş noktası sağlar. Özel veri kümelerini veya genel veri kümelerini kullanarak model yeteneklerini değerlendirebilirsiniz.
Özellik kapsamı
Model Gallery yalnızca tek model değerlendirmesini destekler; bu işlem tek bir modelin çevrimiçi çıkarım sonuçlarını puanlar. Çift model karşılaştırmaları (Dual-Model Arena ve Dual-Model Offline Competition) için Model değerlendirme (ModelEval) sayfasına gidin.
Model Gallery üzerinden oluşturulan değerlendirme görevlerini aşağıdaki konumlardan birinde görüntüleyebilir ve yönetebilirsiniz:
Model Gallery > Job Management > Evaluation Jobs
Model Evaluation (ModelEval)
Değerlendirme görevi oluşturma
PAI konsoluna giriş yapın. Sol gezinme bölmesinde QuickStart > Model Gallery seçeneğini seçin.
-
Models sayfasında, yalnızca değerlendirilebilir modellerin görüntülenmesi için Supported Operations filtresinden Evaluate seçeneğini belirleyin.
NotDeğerlendirmeyi destekleyen bir modelin ince ayarından türetilen modeller de değerlendirmeyi destekler. Job Management > Training Jobs bölümünde, ilgili göreve tıklayarak ayrıntılar sayfasına gidin. Sağ üst köşede Evaluate düğmesi kullanılabilir durumdadır.
Hedef model kartına tıklayarak ayrıntılar sayfasına gidin ve ardından sayfanın sağ üst köşesindeki Evaluate düğmesine tıklayın.
Değerlendirme modları ve parametreleriyle ilgili tam açıklama için bkz. Model değerlendirme (ModelEval).