The Primer v2 — başarısız eval kaydı
Bu depo değerlendirme denemesini belgeler; çalıştırılabilir model içermez.
model.onnx,config.jsonve model kartı eğitim kapısı başarısız olduğu için üretilmedi. Bu bağlantı bir model dağıtımı değildir.
Amaçlanan görev
Primer senaryosunda oyuncunun bir sahnede riskli seçeneği işaretleme olasılığını, beş oyun özelliğinden tahmin etmek. Proje davranış hedefini önceden riskli_secim olarak belirledi. Bu kayıt, görevin başarısız değerlendirmesini şeffafça saklar; çıkarım için kullanılmamalıdır.
Veri ve değerlendirme
- 66 anonim oyun oturumu, 198 karar satırı; aynı
(session_id, decision_id)kayıtları tekilleştirildi. - Repo sahibinin beyanına göre veriyi 7 arkadaş katılımcı sağladı. Katılımcı sayısı CSV'de tutulmuyor.
- Etiket dağılımı: güvenli seçim 112, riskli seçim 86.
- Model reçetesi: StandardScaler + dengeli sınıf ağırlıklı LogisticRegression; sabit tohum 13.
- Doğrulama:
session_idbazında 5-fold GroupKFold; sabit olasılık eşiği 0.55. - Önceden belirlenen kapı: balanced accuracy en az 0.65 ve riskli seçim recall en az 0.70.
- Sonuç: balanced accuracy 0.525, riskli seçim recall 0.256. Kapı başarısız.
- Karışıklık matrisi (gerçek 0/1 satırları, tahmin 0/1 sütunları):
[[89, 23], [64, 22]].
Yayın kararı ve sınırlar
Başarısız aday yayımlanmadı; ONNX modeli, model sözleşmesi veya tahmin endpoint'i yok. GitHub Pages uygulamasında model manifesti kapalı ve uygulama statik güvenli akışta. Eşiği sonuç görüldükten sonra değiştirmek yerine yayın durduruldu.
CSV kişi kimliği içermediğinden GroupKFold oturumları ayırır, kişileri değil. Aynı kişinin birden çok oturumu farklı katlarda bulunabilir; bu değerlendirme katılımcı bağımsız genelleme kanıtı değildir. Bu sonuçtan kişi hakkında karar, not veya risk profili çıkarılmamalıdır.
Tekrarlama ve kaynaklar
Depo kökünde Python 3.12 ve requirements-ml.txt kurulduktan sonra python train.py çalıştırın. Beklenen sonuç, önceden belirlenmiş eval kapısının başarısız olduğunu bildirip artefakt oluşturmadan durmasıdır.