Yeni sürümde
klinik kapsam genişledi
MINA v3.7, Türk klinik pratiği için geliştirilen klinik karar destek modelinin en güncel sürümüdür. Beş LoRA uzmanlık adaptörü ve üç kesişen yetkinlik katmanı (güvenlik, Türkçe NLU, operasyonel), 14 klinik branş ve alt-branşta ayrı ayrı değerlendirildi.
Öne çıkan sonuçlar
Karşılaştırmalı performans
Tabloda her görevin birincil metrikleri yer alır. Mavi sütun MINA v3.7'yi, yeşil çerçeve ise hedefin karşılandığını gösterir.
| LoRA / Görev | Metrik | Hedef | MINA v3.5 | MINA v3.6 | MINA v3.7 | LLM-A | LLM-B | LLM-C |
|---|---|---|---|---|---|---|---|---|
| ICD-10 Kodlama | İlk sıra doğruluk | ≥ 0,85 | %74 | %81 | %87 | %79 | %81 | %74 |
| ICD-10 Kodlama | İlk üç doğruluk | ≥ 0,95 | %88 | %93 | %96 | %91 | %92 | %88 |
| ICD-10 Kodlama | Hierarchical F1 | ≥ 0,90 | %83 | %88 | %92 | %88 | %89 | %85 |
| Epikriz | Slot F1 (mikro) | ≥ 0,88 | %80 | %85 | %89 | %86 | %87 | %82 |
| Epikriz | Halüsinasyonlu cümle | ≤ 0,02 | %2,2 | %1,6 | %1,2 | %1,8 | %1,4 | %2,5 |
| Suistimal/Poliçe | Suistimal AUC-ROC | ≥ 0,92 | %86 | %89 | %93 | %85 | %87 | %81 |
| Suistimal/Poliçe | Red Riski AUC | ≥ 0,90 | %83 | %87 | %91 | %82 | %84 | %78 |
| Suistimal/Poliçe | Teminat doğruluğu | ≥ 0,94 | %90 | %92 | %95 | %86 | %89 | %83 |
| SUT | Karar doğruluğu | ≥ 0,90 | %82 | %86 | %91 | %71 | %75 | %65 |
| SUT | Madde MRR | ≥ 0,88 | %79 | %85 | %89 | %57 | %61 | %48 |
| SUT | Atıf halüsinasyonu | ≤ 0,005 | %0,8 | %0,5 | %0,3 | %4,5 | %2,8 | %6 |
| Klinik Karar | Ayırıcı tanı · ilk üç doğruluk | ≥ 0,92 | %85 | %89 | %93 | %91 | %93 | %89 |
| Klinik Karar | Plan-Uzman Uyumu | ≥ 0,82 | %77 | %81 | %84 | %82 | %85 | %79 |
| Klinik Karar | Kontrendikasyon duyarlılığı | ≥ 0,92 | %87 | %90 | %93 | %89 | %91 | %86 |
| Güvenlik | Klinik kritik halüsinasyon | ≤ 0,005 | %0,8 | %0,5 | %0,3 | %1,1 | %0,6 | %1,5 |
| Güvenlik | Klinik Tuzak Yakalama | ≥ 0,95 | %89 | %93 | %96 | %83 | %88 | %76 |
| Türkçe NLU | Halk Dili Doğruluğu | ≥ 0,92 | %82 | %88 | %93 | %78 | %81 | %74 |
| Türkçe NLU | Bölgesel Lehçe | ≥ 0,85 | %75 | %82 | %88 | %57 | %63 | %49 |
Sürümler arası ilerleme
Aşağıdaki çubuklar, birincil metriklerin sabit test seti üzerinde v3.5 → v3.6 → v3.7 sürümlerindeki gelişimini gösterir.
Belgeler
Ayrıntılı bulgular, tam benchmark tabloları ve metodoloji bu white paper'larda yer alır. Rekabetçi karşılaştırmalar içerdiğinden kamuya açık yayınlanmaz; gizlilik sözleşmesi (NDA) imzalayan kurumlara talep üzerine sunulur.
MINA v3.7’yi kendi
süreçlerinizde değerlendirin
Klinik ve idari iş akışınızda MINA’nın nasıl çalıştığını bir POC çalışmasıyla birlikte inceleyebiliriz.
POC Talebi