Vi har lavet et grundigt studie af Doras performance. Dora har nu en dokumenteret høj performance på dansk klinisk tekst med en F1-score på 0,945 – og er dermed den bedste i. klassen på dansk (okt 25)
Dokumenteret klinisk nytteværdi
I en prospektiv evaluering identificerede Dora korrekt alle relevante sygdomme, symptomer, diagnostik og behandlinger i 100 % af patientjournalerne. Læger vurderede modellens udtræk som pålidelige og direkte anvendelige i klinisk arbejde – et vigtigt skridt mod effektiv informationssøgning og beslutningsstøtte.
Biasanalyse: små forskelle på tværs af fagområder
En systematisk biasanalyse viste at ydeevnen var ensartet på tværs af køn og aldersgrupper og på tværs af kliniske områder som medicin, og kirurgi med en minimal lavere præstation i psykiatriske journaler, hvor teksten typisk er længere og indeholder flere symptomer (<0,03 F1-point forskel).
Fremtidsperspektiver
Data viser at Dora er pålidelig og med høj performance og dermed er klar til integration i kliniske applikationer.
Forfattere: Martin Sundahl Laursen, Josefine Bak H. Adelhelm, Lina Elkjær Pedersen, Rasmus Bank Lynggaard og Pernille Just Vinholt, Odense Universitetshospital og Syddansk Universitet.