Polish_Medical_Exams / leaderboards /pes_accuracy.json
michal
Upload
54f0e5a
raw
history blame
13.2 kB
[
{
"model_name": "model-epfl-llm-meditron-7b",
"stomatologia dziecięca": 15.833333333333332,
"neurologia": 14.285714285714285,
"medycyna pracy": 17.796610169491526,
"medycyna rodzinna": 20.689655172413794,
"patomorfologia": 25.0,
"endokrynologia ginekologiczna i rozrodczość": 19.491525423728813,
"radiologia i diagnostyka obrazowa": 18.333333333333332,
"chirurgia szczękowo-twarzowa": 26.05042016806723,
"medycyna sportowa": 25.0,
"neonatologia": 25.423728813559322,
"ortopedia": 18.26086956521739,
"medycyna paliatywna": 20.0,
"chirurgia stomatologiczna": 16.94915254237288,
"neurologia dziecięca": 26.05042016806723,
"dermatologia i wenerologia": 15.966386554621847,
"diabetologia": 19.65811965811966,
"hematologia": 21.008403361344538,
"onkologia kliniczna": 21.367521367521366,
"protetyka stomatologiczna": 20.0,
"endokrynologia i diabetologia dziecięca": 21.008403361344538,
"neurochirurgia": 23.728813559322035,
"alergologia": 20.833333333333336,
"geriatria": 16.101694915254235,
"choroby wewnętrzne": 17.647058823529413,
"ginekologia onkologiczna": 13.445378151260504,
"otolaryngologia": 27.350427350427353,
"ortodoncja": 25.0,
"anestezjologia": 24.369747899159663,
"endokrynologia": 17.5,
"periodontologia": 11.76470588235294,
"psychiatria dzieci i mlodzieży": 19.166666666666668,
"psychiatria": 18.333333333333332,
"rehabilitacja medyczna": 16.94915254237288,
"perinatologia": 8.333333333333332,
"balneologia i medycyna fizykalna": 23.333333333333332,
"pediatria": 10.784313725490197,
"nefrologia": 22.5,
"choroby płuc": 18.103448275862068,
"choroby zakaźne": 20.0,
"okulistyka": 17.094017094017094,
"kardiochirurgia": 14.166666666666666,
"chirurgia naczyniowa": 19.166666666666668,
"reumatologia": 18.96551724137931,
"chirurgia onkologiczna": 12.711864406779661,
"transplantologia kliniczna": 18.803418803418804,
"radioterapia onkologiczna": 26.666666666666668,
"gastroenterologia dziecięca": 14.166666666666666,
"kardiologia": 17.094017094017094,
"angiologia": 14.166666666666666,
"gastroenterologia": 17.543859649122805,
"chirurgia dziecięca": 16.80672268907563,
"hipertensjologia": 10.92436974789916,
"stomatologia zachowawcza": 26.05042016806723,
"chirurgia ogólna": 19.166666666666668,
"choroby płuc dzieci": 24.166666666666668,
"położnictwo i ginekologia": 21.666666666666668,
"medycyna ratunkowa": 19.626168224299064,
"nefrologia dziecięca": 20.168067226890756,
"endokrynologia ginekologiczna i rozrodczość": 24.786324786324787,
"anestezjologia i intensywna terapia": 23.47826086956522,
"stomatologia dziecięca": 23.52941176470588,
"ortopedia i traumatologia narządu ruchu": 21.428571428571427,
"położnictwo i ginekologia": 15.65217391304348,
"chirurgia szczękowo-twarzowa": 18.421052631578945,
"neurologia dziecięca": 23.52941176470588,
"choroby zakaźne": 18.333333333333332,
"gastroenterologia dziecięca": 14.166666666666666,
"stomatologia zachowawcza z endodoncją": 19.491525423728813,
"endokrynologia i diabetologia dziecięca": 26.27118644067797,
"psychiatria dzieci i młodzieży": 16.94915254237288,
"chirurgia ogólna": 20.33898305084746,
"choroby wewnętrzne": 18.556701030927837,
"diagnostyka laboratoryjna": 30.508474576271187,
"chirurgia dziecięca": 22.88135593220339,
"otorynolaryngologia": 18.803418803418804,
"urologia dziecięca": 25.663716814159294,
"zdrowie publiczne": 20.168067226890756,
"genetyka kliniczna": 19.491525423728813,
"medycyna nuklearna": 23.076923076923077,
"kardiologia dziecięca": 15.789473684210526,
"chirurgia plastyczna": 20.0,
"chirurgia klatki piersiowej": 24.166666666666668,
"audiologia i foniatria": 18.421052631578945,
"intensywna terapia": 20.833333333333336,
"overall_accuracy": 19.74083822636161
},
{
"model_name": "model-speakleash-Bielik-11B-v2.2-Instruct",
"stomatologia dziecięca": 40.833333333333336,
"neurologia": 48.739495798319325,
"medycyna pracy": 42.3728813559322,
"medycyna rodzinna": 43.103448275862064,
"patomorfologia": 50.83333333333333,
"endokrynologia ginekologiczna i rozrodczość": 32.20338983050847,
"radiologia i diagnostyka obrazowa": 46.666666666666664,
"chirurgia szczękowo-twarzowa": 25.210084033613445,
"medycyna sportowa": 57.49999999999999,
"neonatologia": 46.61016949152542,
"ortopedia": 41.73913043478261,
"medycyna paliatywna": 45.83333333333333,
"chirurgia stomatologiczna": 36.440677966101696,
"neurologia dziecięca": 45.378151260504204,
"dermatologia i wenerologia": 37.81512605042017,
"diabetologia": 31.62393162393162,
"hematologia": 33.61344537815126,
"onkologia kliniczna": 44.44444444444444,
"protetyka stomatologiczna": 36.666666666666664,
"endokrynologia i diabetologia dziecięca": 44.537815126050425,
"neurochirurgia": 27.966101694915253,
"alergologia": 36.666666666666664,
"geriatria": 45.76271186440678,
"choroby wewnętrzne": 46.21848739495798,
"ginekologia onkologiczna": 42.016806722689076,
"otolaryngologia": 33.33333333333333,
"ortodoncja": 31.25,
"anestezjologia": 51.26050420168067,
"endokrynologia": 33.33333333333333,
"periodontologia": 36.97478991596639,
"psychiatria dzieci i mlodzieży": 55.833333333333336,
"psychiatria": 36.666666666666664,
"rehabilitacja medyczna": 53.38983050847458,
"perinatologia": 34.166666666666664,
"balneologia i medycyna fizykalna": 41.66666666666667,
"pediatria": 48.03921568627451,
"nefrologia": 33.33333333333333,
"choroby płuc": 51.724137931034484,
"choroby zakaźne": 45.0,
"okulistyka": 45.2991452991453,
"kardiochirurgia": 37.5,
"chirurgia naczyniowa": 45.83333333333333,
"reumatologia": 36.206896551724135,
"chirurgia onkologiczna": 44.06779661016949,
"transplantologia kliniczna": 33.33333333333333,
"radioterapia onkologiczna": 41.66666666666667,
"gastroenterologia dziecięca": 39.166666666666664,
"kardiologia": 40.17094017094017,
"angiologia": 46.666666666666664,
"gastroenterologia": 45.614035087719294,
"chirurgia dziecięca": 42.857142857142854,
"hipertensjologia": 51.26050420168067,
"stomatologia zachowawcza": 27.73109243697479,
"chirurgia ogólna": 29.166666666666668,
"choroby płuc dzieci": 48.333333333333336,
"położnictwo i ginekologia": 40.833333333333336,
"medycyna ratunkowa": 50.467289719626166,
"nefrologia dziecięca": 50.42016806722689,
"endokrynologia ginekologiczna i rozrodczość": 41.02564102564102,
"anestezjologia i intensywna terapia": 39.130434782608695,
"stomatologia dziecięca": 32.773109243697476,
"ortopedia i traumatologia narządu ruchu": 40.17857142857143,
"położnictwo i ginekologia": 42.608695652173914,
"chirurgia szczękowo-twarzowa": 27.192982456140353,
"neurologia dziecięca": 42.016806722689076,
"choroby zakaźne": 40.0,
"gastroenterologia dziecięca": 42.5,
"stomatologia zachowawcza z endodoncją": 36.440677966101696,
"endokrynologia i diabetologia dziecięca": 33.89830508474576,
"psychiatria dzieci i młodzieży": 59.32203389830508,
"chirurgia ogólna": 46.61016949152542,
"choroby wewnętrzne": 38.144329896907216,
"diagnostyka laboratoryjna": 50.0,
"chirurgia dziecięca": 29.66101694915254,
"otorynolaryngologia": 41.88034188034188,
"urologia dziecięca": 35.39823008849557,
"zdrowie publiczne": 71.42857142857143,
"genetyka kliniczna": 38.13559322033898,
"medycyna nuklearna": 45.2991452991453,
"kardiologia dziecięca": 42.98245614035088,
"chirurgia plastyczna": 45.83333333333333,
"chirurgia klatki piersiowej": 39.166666666666664,
"audiologia i foniatria": 48.24561403508772,
"intensywna terapia": 44.166666666666664,
"overall_accuracy": 41.759465478841875
},
{
"model_name": "model-meta-llama-Meta-Llama-3.1-8B-Instruct",
"stomatologia dziecięca": 27.500000000000004,
"neurologia": 50.42016806722689,
"medycyna pracy": 38.983050847457626,
"medycyna rodzinna": 35.3448275862069,
"patomorfologia": 46.666666666666664,
"endokrynologia ginekologiczna i rozrodczość": 27.11864406779661,
"radiologia i diagnostyka obrazowa": 40.833333333333336,
"chirurgia szczękowo-twarzowa": 26.89075630252101,
"medycyna sportowa": 45.0,
"neonatologia": 45.76271186440678,
"ortopedia": 40.0,
"medycyna paliatywna": 55.833333333333336,
"chirurgia stomatologiczna": 33.05084745762712,
"neurologia dziecięca": 38.655462184873954,
"dermatologia i wenerologia": 32.773109243697476,
"diabetologia": 41.88034188034188,
"hematologia": 41.17647058823529,
"onkologia kliniczna": 36.75213675213676,
"protetyka stomatologiczna": 38.333333333333336,
"endokrynologia i diabetologia dziecięca": 41.17647058823529,
"neurochirurgia": 27.966101694915253,
"alergologia": 37.5,
"geriatria": 44.91525423728814,
"choroby wewnętrzne": 47.05882352941176,
"ginekologia onkologiczna": 40.33613445378151,
"otolaryngologia": 26.495726495726498,
"ortodoncja": 27.67857142857143,
"anestezjologia": 48.739495798319325,
"endokrynologia": 30.833333333333336,
"periodontologia": 41.17647058823529,
"psychiatria dzieci i mlodzieży": 47.5,
"psychiatria": 32.5,
"rehabilitacja medyczna": 45.76271186440678,
"perinatologia": 36.666666666666664,
"balneologia i medycyna fizykalna": 38.333333333333336,
"pediatria": 39.21568627450981,
"nefrologia": 37.5,
"choroby płuc": 50.86206896551724,
"choroby zakaźne": 44.166666666666664,
"okulistyka": 43.58974358974359,
"kardiochirurgia": 43.333333333333336,
"chirurgia naczyniowa": 35.833333333333336,
"reumatologia": 36.206896551724135,
"chirurgia onkologiczna": 37.28813559322034,
"transplantologia kliniczna": 32.47863247863248,
"radioterapia onkologiczna": 35.833333333333336,
"gastroenterologia dziecięca": 40.833333333333336,
"kardiologia": 37.60683760683761,
"angiologia": 40.833333333333336,
"gastroenterologia": 39.473684210526315,
"chirurgia dziecięca": 31.092436974789916,
"hipertensjologia": 46.21848739495798,
"stomatologia zachowawcza": 37.81512605042017,
"chirurgia ogólna": 25.0,
"choroby płuc dzieci": 37.5,
"położnictwo i ginekologia": 36.666666666666664,
"medycyna ratunkowa": 50.467289719626166,
"nefrologia dziecięca": 43.69747899159664,
"endokrynologia ginekologiczna i rozrodczość": 42.73504273504273,
"anestezjologia i intensywna terapia": 36.52173913043478,
"stomatologia dziecięca": 31.092436974789916,
"ortopedia i traumatologia narządu ruchu": 38.392857142857146,
"położnictwo i ginekologia": 39.130434782608695,
"chirurgia szczękowo-twarzowa": 26.31578947368421,
"neurologia dziecięca": 41.17647058823529,
"choroby zakaźne": 30.0,
"gastroenterologia dziecięca": 38.333333333333336,
"stomatologia zachowawcza z endodoncją": 27.11864406779661,
"endokrynologia i diabetologia dziecięca": 38.983050847457626,
"psychiatria dzieci i młodzieży": 51.69491525423729,
"chirurgia ogólna": 41.52542372881356,
"choroby wewnętrzne": 43.29896907216495,
"diagnostyka laboratoryjna": 48.30508474576271,
"chirurgia dziecięca": 33.05084745762712,
"otorynolaryngologia": 36.75213675213676,
"urologia dziecięca": 35.39823008849557,
"zdrowie publiczne": 61.34453781512605,
"genetyka kliniczna": 46.61016949152542,
"medycyna nuklearna": 43.58974358974359,
"kardiologia dziecięca": 42.98245614035088,
"chirurgia plastyczna": 45.0,
"chirurgia klatki piersiowej": 35.833333333333336,
"audiologia i foniatria": 47.368421052631575,
"intensywna terapia": 45.0,
"overall_accuracy": 39.380441384895725
}
]