Assessing inter-rater agreement among large language model judges: Evidence from persona evaluation across varying educational risk contexts

Hyväksytty

Luokittelutiedot

OKM-julkaisutyyppi
A1 Alkuperäisartikkeli tieteellisessä aikakauslehdessä (vertaisarvioitu)
Julkaisun muoto
Artikkeli
Kohderyhmä
Tieteellinen
Vertaisarvioitu
Vertaisarvioitu
Artikkelityyppi
Alkuperäisartikkeli
Emojulkaisun tyyppi
Lehti

Julkaisun tekijät

Tekijöiden lukumäärä
3
Tekijät
Amin, Danial; Salminen, Joni; Jansen, Bernard J.
Paikalliset tekijät

Julkaisukanavan tiedot

Lehden/sarjan nimi
Technological forecasting and social change
ISSN-P (painettu)
0040-1625
ISSN-E (elektroninen)
1873-5509
ISSN-L (linking)
0040-1625
Kustantaja
Elsevier
Julkaisun JUFO ID
68113
Julkaisun JUFO-taso
3
Julkaisun AJG-taso
3
Julkaisu on FT-listalla
Ei
Julkaisun SNIP-taso
3.15
Julkaisumaa
Yhdysvallat (USA)
Kansainvälisyys
Kyllä

Julkaisun tarkemmat tiedot

Julkaisuvuosi
2026
Bibliografinen julkaisuvuosi
2027
Ilmoitusvuosi
2026
Lehden/sarjan volyymi
234
Artikkelinumero
124894
DOI
10.1016/j.techfore.2026.124894
Julkaisukieli
englanti

Yhteisjulkaisutiedot

Kansainvälinen yhteisjulkaisu
Kyllä
Yhteisjulkaisu yrityksen kanssa
Kyllä

Saatavuustiedot

Luokitukset ja lisätiedot

OKM-tieteenalaluokitus
512 Liiketaloustiede, 518 Media- ja viestintätieteet, 113 Tietojenkäsittely ja informaatiotieteet
Avainsanat
Evaluation; LLM as a judge; Large language models; Fairness; Diversity; Lack of stereotypicality

Tutkimusaineistotiedot

Tutkimusaineistotiedot julkaisussa
The data is shared online on OSF, https://doi.org/10.17605/OSF.IO/U4FPG. Supplementary material related to this article can be found online at https://doi.org/10.1016/j.techfore.2026.124894.
Tunnisteet
Aineiston tunniste
10.17605/OSF.IO/U4FPG