Amazon MTurk
du vil sannsynligvis rense datasettet ditt, for eksempel basert på instruerte svarelementer (veldig bra), falske elementer (også gode) og/eller responstider (rettferdig, vurder Å bruke TIME_RSI).
du har arbeideren Ider fra alle de gjenværende postene som oppfyller kvalitetskriteriene. Selvfølgelig kan du sjekke alle oppgaver i MTurk manuelt, men det tar mye tid. Bedre arbeid med EN CSV-fil.
FOR CSV-filen trenger DU TREFF-ID-EN og oppdrag-ID-EN. Hvis du fulgte til manuell ovenfor, vil du ha disse dataene tilgjengelig. Deretter lager du en tabell (MED R, SPSS, LibreOffice Calc, Excel,…) med tre kolonner fra dataene dine: den første kolonnen inneholder HIT-ID, den andre kolonnen inneholder oppdrag-ID, og den tredje kolonnen må inneholde en » x » for hver oppføring.
den første linjen i tabellen er overskriften, variabelnavnene. Kontroller at variabeln er som følger (case-sensitive):
-
HITId
-
AssignmentId
-
Godkjenne
lagre deretter tabellen som CSV-fil, og klikk På Last OPP CSV-knappen I MTurk → Administrer → Velg NYLIG lagret CSV og bekreft. MTurk vil da spørre deg om du vil godta disse oppdragene.
når du er ferdig, forblir bare de tildelingene som ikke samsvarer med kvalitetskriteriene. Avvise dem, forklare hvorfor.
Du kan Også ikke slette postene umiddelbart under datarensing, men merk dem. Du kan deretter laste opp EN CSV-fil med fire kolonner, den fjerde heter «Avvis» og med en forklaring på avvisningen i kolonnen. Dette vil sørge for at du ikke avviser noen SOM HAR MISTET ID.