Amazon MTurk
probabil veți curăța setul de date, de exemplu pe baza articolelor de răspuns instruite (foarte bune), a articolelor false (de asemenea bune) și/sau a timpilor de răspuns (corect, luați în considerare utilizarea TIME_RSI).
aveți ID-urile lucrătorului din toate înregistrările rămase care respectă criteriile dvs. de calitate. Desigur, puteți verifica manual toate sarcinile din MTurk, dar acest lucru necesită mult timp. Mai bine lucrați cu un fișier CSV.
pentru fișierul CSV, aveți nevoie de ID-ul de accesare și ID-ul de atribuire. Dacă ați urmat manualul de mai sus, veți avea aceste date disponibile. Apoi, creați un tabel (cu R, SPSS, LibreOffice Calc, Excel,…) cu trei coloane din datele dvs.: prima coloană conține ID-ul de accesare, a doua coloană conține ID-ul de atribuire, iar a treia coloană trebuie să conțină un „x” pentru fiecare intrare.
prima linie a tabelului este antetul, numele variabilelor. Asigurați-vă că numele variabilelor sunt după cum urmează (sensibile la majuscule):
-
HITId
-
AssignmentId
-
aproba
apoi stocați tabelul ca fișier CSV, iar în MTurk. Selectați CSV-ul nou salvat și confirmați. MTurk vă va întreba apoi dacă să acceptați aceste misiuni.
când ați terminat, vor rămâne doar acele sarcini care nu corespund criteriilor dvs. de calitate. Respinge-le, explicând de ce.
alternativ, nu ștergeți înregistrările imediat în timpul curățării datelor, ci marcați-le. Puteți încărca apoi un fișier CSV cu patru coloane, al patrulea numit” respinge ” și cu o explicație pentru respingerea în coloană. Acest lucru vă va asigura că nu respingeți pe nimeni al cărui ID s-a pierdut.
