Turc mecanic în salvarea cercetării psihologice?

Una dintre problemele cu care se confruntă cercetarea psihologică - într-adevăr, cu toate cercetările medicale - este găsirea unor subiecte adecvate pentru a studia. Subiecții trebuie obținuți într-un mod reprezentativ pentru populație în ansamblu pentru ca rezultatele cercetării să fie generalizabile.

Ceea ce este o problemă reală, deoarece așa cum am menționat în august 2010, există literalmente mii de studii de psihologie bazate pe nimic mai mult decât o grămadă de studenți dintr-un singur campus la o universitate din SUA În timp ce tinerii adulți care frecventează facultatea pot într-adevăr ne ajută să înțelegem unele aspecte ale comportamentului uman, nu puteți presupune doar că comportamentele pe care le-ați observat în aceste studii se aplică și femeilor și bărbaților de 60 de ani.

Intrați în serviciul Mechanical Turk Amazon.com pentru salvare. Poate tehnologia să ajute la rezolvarea problemei de a găsi suficienți oameni care să fie mai reprezentativi pentru populație și să o facă într-un mod rentabil?

Pentru început, vă poate ajuta să înțelegeți ce este Mechanical Turk. Este o piață online care permite vânzătorilor să cumpere forță de muncă umană la costuri foarte ieftine pentru un fel de sarcină online. „Site-ul se mândrește cu o forță de muncă mare, diversă, formată din peste 100.000 de utilizatori din peste 100 de țări care îndeplinesc zilnic zeci de mii de sarcini”, notează cercetătorii. Acești muncitori sunt plătiți în mod fragmentar pentru fiecare sarcină, uneori până la 1 cent. Sarcinile variază și pot face orice, de la navigarea pe un site web în căutarea de erori, până la completarea sondajelor.

Ah da, completarea sondajelor. O mulțime de cercetări psihologice se bazează pe faptul că oamenii trebuie să completeze sondaje. Nu ar fi frumos dacă am putea determina oamenii - oameni care nu erau studenți - să facă acest lucru la ceva mai puțin de 10 dolari pe sondaj ... Să zicem, 10 cenți?

Buhrmester și colab. (2011) au stabilit să afle dacă astfel de turci mecanici ar completa sondaje într-un mod care să fie în concordanță cu persoanele pe care s-ar putea să le cereți să faceți ceva similar față în față.

În primul rând, cercetătorii au studiat datele demografice a 3.006 de participanți la Mechanical Turk și i-au comparat cu un eșantion mare de internet care nu a fost obținut de la Mechanical Turk. Au descoperit că participanții la Mecanicul Turc (MTurk) erau mai diversi decât eșantionul de pe Internet și eșantionul standard al populației studenților.

Apoi au verificat diferite puncte de preț (2, 10 și 50 de cenți) pentru a completa un set de sondaje care au durat diferite perioade de timp (5, 10 și 30 de minute). Ceea ce au găsit nu ar trebui să fie surprinzător pentru oricine a folosit MTurk:

Aceste analize sugerează că participanții pot fi recrutați rapid și ieftin. Ratele de participare sunt sensibile la sumele de compensare și la angajamentele de timp, dar constatările noastre demonstrează că este posibil să colectăm eșantioane de dimensiuni decente prin MTurk pentru doar dolari. Chiar și atunci când oferim doar 2 cenți pentru o sarcină de 30 de minute, am acumulat 25 de participanți (în aproximativ 5 ore de timp de postare). Mai mult decât atât, prin creșterea ușoară a compensației (de exemplu, la 50 de cenți), am putut obține același număr de participanți în mai puțin de 2 ore de la postare.

Cu ce ​​este bună forța de muncă ieftină, totuși, dacă nu este de bună calitate și nu îndeplinește standardele psihometrice de care au nevoie cercetătorii în psihologie?

Cercetătorii au descoperit că, chiar și la cel mai mic nivel de compensare de 2 cenți, nivelurile de plată nu par să afecteze calitatea datelor. Cercetătorii pot plăti bani pentru finalizarea sondajelor și pot obține în mod fiabil date de bună calitate.

Cercetătorii au calculat scorurile medii de fiabilitate alfa la toate nivelurile de compensare pentru cele șase chestionare de personalitate pe care le-au administrat online. Au descoperit că scorurile alfa MTurk se aflau la două sutimi dintr-un punct al alfa-eșantion tradițional. De asemenea, au testat scorurile de fiabilitate test-retest și au găsit media r = 0,88 cu o rată de finalizare a testării 60%. Toate acestea sunt numere foarte bune și se compară favorabil cu metodele tradiționale.

Rezultatul acestui studiu sugerează că Mechanical Turk este o alternativă fiabilă la utilizarea populațiilor de colegii pentru a obține date ale sondajelor - și poate fi chiar o alternativă mai bună decât sondajele tradiționale pe internet. Pentru doar bănuți, oamenii vor completa chestionare chiar lungi în eforturile lor de a-i ajuta pe ceilalți cu proiectele și cercetările lor. În timp ce trebuie făcute mai multe cercetări pentru a confirma aceste descoperiri, MTurk pare a fi o piață pe care ar trebui să o ia în considerare cercetătorii în psihologie în timp ce își pregătesc următorul studiu.

Referinţă

Buhrmester, M., Kwang, T. și Gosling, S.D. (2011). Amazon’s Mechanical Turk: o nouă sursă de date ieftine, dar de înaltă calitate? Perspective on Psychological Science, 6 (1), 3-5.

Acest articol prezintă linkuri afiliate către Amazon.com, unde se plătește un mic comision către Psych Central dacă se achiziționează o carte. Vă mulțumim pentru sprijinul acordat Psych Central!