Un studiu pilot este realizat cu un scop. Cercetare descriptivă și analitică. Ce reprezintă

^

Principii și metode de bază pentru realizarea unui studiu pilot

După selectarea metodelor psihologice pentru realizarea măsurilor PPO, trebuie verificată predictibilitatea acestora, adică trebuie evaluată capacitatea lor de a rezolva sarcinile care le sunt atribuite: diferențierea tuturor subiecților în ceea ce privește severitatea PVC-ului și prognozarea probabilității de succes în activități profesionale. În acest scop, se realizează un așa-numit studiu pilot.

Conceptul de „studiu pilot” (uneori numit și studiu pilot) este destul de răspândit în psihologie. Mai mult decât atât, aceste concepte de foarte multe ori implică evenimente complet diferite desfășurate cu scopuri diferite. Totuși, dacă generalizăm tot ceea ce se înțelege prin acest concept, atunci sensul său se reduce la efectuarea unui studiu „probă”, „evaluativ” sau „indicativ”.

Esența studiului pilot, realizat pentru a evalua predictibilitatea metodelor de psihodiagnostic, este de a examina un grup de persoane care desfășoară deja activități profesionale pentru care este planificat să efectueze o selecție. În același timp, se presupune că persoanele care lucrează în această specialitate au caracteristici psihologice și personale individuale care fie împiedică, fie, dimpotrivă, contribuie la îndeplinirea cu succes a sarcinilor profesionale. Prin urmare, dacă calitățile importante din punct de vedere profesional au fost identificate corect, dacă metodele au fost alese corect, atunci rezultatele studiului ar trebui să aibă o relație strânsă cu indicatorii de succes.

Atunci când se efectuează un studiu pilot, există întotdeauna două probleme de rezolvat:

- modul de determinare a criteriilor de succes a activităților, în raport cu care se va evalua valoarea predictivă a metodelor selectate;

- modul de formare a unui grup de persoane care vor fi examinate.

De regulă, atunci când se formează un grup de subiecți pentru a verifica predictibilitatea metodelor selectate, se ia una dintre cele două decizii fundamentale: să examineze două grupuri de oameni care au indicatori polari ai succesului activităților lor profesionale sau să efectueze un sondaj. bazat pe principiul eșantionării aleatorii, adică să examineze pe toți cei care sunt posibili.

Dacă evaluarea valorii predictive a metodelor selectate se realizează pe baza rezultatelor unui sondaj asupra grupurilor polare, atunci munca experimentală se desfășoară în următoarea ordine.

- Pe baza unor criterii clar definite pentru succesul activităților, se formează două grupuri de angajați: de succes și nereușiți, iar grupurile chestionate trebuie să fie comparabile ca vârstă și sex.

– În etapa finală se efectuează o analiză matematică și statistică a rezultatelor.

Pentru a implementa această abordare în practică, în primul rând, este necesar să se asigure reprezentativitatea eșantionului, ceea ce va necesita un grup suficient de mare de oameni. Vorbind despre numărul de grupuri, ar trebui să ne amintim cerințele care au fost menționate mai sus (vezi capitolul 8). Pe baza acestor cerințe, se poate susține că, pentru a asigura fiabilitatea statistică a rezultatelor, ambele grupuri de angajați de succes și nereușiți în comparație între ele ar trebui să fie de cel puțin 30 de persoane fiecare. Cu toate acestea, este extrem de rar să se furnizeze efectiv o astfel de dimensiune a eșantionului, fie și doar pentru că este puțin probabil ca conducerea unei organizații sau întreprinderi să suporte un număr atât de mare de angajați nereușiți. Prin urmare, deși un sondaj asupra grupurilor polare este ideal, cel mai adesea atunci când se efectuează un studiu pilot în timpul dezvoltării unui sistem PES, dezvoltatorii chestionează un eșantion aleatoriu de angajați dintr-o întreprindere.

Atunci când se efectuează un studiu pilot privind principiul eșantionării aleatorii, de regulă, toți angajații care îndeplinesc aceleași sarcini profesionale, adică reprezentanții aceleiași profesii, sunt examinați. În acest caz, ordinea lucrărilor este următoarea:

- se efectuează un sondaj asupra angajaților întreprinderii care îndeplinesc sarcini profesionale pentru postul pentru care urmează să efectueze selecția psihologică profesională;

– în etapa finală se efectuează o analiză matematică și statistică a rezultatelor obținute.

Cu toate acestea, trebuie remarcat faptul că există cazuri în care niciuna dintre cele două metode de realizare a unui studiu pilot menționate mai sus nu este potrivită pentru implementarea lor în condiții specifice. De exemplu, acest lucru se întâmplă atunci când se dezvoltă un sistem de selecție profesională pentru profesii nou create. În plus, există situații în care nu este posibil să se selecteze numărul de persoane necesar pentru realizarea unui studiu pilot. În acest caz, psihologul trebuie să modeleze un eșantion de subiecți; Apoi etapele studiului experimental vor fi următoarele:

- în prima etapă se modelează un eşantion experimental de subiecţi şi se efectuează testarea psihologică;

- la a doua etapă se realizează o analiză matematică şi statistică a rezultatelor obţinute.

Cea mai dificilă etapă din această versiune a studiului pilot este etapa modelării eșantionului experimental, deoarece de aceasta depinde acuratețea evaluării conformității metodelor selectate cu condițiile de îndeplinire a sarcinilor PES. La modelarea unui eșantion experimental, ar trebui să se țină cont de vârsta preconizată a persoanelor care vor trebui să îndeplinească sarcinile profesionale relevante, precum și de sexul și educația acestora. În același timp, este de dorit ca activitatea profesională pe care o desfășoară efectiv să prezinte cerințe foarte apropiate ca conținut de angajații care au calitățile corespunzătoare importante din punct de vedere profesional necesare pentru a lucra cu succes într-o nouă poziție. De asemenea, este de dorit să se ia în considerare faptul că dimensiunea eșantionului simulat ar trebui să fie de cel puțin 55-60 de persoane și, în mod ideal, de cel puțin 100.

Trebuie remarcat faptul că toate opțiunile de realizare a unui studiu pilot pentru evaluarea predictivității metodelor care se presupune a fi utilizate în activitățile PPO au o etapă foarte asemănătoare - o analiză matematică și statistică a rezultatelor obținute. Cu toate acestea, conținutul și procedura de implementare a acestei etape pot fi diferite. Să luăm în considerare această etapă mai detaliat.
^

Analiza matematică și statistică a rezultatelor studiului pilot

Atunci când se efectuează o analiză matematică și statistică a rezultatelor unui studiu pilot, efectuată pe baza testării grupurilor polare (contrastate), de regulă, nu se evaluează distribuția normală a rezultatelor, deoarece se presupune că rezultatele două grupuri examinate vor diferi semnificativ. Prin urmare, în primul rând, se face o căutare a diferențelor în rezultatele testelor efectuate de reprezentanții grupurilor studiate. Pentru aceasta, este cel mai des folosit t- Criteriul elevului. În același timp, se evaluează mai întâi gradul de diferență în întregul grup, apoi în funcție de vârstă și sex. Pe parcursul acestei analize sunt identificate metode în care grupurile chestionate au diferențe destul de clare, precum și cele în care nu s-au constatat diferențe semnificative. Este destul de firesc ca în lista metodelor recomandate pentru utilizare în activitățile de selecție profesională să fie incluse metode care subliniază diferențele dintre grupurile comparate de lucrători de succes și nereușiți.

Este ceva mai dificil să luăm o decizie cu privire la utilizarea metodelor în activitățile de selecție profesională care nu ne-au permis să detectăm diferențe în grupurile comparate de lucrători. La ce ar trebui să acordați atenție atunci când analizați rezultatele unor astfel de teste? În primul rând, pentru prezența în lista de teste testate a două sau trei metode care evaluează aceeași calitate psihologică. Dacă acest lucru s-a făcut și s-au stabilit diferențe pentru unele metode, dar nu și pentru altele, atunci în lista metodelor care vor fi recomandate pentru selecția profesională rămân doar acele metode care au confirmat existența unor diferențe între loturile comparate. În consecință, acele metode pentru care nu s-au găsit diferențe ar trebui excluse din listă.

Dacă, pentru a studia o calitate importantă din punct de vedere profesional, în lista metodelor testate în timpul studiului pilot a fost inclusă o singură metodă și, pe baza rezultatelor implementării acestuia, nu s-au găsit diferențe între grupurile comparate de lucrători de succes și nereușiți, atunci decizia asupra oportunității utilizării sale în activități de selecție profesională este și mai complicată. În primul rând, este evaluat gradul de importanță al acestei calități importante din punct de vedere profesional în structura generală a PVK. Dacă această calitate este secundară, atunci în unele cazuri această calitate poate fi neglijată, iar testul, care nu a permis stabilirea diferențelor între grupuri, poate fi exclus din lista metodelor recomandate pentru utilizare în evenimentele de selecție profesională. În al doilea rând, mărimea abaterii obținute t- criteriu din valorile diferențelor semnificative. După cum știți, în statistică există o varietate de niveluri de fiabilitate a valorilor care caracterizează gradul de probabilitate a unui eveniment. Potrivit majorității autorilor care dezvoltă o metodologie de utilizare a diferitelor metode de analiză statistică în psihologie, ca indicatori de încredere t- Criteriile elevului, care caracterizează diferențele dintre două grupuri de persoane, ar trebui luate cele care corespund unui nivel de probabilitate de cel puțin 95%, i.e. R < 0,05. În consecință, indicatorii sub această valoare ar trebui clasificați ca nefiabili.

Acest punct de vedere este destul de justificat în raport cu diverse studii psihologice. Cu toate acestea, atunci când se dezvoltă un sistem PPO, ar trebui să se țină cont de natura uneia sau alteia calități importante din punct de vedere profesional. Deci, există astfel de PVK care se pot manifesta pe deplin numai atunci când desfășoară activități profesionale reale. De exemplu, multe metode de evaluare a rezistenței la stres a unei persoane demonstrează cea mai bună performanță în diferențierea subiecților în ceea ce privește dezvoltarea acestei calități doar atunci când subiecții se află într-o situație stresantă. Prin urmare, trebuie avut în vedere întotdeauna că în timpul testării psihologice, subiectul se află în condiții doar de testare, și nu de activitate reală. Această împrejurare determină necesitatea evaluării mărimii abaterii indicatorului obținut t- criteriu din valori caracterizate ca fiind semnificative fiabil. În anumite cazuri, indicatori t- criteriile care nici măcar nu au atins nivelul indicatorilor fiabil semnificativi pot fi apreciate ca fiind destul de suficiente. De exemplu, atunci când se compară rezultatele a două grupuri de 30 de persoane în fiecare, indicatorul este considerat semnificativ semnificativ t- criterii de la 2.042 sau mai mult, dar cum să trateze t = 1.711 sau 1.800? Valoarea acestui indicator t- criteriul nu atinge nivelul de semnificație la care se obișnuiește în psihologie să se vorbească de mare fiabilitate. Cu toate acestea, din punct de vedere statistic, este destul de semnificativ. În cazul comparării rezultatelor unei examinări psihologice a două grupuri comparate de câte 30 de persoane fiecare, valoarea t- criteriul mai mult de 1.697 și mai puțin de 2.042 indică faptul că există 90% (R < 0,1) probabilitatea ca aceste grupuri să aibă într-adevăr diferențe în severitatea caracteristicilor psihologice corespunzătoare. În acest caz, în psihologie se obișnuiește să se vorbească despre tendințele existente. Deoarece a fost identificată o tendință, nu este posibil să refuzați utilizarea sau, dimpotrivă, să recomandați o astfel de tehnică pentru utilizarea în evenimentele de selecție profesională fără analize suplimentare.

O analiză ulterioară este de a identifica relația dintre scorurile testelor și ratele de succes. Pentru aceasta, se utilizează analiza corelației - o metodă de statistică matematică care vă permite să detectați o relație între caracteristicile individuale ale unui obiect. În acest caz, se presupune că, dacă succesul activității se datorează într-adevăr unor calități psihologice, atunci ar trebui să existe o relație strânsă între indicatorii dezvoltării acestei calități (evaluați prin teste) și indicatorii succesului activitatea. Dacă în cursul analizei de corelație s-a stabilit o astfel de relație pentru indicatorii de testare, conform căreia s-a evidențiat doar o tendință de a obține diferențe semnificative (adică diferențele dintre indicatorii conform acestei metode între cele două grupuri corespund cu R < 0.1), atunci poate fi folosit în evenimentele de selecție profesională. Dacă coeficientul de corelație nu a atins nivelul de semnificație semnificativă, atunci nu se recomandă utilizarea unui astfel de test în cadrul evenimentelor de selecție profesională.

De remarcat că rezultatele analizei de corelație acționează ca fiind decisiv în aprecierea care dintre cele două sau trei metode care caracterizează nivelul de dezvoltare de aceeași calitate psihologică este indicat să fie utilizat în structura măsurilor PPO. După cum s-a menționat mai sus, atunci când se efectuează un studiu pilot, este posibil, și uneori destul de recomandabil, să se utilizeze mai multe metode psihologice (teste paralele) care evaluează aceeași calitate, deoarece testele psihologice demonstrează uneori fiabilitate și validitate diferite pe probe diferite și în condiții diferite. . Dacă în timpul analizei matematice și statistice a rezultatelor anchetei pilot s-a constatat că testele paralele au indicatori egali la compararea grupurilor polare, atunci se preferă metoda care are indicatori mai mari în analiza corelației. Se presupune că toți coeficienții (și t- criteriu și coeficient de corelație) ar trebui să atingă nivelul de semnificație semnificativă, altfel nu are rost să comparăm metodele. Trebuie amintit întotdeauna că în selecția metodelor se acordă atenție principală indicatorilor de semnificație statistică.

Spre deosebire de versiunea anterioară a studiului pilot, atunci când se examinează un eșantion aleatoriu de angajați ai unei întreprinderi sau organizații, folosind o analiză matematică și statistică a rezultatelor, în primul rând, apropierea indicatorilor de test obținuți de o distribuție normală este evaluat. Dacă această cerință este îndeplinită, atunci se poate argumenta că metoda utilizată permite ierarhizarea oamenilor în funcție de nivelul de dezvoltare a calității psihologice, pentru care se urmărește evaluarea. Dacă nu se obține o distribuție normală, atunci se pune sub semnul întrebării problema posibilității de a utiliza testul testat în structura evenimentelor de selecție profesională. Prin urmare, analiza ulterioară se reduce la evaluarea naturii distribuției indicatorilor de testare obținuți.

De regulă, atunci când se analizează distribuția scorurilor la test, poate fi întâlnită una dintre cele trei opțiuni:

– distribuție apropiată de normal;

- partea de sus a graficului de distribuție se deplasează la dreapta sau la stânga (asimetrie la dreapta sau la stânga);

- graficul de distribuție are două sau mai multe vârfuri.

Prima opțiune de distribuție este ideală și, după cum sa menționat mai sus, înlătură în această etapă a analizei toate întrebările despre oportunitatea utilizării testului în structura evenimentelor de selecție profesională.

În a doua opțiune, atunci când se observă asimetria stângă sau dreaptă a indicatorilor, este necesar să se țină seama de caracteristicile de proiectare ale testului și de caracteristicile eșantionului de subiecți. De exemplu, cu un nivel ridicat de dezvoltare PVK, majoritatea subiecților vor avea o asimetrie corectă. Adesea, acest fenomen se observă dacă a fost efectuată vreo selecție în etapa de angajare. Prin urmare, atunci când se confruntă cu o asimetrie corectă, este necesar să se analizeze experiența de muncă a subiecților, eficacitatea activităților acestora, nivelul de pregătire profesională etc. De regulă, o astfel de analiză face posibilă detectarea unei regularități în apariţia asimetriei datorită caracteristicilor eşantionului de subiecţi.

Cu toate acestea, asimetria se poate datora și caracteristicilor de proiectare ale testului. Din acest punct de vedere, este necesar să se analizeze posibilitatea eliminării acestei asimetrii prin dezvoltarea unei scale normalizate, adică o astfel de scară care se formează la traducerea indicatorilor „bruți” în cei standard (stans, stanins etc.). De exemplu, atunci când se folosește o scală normalizată, s-au obținut rezultate asimetrice. În acest caz, se încearcă să se facă ajustări la scara normalizată existentă. Dacă asimetria a fost obținută pe indicatorii „bruți”, atunci se încearcă eliminarea acesteia prin dezvoltarea unei scale standardizate adecvate.

În plus, decizia de a utiliza testul în activități de selecție profesională se face prin compararea reciprocă a rezultatelor analizei caracteristicilor eșantionului și a caracteristicilor de proiectare ale testului. Cu toate acestea, dacă încercările de a crea o scală normalizată sau de a face modificări la o scală existentă nu au avut succes și asimetria nu poate fi compensată, atunci este totuși inadecvat să se recomande un astfel de test pentru utilizarea în evenimentele de selecție profesională.

Unul dintre cele mai dificile cazuri de analiză a distribuției este cazul prezenței mai multor vârfuri în graficul de distribuție a scorurilor la test. Aceasta este așa-numita variantă a distribuției cu kurtoză negativă, ceea ce indică o prejudecată în majoritatea rezultatelor către valorile polare. Această distribuție poate avea propriile explicații. În primul rând, toate aceleași caracteristici ale eșantionului. Cu toate acestea, dacă kurtoza negativă este într-adevăr cauzată de caracteristicile eșantionului, atunci ar trebui să fie inerentă nu unei singure tehnici, ci mai multor deodată. Este acest fenomen care poate fi remarcat în analiza rezultatelor obținute în urma examinării grupurilor polare bine alese. Dacă curtoza negativă este inerentă doar în una sau două metode, atunci cel mai probabil se datorează caracteristicilor de proiectare ale testului. În acest caz, ar trebui fie să renunțe la utilizarea testului în activități de selecție profesională, fie să crească dimensiunea eșantionului subiecților și să efectueze o a doua examinare a subiecților.

După analizarea naturii distribuției indicatorilor de testare în timpul unei anchete pilot a unui eșantion aleatoriu, se efectuează o analiză de corelație. În această etapă sunt eliminate acele metode care nu au corelații semnificative fiabile cu indicatorii de succes a activității profesionale.

În etapa finală a analizei matematice și statistice a rezultatelor unui studiu pilot efectuat pe un eșantion aleatoriu, se evaluează capacitatea testelor de a diferenția toate cele examinate în raport cu criteriile de succes. Pentru a face acest lucru, printre cei chestionați se disting trei grupuri de oameni - cu rate de succes ridicate, medii și scăzute. Rezultatele testului sunt apoi comparate între grupurile cu succes ridicat și scăzut. Testele pentru care s-au obținut diferențe semnificative între loturile comparate și testele care au evidențiat prezența unor tendințe pozitive pot fi considerate recomandate pentru includerea în lista metodelor planificate pentru utilizare în evenimentele de selecție profesională.

Cu toate acestea, cel mai adesea, atunci când examinează un eșantion aleatoriu, psihologii se confruntă cu o situație în care nu este posibil să se formeze grupuri de control cu ​​rate de succes ridicate sau scăzute. Acest lucru se datorează dimensiunii insuficiente a eșantionului. Prin urmare, este posibilă analiza inversă. În acest scop, toți subiecții sunt împărțiți în mai multe grupe în raport cu indicatorii unui singur test, după care sunt analizați indicatorii succesului activităților dintre grupele selectate. Dacă se constată diferențe în indicatorii de performanță între grupuri de persoane (cel puțin la nivelul regularităților, de ex. R < 0.1 sau mai mare), atunci testul poate fi recomandat pentru utilizare în evenimentele de selecție profesională.

În cursul unui studiu pilot al unui test, ar trebui să se facă o muncă similară pentru fiecare participant. În plus, trebuie avut în vedere și faptul că în lista finală a metodelor recomandate pentru rezolvarea problemelor de selecție profesională nu trebuie să existe teste paralele. Prin urmare, dacă în studiul pilot sunt utilizate metode paralele, în etapa finală ar trebui să se aleagă dintre ele pe cele care au arătat cea mai bună putere predictivă.

O altă opțiune pentru un studiu pilot este o anchetă a unui eșantion simulat experimental. Această opțiune se realizează în situațiile în care nu este posibilă examinarea persoanelor care desfășoară activități profesionale pentru care este planificată selecția. Cel mai semnificativ dezavantaj în această situație este lipsa indicatorilor de performanță. Ca urmare, nu este posibil să se obțină rezultate de analiză extrem de fiabile care să caracterizeze valoarea predictivă a testelor evaluate. Prin urmare, indiferent de rezultatele obținute, acestea pot fi considerate preliminare, iar după acumularea în timpul utilizării practice a testelor materialului, întreaga analiză ar trebui efectuată din nou și în întregime. Cu toate acestea, chiar și cu această versiune a studiului pilot, sunt utilizate metode de analiză matematică și statistică. Se consideră oportună analizarea distribuției indicatorilor testelor utilizate. Metodele, conform rezultatelor cărora indicatorii celor examinați nu corespund unei distribuții normale, de regulă, sunt excluse din lista metodelor recomandate pentru utilizare în PES.

În încheierea conversației despre analiza rezultatelor studiului pilot, care reprezintă una dintre etapele dezvoltării sistemului PPO, trebuie subliniat că revizuirea prezentată ia în considerare doar cele mai comune tehnici și metode de analiză a rezultatelor studiului. sondajul grupurilor experimentale. În condițiile specifice creării unui sistem de selecție psihologică profesională, pot fi utilizate și alte metode de analiză. Prin urmare, un psiholog care rezolvă problemele selecției profesionale nu trebuie doar să cunoască testele psihologice, ci și să fie bine versat în statistici matematice.

După selectarea metodelor psihologice pentru realizarea măsurilor PPO, trebuie verificată predictibilitatea acestora, adică trebuie evaluată capacitatea lor de a rezolva sarcinile care le sunt atribuite: diferențierea tuturor subiecților în ceea ce privește severitatea PVC-ului și prognozarea probabilității de succes în activități profesionale. În acest scop, se realizează un așa-numit studiu pilot.
Conceptul de „studiu pilot” (uneori numit și studiu pilot) este destul de răspândit în psihologie. Mai mult decât atât, aceste concepte de foarte multe ori implică evenimente complet diferite desfășurate cu scopuri diferite. Totuși, dacă generalizăm tot ceea ce se înțelege prin acest concept, atunci sensul său se reduce la efectuarea unui studiu „probă”, „evaluativ” sau „indicativ”.
Esența studiului pilot, realizat pentru a evalua predictibilitatea metodelor de psihodiagnostic, este de a examina un grup de persoane care desfășoară deja activități profesionale pentru care este planificat să efectueze o selecție. Se presupune că oamenii care lucrează în această specialitate
au caracteristici individuale psihologice și personale care fie interferează cu, fie, dimpotrivă, contribuie la îndeplinirea cu succes a sarcinilor profesionale. Prin urmare, dacă calitățile importante din punct de vedere profesional au fost identificate corect, dacă metodele au fost alese corect, atunci rezultatele studiului ar trebui să aibă o relație strânsă cu indicatorii de succes.
Atunci când se efectuează un studiu pilot, este întotdeauna necesar să se rezolve două probleme: cum să se determine criteriile de succes a activității, în raport cu care se va evalua valoarea predictivă a metodelor selectate; cum se formează un grup de oameni care vor fi examinați.
De regulă, atunci când se formează un grup de subiecți pentru a verifica predictibilitatea metodelor selectate, se ia una dintre cele două decizii fundamentale: să examineze două grupuri de oameni care au indicatori polari ai succesului activităților lor profesionale sau să efectueze un sondaj. bazat pe principiul eșantionării aleatorii, adică să examineze pe toți cei care sunt posibili.
Dacă evaluarea valorii predictive a metodelor selectate se realizează pe baza rezultatelor unui sondaj asupra grupurilor polare, atunci munca experimentală se desfășoară în următoarea ordine. Pe baza unor criterii clar definite pentru succesul activităților, se formează două grupuri de angajați: de succes și nereușiți, iar grupurile chestionate trebuie să fie comparabile ca vârstă și gen. În continuare, se efectuează un sondaj și se procesează rezultatele primare. În etapa finală, se efectuează o analiză matematică și statistică a rezultatelor.
Pentru a implementa această abordare în practică, în primul rând, este necesar să se asigure reprezentativitatea eșantionului, ceea ce va necesita un grup suficient de mare de oameni. Vorbind despre numărul de grupuri, ar trebui să ne amintim cerințele care au fost menționate mai sus (vezi capitolul 8). Pe baza acestor cerințe, se poate susține că, pentru a asigura fiabilitatea statistică a rezultatelor, ambele grupuri de angajați de succes și nereușiți în comparație între ele ar trebui să fie de cel puțin 30 de persoane fiecare. Cu toate acestea, este extrem de rar să se furnizeze efectiv o astfel de dimensiune a eșantionului, fie și doar pentru că este puțin probabil ca conducerea unei organizații sau întreprinderi să suporte un număr atât de mare de angajați nereușiți. Prin urmare, deși un sondaj asupra grupurilor polare este ideal, cel mai adesea atunci când se efectuează un studiu pilot în timpul dezvoltării unui sistem PES, dezvoltatorii chestionează un eșantion aleatoriu de angajați dintr-o întreprindere.
Atunci când se efectuează un studiu pilot privind principiul eșantionării aleatorii, de regulă, toți angajații care îndeplinesc aceleași sarcini profesionale, adică reprezentanții aceleiași profesii, sunt examinați. În acest caz, ordinea de lucru este următoarea: se efectuează un sondaj asupra angajaților întreprinderii care îndeplinesc sarcini profesionale pentru postul pentru care se presupune că trebuie să efectueze selecția psihologică profesională; în continuare, se determină criteriile de succes a activității profesionale și, dacă este posibil, se elaborează un indicator integral de succes; în etapa finală se efectuează o analiză matematică și statistică a rezultatelor obținute.
Cu toate acestea, trebuie remarcat faptul că există cazuri în care niciuna dintre cele două metode de realizare a unui studiu pilot menționate mai sus nu este potrivită pentru implementarea lor în condiții specifice. De exemplu, acest lucru se întâmplă atunci când se dezvoltă un sistem de selecție profesională pentru profesii nou create. În plus, există situații în care nu este posibil să se selecteze numărul de persoane necesar pentru realizarea unui studiu pilot. În acest caz, psihologul trebuie să modeleze un eșantion de subiecți; atunci etapele studiului experimental vor fi următoarele: în prima etapă se modelează un eșantion experimental al subiecților și se efectuează testarea psihologică; la a doua etapă se efectuează o analiză matematică și statistică a rezultatelor obținute.

Cea mai dificilă etapă din această versiune a studiului pilot este etapa modelării eșantionului experimental, deoarece de aceasta depinde acuratețea evaluării conformității metodelor selectate cu condițiile de îndeplinire a sarcinilor PES. La modelarea unui eșantion experimental, ar trebui să se țină cont de vârsta preconizată a persoanelor care vor trebui să îndeplinească sarcinile profesionale relevante, precum și de sexul și educația acestora. În același timp, este de dorit ca activitatea profesională pe care o desfășoară efectiv să prezinte cerințe foarte apropiate ca conținut de angajații care au calitățile corespunzătoare importante din punct de vedere profesional necesare pentru a lucra cu succes într-o nouă poziție. De asemenea, este de dorit să se ia în considerare faptul că volumul probei simulate ar trebui să fie de cel puțin 55-60 de persoane și, în mod ideal, de cel puțin 100.
Trebuie remarcat faptul că toate opțiunile de realizare a unui studiu pilot de evaluare a predictivității metodelor care se presupune a fi utilizate în activitățile PES au o etapă foarte asemănătoare - o analiză matematică și statistică a rezultatelor obținute. Cu toate acestea, conținutul și procedura de implementare a acestei etape pot fi diferite. Să luăm în considerare această etapă mai detaliat.

Mai multe despre subiect Principii și metode de bază pentru realizarea unui studiu pilot:

1. 3. Concepte de bază și experiență în cercetarea de marketing 3.1. Conținutul și direcțiile cercetării de marketing

Un studiu pilot poate fi realizat în diverse scopuri: testarea principalelor ipoteze ale programului, identificarea caracteristicilor individuale ale unui obiect pentru a le determina pe cele mai stabile pentru dezvoltarea lor în profunzime, clarificarea eficienței metodologiei în ansamblu. sau părțile sale individuale, verificarea preliminară a fiabilității rezultatelor sondajului etc.

Există diferite forme de realizare a unui studiu pilot. Poate fi efectuat pe mostre mici și mari. Dacă acest lucru este cerut de programul de cercetare, atunci pilotarea chestionarului poate fi efectuată cu un eșantion mare reprezentativ. În esență, un astfel de pilotaj acționează uneori ca un studiu empiric independent, care necesită nu mai puțin efort și timp decât studiul principal.

Cu toate acestea, de obicei, un studiu pilot este efectuat pe o matrice mică. Numărul exact de subiecți în acest caz nu este stabilit, deoarece în fiecare caz poate fi diferit. Practica arată că numărul respondenților cel mai adesea nu depășește 50-100 de persoane. Acest număr de respondenți este suficient pentru a rezolva problemele cu care se confruntă studiul pilot. O condiție necesară este ca obiectul cercetării să fie acele persoane care, în principalele lor caracteristici, corespund obiectului principal de cercetare. În același timp, sondajul pilot se efectuează nu pe obiectul principal, ci pe un alt „câmp”, apropiat ca caracteristici de cel principal. Acest lucru se face pentru a nu strica „domeniul” principal al studiului, deoarece orice studiu, chiar și cel mai mic studiu, primește un răspuns și, într-un fel sau altul, poate avea un impact asupra studiului principal. Deci, dacă obiectul principal al cercetării sunt lucrătorii unei întreprinderi industriale, atunci într-un studiu pilot, obiectul ar trebui să fie și muncitorii unei întreprinderi industriale, dar ai unei întreprinderi diferite.

Ordinea sondajului pilot este foarte importantă. În ciuda faptului că chestionarul este în curs de pregătire pentru un sondaj la distanță, într-un studiu pilot este mai bine să îl prezentați sub forma unui interviu oficial. Avantajul unui interviu formalizat este că, pe lângă faptul că rezultatele sondajului pilot vor fi analizate în totalitatea răspunsurilor, oferă și observații directe ale intervievatorilor asupra reacției respondenților la o anumită întrebare și la întreaga întrebare. chestionarul în ansamblu. Intervievatorii sunt cel mai adesea membri ai grupului de cercetare sau persoane special instruite în acest scop. La sfârșitul sondajului, intervievatorii scriu scurte rapoarte despre rezultatele fiecărui interviu. Astfel de rapoarte scrise, deși necesită mult timp și efort și nu sunt plăcute pentru fiecare intervievator, ele joacă un rol semnificativ în studiul pilot. Sunt de mare interes ca document de observare directa, iar analiza lor este extrem de importanta pentru finalizarea chestionarului. Iată cum își descrie unul dintre intervievatori impresia despre sondaj în studiul pilot.

Cercetarea în domeniul inteligenței este adesea denumită studiu pilot. Deși este mai corect să o considerăm un tip independent de cercetare sociologică. Recunoașterea și studiile pilot sunt similare în două aspecte:

♦ țintă - obțineți date aproximative despre un anumit fenomen sau testați aplicarea metodologiei la studii la scară mai mare.

« Un obiect - Pentru a efectua ambele studii, este nevoie de un set nesemnificativ de obiecte, prin urmare acestea sunt efectuate într-un interval de timp limitat.

Dar, spre deosebire de recunoaștere, un studiu pilot este conceput pentru a elabora proceduri și tehnici tehnice, cel mai adesea pentru a testa un chestionar. Potrivit lui J. Mannheim și R. Rich, o verificare preliminară a instrumentului de sondaj este la fel de importantă pentru succesul studiului, precum este un test drive pentru achiziționarea cu succes a unei mașini second hand. Ajută la detectarea problemelor care se pot manifesta pe deplin doar în teren.

Atunci când se efectuează un studiu pilot, este necesar să se țină cont de regulile:

4 Mărimea eșantionului din studiul pilot nu are o justificare metodologică clară. De obicei, este considerat suficient să intervievezi aproximativ 30 de respondenți. Este important doar ca acestea să reprezinte toate categoriile esențiale ale obiectului de studiu planificat.

Un eșantion pilot mic nu trebuie să fie neapărat reprezentativ pentru populația generală. Mult mai importantă este cealaltă calitate a acesteia - diversitatea: ar trebui să includă acele grupuri de respondenți care sunt capabili să răspundă la instrument. diferit. Dacă oamenii slab educați reprezintă o mică parte din eșantionul viitor, aceștia ar trebui să fie intervievați în primul rând tocmai pentru că s-ar putea să nu răspundă la întrebările tale inteligente într-un mod așteptat.

„Eșantionul pilot include acei respondenți care reprezintă cele mai importante caracteristici socio-demografice pentru subiectul sondajului (sex, vârstă, educație, experiență în muncă, conținutul muncii etc.).

În psihologia socială, un studiu pilot (termenul de lucru este „sondare”) este utilizat pentru a stabili dimensiunea necesară a eșantionului, pentru a clarifica conținutul și numărul de întrebări din chestionar, timpul sondajului etc. În practica străină și internă a utilizarea testelor (testologie) de pilotaj (termenul de lucru este „pretest”) servește ca mijloc de identificare a unora dintre standardele testului principal.

În sociologie, acrobația este efectuată înaintea studiului principal și acționează ca o modalitate de a testa validitatea ipotezelor și sarcinilor, precum și nivelul profesional și sofisticarea metodologică a instrumentelor. Pilotarea ajută la evaluarea corectitudinii modelului de eșantionare și la efectuarea corecțiilor corespunzătoare, dacă este necesar; clarifică unele caracteristici ale obiectului și subiectului studiului, justifică costurile financiare și calendarul studiului principal. Pilotarea este utilă și pentru formarea unui grup de intervievatori (chestionare).

Sociologii moderni aderă la regula: înainte de a trimite un chestionar într-un tiraj mare, este recomandabil să îl testați într-un sondaj cu circulație mică (pilot) pentru a clarifica dacă respondenții înțeleg corect întrebările, dacă este prea lung și plictisitor. , cât durează completarea (sau interviul), iar în cazul trimiterii prin corespondență, câte zile trec de la momentul trimiterii chestionarului până la primirea răspunsurilor.

Shmerlina I.A. Principii procedurale ale sociologiei cercetării. Proc. indemnizatie // http://www.unn.ac.ru/ras/fl4/k2/courses/shmern.htm

Un studiu pilot este un studiu conform unui plan „scurtat” - folosește eșantioane mici, informațiile nu sunt colectate în întregime, informațiile primite sunt analizate doar în funcție de cele mai semnificative criterii. Dacă un studiu pilot este efectuat în ciclul studierii unei probleme bine studiate, acesta vă permite să „perfecționați” instrumentele de cercetare, să identificați și să eliminați defectele și defectele sale în abordările analizei matematice. Efectuarea unui studiu pilot în acest caz face posibilă evitarea colectării de informații despre întrebări „vide”, răspunsurile respondenților la care nu sunt supuse analizei sau sunt interpretate inadecvat (ambiguu) de către respondenții înșiși. Pentru un studiu exploratoriu (cercetare într-o zonă subdezvoltată), un studiu pilot oferă informații pentru a clarifica multe puncte ale programului, ceea ce oferă în continuare economii considerabile de resurse.

Pilotarea este utilă pentru: a) testarea instrumentarului în care cercetătorul este destul de încrezător, b) îmbunătățirea instrumentării într-o situație în care subiectul de cercetare este mai puțin cunoscut de cercetător. În primul caz, trusa de instrumente trece un test preliminar în versiunea sa finală. În al doilea, cercetătorul poate dori să experimenteze cu diferite versiuni (aspecte) ale instrumentului pentru a afla care dintre ele este mai convenabilă pentru munca ei. Acest tip de pre-testare poate include:

1. Testarea diferitelor formulări verbale și forme de întrebări.

2. Testarea chestionarului, care este destinat autocompletării de către respondent, într-un interviu personal, astfel încât în ​​procesul de comunicare în direct cu respondentul să fie relevate posibile dificultăți în completarea acestuia.

3. Utilizarea întrebărilor deschise pentru a identifica răspunsuri tipice, care pot fi apoi incluse într-un set de răspunsuri la întrebări închise pentru a le utiliza pe acestea din urmă în versiunea finală.

4. Testarea diferitelor tipuri de instrumente (chestionare prin poștă, interviuri față în față, interviuri telefonice) pentru a determina adecvarea fiecăruia dintre ele 2 .

Orez. 28. Testarea diferitelor tipuri de unelte

Pilotul poate fi considerat o repetiție generală pentru studiul principal. Vă permite să trageți primele concluzii despre cât de reușit a trecut etapa de pregătire pentru aceasta, care pot fi rezultatele așteptate. În cursul unui astfel de sondaj, sunt colectate informații metodologice, de ex. informații despre calitatea instrumentelor dezvoltate. Sunt verificate toate condițiile organizatorice și metodologice pentru cercetările viitoare și, mai ales: disponibilitatea necesarului

Mannheim J.B., Rich R.K. Stiinte Politice. Metode de cercetare. M.: Ves Mir, 1997. S. 211-212.

documente, atitudinea respondenților la sondaj și reacția acestora la întrebările chestionarului. Evaluând calitatea metodologiei anchetei, sociologul înregistrează eventualele dificultăți ale respondentului cauzate de tehnica de completare, neînțelegerea sensului întrebărilor, cuvintele individuale. De asemenea, sunt luate în considerare toate comentariile și observațiile intervievatorilor despre neajunsurile metodologice pe care au reușit să le detecteze.

După ce vă întoarceți de la sondaj, este mai bine să vă așezați imediat la chestionar, să vedeți răspunsurile la toate întrebările, să le marcați pe cele mai problematice și apoi să accesați site-ul și să discutați cu respondenții.

Pilotarea se realizează în două versiuni. În prima, întregul grup de respondenți este invitat într-o cameră separată, unde chestionarele sunt așezate pe tabele. Respondenții sunt „introduși” într-o situație de pilotaj, i.e. ei explică scopurile și obiectivele acestuia, instruiesc tehnica de completare a chestionarului și le cer să facă comentarii critice după completarea acestuia, vorbesc despre ambiguități și despre acele probleme care îngreunează lucrul cu chestionarul. Chestionarele completate sunt aruncate în cutii sigilate, după care începe o discuție de grup asupra conținutului sondajului în ansamblu. Indicatorii care fac posibilă aprecierea caracterului adecvat al unei întrebări din chestionar sunt numărul celor care nu au răspuns la întrebare și natura distribuției răspunsurilor pe scara utilizată la întrebare.

A doua versiune a sondajului pilot presupune invitarea unui grup de 3-4 respondenți să discute chestionarul pe măsură ce acesta este completat: respondenții notează calitatea întrebărilor. Înainte de începerea pilotajului, aceștia sunt introduși în situația unui sondaj de specialitate, explicându-se că conținutul răspunsurilor nu este analizat, întrucât sondajul urmărește doar scopuri metodologice.

Ce este un studiu pilot? În ce scop se realizează? Ce sarcini sunt vizate?

informatii generale

Pentru început, să definim ce este un studiu pilot. Această denumire este folosită pentru a face referire la verificări de încercare sau de mici cercetări (recunoaștere) a stării de fapt existente. Deci, dacă trebuie să clarificați problemele, să stabiliți sarcina mai corect și să prezentați ipoteze rezonabile, atunci un studiu pilot este cea mai bună opțiune pentru aceasta. O nevoie specială pentru aceasta poate fi în cazurile în care nu există literatură pe tema de interes. Apoi se efectuează un studiu pilot pentru a umple golul de informații.

Ce reprezintă?

Un studiu pilot este un tip de analiză în sociologie în care gama de sarcini este semnificativ limitată, numărul de persoane intervievate este mic, datele sunt nereprezentative, iar instrumentele și programul sunt extrem de simplificate. Din această cauză, cercetătorul primește doar informații aproximative despre care este obiectul cercetării. Aceste cunoștințe sunt folosite pentru orientare generală. Principalul slogan al studiilor pilot este ieftin, rapid și aproximativ. Prin urmare, ele sunt folosite în cazurile în care problema fie nu este deloc studiată, fie cunoștințele despre ea sunt foarte mizerabile.

Cum se realizează?

Deci, știm deja că un studiu pilot este un studiu sociologic. Dar cum se realizează? Există un număr mare de opțiuni diferite aici. Cel mai optim este un interviu informal cu potențiali respondenți. Dar, din păcate, subiectivitatea oamenilor le poate afecta răspunsurile. Pentru corectarea datelor se folosește observația de către specialiști. Pentru aceasta se poate forma un focus grup. Dar atunci ar trebui să te concentrezi pe ceva anume. Sondajul experților este, de asemenea, foarte popular. Printre acestea se numără specialiști sau oameni obișnuiți, dar care trebuie să aibă neapărat o anumită atitudine față de zona problematică care îl interesează pe cercetător. În plus, puteți studia documentația și datele statistice, acolo unde există informațiile necesare pentru confirmarea/infirmarea ipotezei sau rezolvarea problemei. Sondajele expres sunt, de asemenea, foarte populare. Adevărat, ei, de regulă, în ciuda alfabetizării lor, nu își propun soluția problemelor științifice profunde și dezvoltarea științei fundamentale. Cu ajutorul lor, se recunoaște importanța momentană a ceva pentru societate. În același timp, nu contează ce acționează ca obiect: alegerea lui Trump ca președinte al Statelor Unite, interzicerea avortului sau altceva. Oricum, datele sunt obținute pentru a le impune unor procese mai mari.

Despre fiabilitate

Cât de fiabile sunt informațiile primite? Având în vedere că un studiu pilot este un studiu pilot, chiar acest fapt implică o pondere mare a riscurilor. Și dacă încă nu este realizat de specialiști, ci de un grup de amatori (care poate fi un departament de personal, o revistă, un cerc, un proprietar de site), atunci în acest caz, deși există informații proaspete și necesare, este este totuși nereprezentativă și fiabilitatea sa este discutabilă. La prima vedere, poate fi destul de fiabil. Dar dacă îl abordați din punct de vedere științific, atunci defectele sale vor fi dezvăluite. Prin urmare, este logic să folosiți studii pilot numai în cazul în care nu sunt propuse cerințe stricte privind fiabilitatea. Inițial, proba ar trebui să fie afectată. Nu există cerințe metodologice clare aici. De regulă, se crede că un sondaj de 3 duzini de respondenți va oferi informațiile necesare. Dar, în același timp, trebuie avut grijă să se asigure că printre aceștia se numără reprezentanți ai tuturor categoriilor de persoane care intră sub incidența studiului. În același timp, trebuie să depuneți eforturi pentru o diversitate maximă. În plus, trebuie avut grijă să se asigure că printre respondenți există persoane pentru care subiectul are cel puțin o oarecare importanță. Criteriile de selecție sunt sexul, educația, vârsta, experiența în muncă și alte criterii similare.

Importanța studiilor pilot

În general și în general, acest aspect a fost luat în considerare mai devreme. Acum să ne oprim asupra acestui lucru mai detaliat. Din numele în sine este clar că pilotul este efectuat înainte de începerea studiului principal. Este necesar pentru a testa validitatea sarcinilor și ipotezelor. Deși poate fi folosit și pentru testarea metodologică a instrumentelor. Dacă este necesar, un studiu pilot ajută la efectuarea ajustărilor modelului care îi vor îmbunătăți performanța, vă permit să clarificați caracteristicile, subiectul, să justificați costurile financiare și datele de finalizare. La urma urmei, dacă se efectuează o monitorizare cu drepturi depline a stărilor de spirit în societate și o eroare se strecoară undeva, atunci prezența acesteia va fi plină de probleme semnificative. Această abordare are un efect benefic în ceea ce privește economisirea resurselor. De asemenea, pot fi efectuate studii pilot pentru a testa eficacitatea și fezabilitatea utilizării instrumentelor disponibile. Sunt potrivite și ca repetiție generală pentru studiul principal. În acest caz, se verifică succesul primei etape și se evaluează rezultatele. De asemenea, atunci când studiați un obiect nou, acest lucru vă permite să dezvoltați material metodologic. În același timp, sunt verificate și condițiile organizaționale: modul în care respondenții se raportează la sondaj, dacă toate documentele necesare sunt disponibile și se evaluează calitatea materialului. În acest caz, se consemnează toate dificultățile care apar în cursul cauzei.

Concluzie

Studiul pilot în sine are loc, de regulă, în grupuri. Singura întrebare este cât de mari sunt. Există două opțiuni cele mai populare. Prima presupune invitarea tuturor respondenților într-o cameră separată unde completează chestionare. Înainte de aceasta, oamenii sunt informați despre acrobație, sarcinile și obiectivele lor sunt raportate și explicate, nuanțele completării chestionarului sunt inspectate și li se cere să exprime toate comentariile. A doua opțiune se bazează pe grupuri mici, care constau din 3-4 persoane. În același timp, chestionarele sunt discutate pe măsură ce sunt completate. De cel mai mare interes pentru cercetători este calitatea întrebărilor adresate. În astfel de cazuri, de regulă, obiectivele metodologice oferă cel mai mare interes.