spolehlivost průzkumu vs. Survery platnost: co je velký problém?
můžete se zeptat sami sebe nebo najít jiné, kteří se vás ptají na „spolehlivost“ nebo „platnost“ údajů, které pocházejí z průzkumů zaměstnanců. Není neobvyklé, že se tato dvě slova používají zaměnitelně. Ale v oblasti výzkumu dat nejsou tyto dva zdaleka synonymem.
proč je důležité znát rozdíl?
protože ve většině případů získávání a najímání partnera průzkumu nebo vytváření a implementace průzkumu pro kutily spadá do HR.
ujistěte se, že pracujete s prokazatelně platným a spolehlivým průzkumem, získáte druhy dat, které můžete s jistotou říci ostatním, že jsou skutečně spolehlivé. Znalost rozdílu mezi platností průzkumu a spolehlivostí také přináší jasnost, proč přidání nebo úprava otázek a formulace, tok, a formát z jednoho průzkumu do druhého může mít důsledky.
zde je důvod.
existuje mnoho komponent zapojených do návrhu průzkumu, které přispívají k datům vysoké (nebo nízké) kvality. Čas a úsilí, které respondenti potřebují k dokončení průzkumu, počet bodů na stupnici hodnocení, frázování bodů, pořadí otázek a rozvržení jsou jen začátek.
platnost se týká přesnosti vašeho průzkumu. Záleží na kladení otázek, které skutečně měří to, co se má měřit. Například, do jaké míry je průzkum zapojení zaměstnanců skutečně měření zapojení?
spolehlivost na druhé straně se týká konzistence nebo míry, do jaké otázky použité v průzkumu vyvolávají stejný druh informací pokaždé, když jsou položeny. To je zvláště důležité, pokud jde o sledování a porovnávání výsledků s minulými interními průzkumy a referenčními hodnotami z externích zdrojů. Změny ve znění nebo struktuře mohou mít za následek různé reakce.
považujte tento příklad zavádějící změny za platnou otázku:
- platná otázka: moje organizace mě inspiruje k mé nejlepší práci.
- Zavádějící Otázka: Jsem inspirován k tomu, abych odvedl svou nejlepší práci zde ve své organizaci.
zatímco obě otázky vypadají na začátku téměř zaměnitelně, „platná“ otázka byla mnohokrát testována, takže víme, jak ji respondenti interpretují, protože něčí organizace je zdrojem inspirace. Také jako „platná“ otázka očekáváme, že výsledky budou v průběhu času podobné a jakákoli změna by byla způsobena skutečnou změnou postoje, na rozdíl od změny interpretace.
na druhé straně nelze „zavádějící“ otázku považovat za platnou, protože nebyla testována, aby se zjistilo, jak ji respondenti interpretují. Pokud není validován (prostřednictvím rozboru s mnoha respondenty, stejně jako předvídatelnost reakce u podobných náhodně generovaných populací), nevíme, zda skutečně měří to, co se má měřit. Je to měření inspirace organizací, něčí prací, nebo obojím?
ačkoli se výrazně liší, platnost a spolehlivost průzkumu jsou neoddělitelně spojeny.
spolehlivost průzkumu sama o sobě nestanoví platnost.
průzkum zapojení zaměstnanců může mít rok od roku vysokou spolehlivost – konzistentní odpovědi z jedné organizace na druhou – ale nízkou platnost, pokud jsou položeny nesprávné otázky. Když jsou data odezvy z průzkumu s nízkou platností vynesena do grafu, netvoří normální distribuční tvar zvonové křivky, kde je většina dat blízko středu, ale místo toho má rozptýlené odpovědi s velkým počtem na obou koncích stupnice. Zkosené odpovědi naznačují, že otázky nemusí být správně strukturovány. Výsledek, kdy se platnost stane problémem? Špatné informace, které neměří to, co jste zamýšleli, a ohrožují zdravé rozhodování.
naopak, pokud výsledky ukazují, že odpovědi jsou znatelně nekonzistentní rok co rok od jednoho průzkumu k druhému, ale existuje normální distribuce zvonové křivky; pak vaše otázky mohou být platné, ale spolehlivost vašeho průzkumu, ne tolik.
spolehlivost průzkumu může ovlivnit několik faktorů, mezi nimi změny účastníků, prostředí,načasování a samotný průzkum. Průzkum provedený těsně po jednáních odborů nebo například při propouštění bude mít zřejmě zhoršenou spolehlivost. Zdánlivě nevýznamná změna způsobu, jakým je otázka položena, nebo přidání nové části otázek, která přidává více času respondentům, může také ovlivnit spolehlivost.