Efekt režimu - Mode effect
Efekt režimu je široký pojem označující jev, kdy určitý režim administrace průzkumu způsobuje shromažďování různých dat. Například když se ptáte na otázku pomocí dvou různých režimů ( např. Papír a telefon), reakce na jeden režim se mohou výrazně a podstatně lišit od odpovědí poskytnutých v druhém režimu. Efekty režimu jsou metodickým artefaktem, který omezuje schopnost porovnávat výsledky z různých režimů sběru.
Obsah
Teorie
Jednotlivé režimy průzkumu uvádějí respondenty do různých rozpoložení, označovaných jako mentální „scénář“. To může ovlivnit výsledky, které dávají. Například:
- Průzkumy tváří v tvář vyvolávají skript „hosta“. Respondenti častěji jednají tváří v tvář tazatelům laskavě a pohostinně, což je vede k většímu souhlasu a ovlivňuje jejich odpovědi. Rozdíly mezi tazateli spravujícími průzkum mohou také vést k řadě „efektů tazatele“ na výsledky průzkumu.
- Telefonické rozhovory vyvolávají skript „právního zástupce“ nebo „telemarketingu“. Respondenti mohou dát menší prioritu telefonickým pohovorům, což zvyšuje pravděpodobnost jejich uspokojení (odpověď na otázky s vynaložením minimálního úsilí), aby mohli rozhovor dokončit dříve. Ostražitost toho, kdo může být na druhém konci telefonu, může také vést respondenty k tomu, aby poskytli sociálně přijatelnější odpovědi, než jaké by poskytli v jiných režimech průzkumu.
Efekty režimů budou pravděpodobně větší, když budou rozdíly mezi režimy větší. Osobní rozhovory se podstatně liší od samostatně vyplněných formulářů perem a papírem. Naproti tomu průzkumy na webu, pero a papír a další samostatně vyplněné formuláře jsou velmi podobné (každý vyžaduje, aby respondenti přečetli a soukromě odpověděli na otázku), a proto mohou být účinky režimu minimalizovány.
Uživatelé průzkumů musí při porovnávání výsledků studií v různých režimech vzít v úvahu potenciál účinků jednotlivých režimů. To je však obtížné, protože efekty režimu mohou být složité a mohou podléhat interakcím mezi demografickými údaji respondenta, tématem a režimem. Pokud nejsou účinky módu formálně zkoumány pro nástroj průzkumu, je obtížné vyčíslit jejich velikost a místo toho jsou vyžadovány kvalitativní úsudky odborníků obeznámených s danou problematikou.
Předpojatost sociální vhodnosti
Studie efektů režimu jsou někdy protichůdné, ale objevují se některé obecné vzorce. Například zkreslení sociální vhodnosti má tendenci být nejvyšší u telefonních průzkumů a nejnižší u webových průzkumů:
- Telefonické průzkumy
- Průzkumy tváří v tvář
- Průzkumy IVR
- Poštovní průzkumy
- Webové průzkumy
Vzhledem k tomu, že se údaje shromážděné o citlivých tématech (jako je sexuální chování nebo nezákonné činnosti) budou měnit v závislosti na způsobu administrace, měli by vědci při kombinování údajů nebo porovnávání výsledků z různých režimů postupovat opatrně.
Rozdíly v otázkách mezi režimy
Některé režimy vyžadují odlišné formulace otázek od ostatních, aby vyhovovaly funkcím režimu. Například samostatné formuláře mohou pomocí seznamů příkladů nebo rozsáhlých pokynů pomoci respondentům odpovědět na relativně složité otázky. Naproti tomu v telefonních rozhovorech jsou respondenti často omezeni svou pracovní pamětí a je nepravděpodobné, že by pochopili dlouhou otázku s více podsekcemi. Dalším příkladem je „matice“ otázek, která se běžně vyskytuje na formulářích pro úplné vyplnění, a nelze je snadno přečíst slovním rozhovorem; spíše matice by obecně musela být napsána jako řada jednotlivých otázek.
Rozdíly v dotyčném znění mezi režimy mohou způsobit, že různé režimy budou shromažďovány různými režimy. To však neplatí vždy a vhodné přizpůsobení otázek novému režimu může přinést srovnatelná data. Při přizpůsobování otázek by návrháři průzkumů měli vzít v úvahu konvence režimu. Například i když může být přijatelné požadovat od respondentů, aby si sami vypočítali celkové údaje v papírové podobě, respondenti to mohou vnímat jako zatěžující, pokud je to vyžadováno ve webovém formuláři (kde by respondenti mohli očekávat, že součty budou automaticky vypočítány počítačem). . To může zase změnit jejich přístup k formě, změnit jejich chování a nakonec změnit shromážděná data.
Identifikace a řešení efektů režimu
Efekty režimu lze identifikovat vložením experimentu do průzkumu, kdy je ke každému režimu přidělena část respondentů. Rozdíly ve výsledcích jednotlivých režimů by měly identifikovat „efekt režimu“ pro tento konkrétní průzkum.
Jakmile je kvantifikován efekt režimu, je možné použít tyto informace k přepracování stávajících dat a umožnit srovnání mezi daty shromážděnými v různých režimech (např. Backcasting časové řady k určení, jaké minulé výsledky by „byly“, kdyby byly administrovány v novém režimu).
Diferenciální pokrytí mezi režimy
Různé režimy správy mohou ze své podstaty vyloučit některé části cílové populace. To potenciálně ovlivňuje odebraný vzorek a mění data z toho, co by bylo shromážděno pomocí jiného režimu. Například lidé bez domácího telefonu jsou vyloučeni z průzkumů Random Digit Dialing (RDD) a je nepravděpodobné, že by lidé bez přístupu k internetu vyplnili webový průzkum. To znamená, že při použití různých režimů jsou z populace odebrány různé vzorky. Pokud experimenty nejsou speciálně navrženy k prozkoumání diferenciálního pokrytí, budou účinky režimu zmateny pokrytím a významné rozdíly mezi režimy / experimentálními podmínkami mohou mít několik vysvětlení:
- vlastnosti režimu; com3
- různé „typy“ lidí reagujících na různé režimy;
- jak vlastnosti režimu, tak různé „typy“ respondentů (aditivní);
- interakce , kde jsou některé respondenti ovlivněny vlastnostmi režimu, ale jiné ne.
Tento problém se zhoršuje, když se při „živé“ správě průzkumu používá více režimů. Některé průzkumy používají více režimů, což respondentům umožňuje zvolit pro ně nejvhodnější metodu. To znamená, že se od různých „typů“ respondentů očekává dokončení různých režimů na základě jejich vlastní volby. V tomto případě je obtížné kvantifikovat účinky režimu, protože náhodné přidělení respondentů podmínce neodráží jejich preference. Takový experiment postrádá vnější platnost a výsledky by se přímo nezobecňovaly na situace, které by respondentům poskytly možnost volby. Pokud by nebylo možné náhodně přidělit účastníkům podmínku (tj. Umožnit jim mít možnost volby, a tím si zachovat vnější platnost), znamenalo by to, že zjevné rozdíly mezi režimy odrážejí kombinovaný účinek a) různých typů respondentů volících každý režim ab) jakýchkoli efektů režimu.
