Otázka 2 / 14

Jak byste vysvětlili validitu a reliabilitu v kvalitativním UX výzkumu? Uveďte typické zdroje zkreslení (bias) napříč cyklem studie a konkrétní praktiky, jak je snižovat (včetně triangulace, reflexivity a audit trail).

Definice a význam

  • Validita: zda studie skutečně zkoumá zamýšlený jev v relevantním kontextu (např. ekologická validita u testu).
  • Reliabilita: konzistence postupu a interpretace; v kvalitativním pojetí jde o transparentnost a intersubjektivitu.

Typické zdroje zkreslení

1) Ve výběru a rekrutaci

  • Špatný screener → chybí relevantní segmenty.
  • Přesycení „pohodlnými“ uživateli → výběrové zkreslení.

2) V moderaci (sběr dat)

  • Moderátor bias (navádění, hodnotící reakce).
  • Sugestivní otázky.
  • Sociální desirabilita (účastník chce „vypadat dobře“).

3) V analýze

  • Konfirmační zkreslení (hledáme potvrzení hypotézy).
  • Preferování „dramatických citací“ místo systematiky.
  • Záměna zjištění (finding) za insight (interpretace).

4) V komunikaci

  • Cherry-picking (vybírání jen podporujících příkladů).
  • Přehnané zobecnění z malého vzorku.

Praktiky pro zvýšení kvality

  • Triangulace (metod, zdrojů, perspektiv): rozhovor + test + analytika.
  • Standardizace: výzkumný protokol, interview guide, pozorovací arch.
  • Pilotáž: ověření otázek/úloh, času, techniky.
  • Audit trail: dohledatelné kroky a rozhodnutí v analýze.
  • Reflexivita: pojmenování vlastních předpokladů, práce s nimi.
  • Intersubjektivita/peer review: společná konsolidace, debrief, second coder u kódování.

Jak bych to obhájil u státnic

  • Vysvětlím: (1) co je záměr studie, (2) kde vznikají biasy, (3) jaké kontrolní mechanismy jsem zavedl a (4) jaká omezení přiznávám.