Jak byste vysvětlili validitu a reliabilitu v kvalitativním UX výzkumu? Uveďte typické zdroje zkreslení (bias) napříč cyklem studie a konkrétní praktiky, jak je snižovat (včetně triangulace, reflexivity a audit trail).
Definice a význam
- Validita: zda studie skutečně zkoumá zamýšlený jev v relevantním kontextu (např. ekologická validita u testu).
- Reliabilita: konzistence postupu a interpretace; v kvalitativním pojetí jde o transparentnost a intersubjektivitu.
Typické zdroje zkreslení
1) Ve výběru a rekrutaci
- Špatný screener → chybí relevantní segmenty.
- Přesycení „pohodlnými“ uživateli → výběrové zkreslení.
2) V moderaci (sběr dat)
- Moderátor bias (navádění, hodnotící reakce).
- Sugestivní otázky.
- Sociální desirabilita (účastník chce „vypadat dobře“).
3) V analýze
- Konfirmační zkreslení (hledáme potvrzení hypotézy).
- Preferování „dramatických citací“ místo systematiky.
- Záměna zjištění (finding) za insight (interpretace).
4) V komunikaci
- Cherry-picking (vybírání jen podporujících příkladů).
- Přehnané zobecnění z malého vzorku.
Praktiky pro zvýšení kvality
- Triangulace (metod, zdrojů, perspektiv): rozhovor + test + analytika.
- Standardizace: výzkumný protokol, interview guide, pozorovací arch.
- Pilotáž: ověření otázek/úloh, času, techniky.
- Audit trail: dohledatelné kroky a rozhodnutí v analýze.
- Reflexivita: pojmenování vlastních předpokladů, práce s nimi.
- Intersubjektivita/peer review: společná konsolidace, debrief, second coder u kódování.
Jak bych to obhájil u státnic
- Vysvětlím: (1) co je záměr studie, (2) kde vznikají biasy, (3) jaké kontrolní mechanismy jsem zavedl a (4) jaká omezení přiznávám.
Všechny otázky - Uzivatelsky vyzkum
- 1. Kvalitativní metody: kdy a proč je volit
- 2. Validita, reliabilita a bias v kvalitativním UXR
- 3. Vzorkování a saturace u kvalitativních studií
- 4. Návrh a vedení uživatelského rozhovoru
- 5. Analýza rozhovorů: od kódů k doporučením
- 6. Návrh uživatelského testování: úlohy a kritéria
- 7. Komparativní test: within vs. between design
- 8. Moderování usability testu a práce s nápovědou
- 9. Vyhodnocení testu: severity a prioritizace
- 10. Expertní analýza: postup a role v procesu
- 11. Kognitivní průchod: learnability a goal–action gap
- 12. Heuristická analýza: principy a proces
- 13. Triangulace: spojení rozhovoru, testu a inspekcí
- 14. Etika, souhlas, GDPR a práce s výzkumnými daty