Předpokladem je, stejně jako u uživatelského testování v labu (zasedačce nebo jakékoliv jiné „testovací místnosti“), že už víte a máte:

• cíl testování,
• hypotézy,
• testovací scénář,
• předmět testování (tzn. funkční web, aplikaci, prototyp nebo jenom skicy – ano i ty není problém převést do el. podoby a postavit na nich vzdálené uživatelské testování),
• sehnané respondenty z odpovídající cílové skupiny (nebo máte cílovou skupinu respondentů alespoň definovanou).

Nutnou podmínkou, aby vše proběhlo zdárně a vy jste si testování užili, je – a v tomto se testování na dálku od toho prezenčního příliš neliší – kvalitní příprava. Tento text je shrnutím mých osobních zkušeností a poznatků z pozice moderátora, zkušeností dalších kolegů moderátorů a také samotných účastníků (respondentů) uživatelského testování na dálku, mezi kterými jsem si, před napsáním článku, udělala malý průzkum.

Čeho se při testování na dálku nejčastěji obávají moderátoři a jak to řešit

Nevejdeme se do vyhrazeného času.
Řešení: Udělejte si včas pilotní testování na dálku s nějakým kamarádem nebo kolegou tak, jako by to bylo testování naostro, abyste měli možnost narazit na všechno, co ještě potřebujete doladit (upravit scénář, prototyp, plánovanou časovou dotaci, způsob pořizování nahrávky i zápisu, funkčnost veškeré techniky atd.).

Nemám dokonale připravený prototyp.
Řešení: Nevadí. Scénář si připravte tak, aby respektoval aktuální stav prototypu a držte se ho.

Nevím, jaké mají respondenti připojení, bojím se, že bude padat spojení.
Řešení: Naplánujte a proveďte zkušební hovory (stačí 1-2 dny před samotným testováním v trvání cca 15 minut). Během nich respondenty seznamte s průběhem samotného testování. Ověřte si, že hovor probíhá z místa, odkud bude probíhat samotné testování v domluvený termín, abyste měli možnost společně vyzkoušet reálné spojení a konkrétní techniku. Vyzkoušejte funkčnost zvuku i obrazu, případně použití sluchátek. Pošlete respondentovi např. do chatu použitého online nástroje odkaz na nějaký cvičný prototyp nebo jakoukoliv webovou stránku a vyzkoušejte, že ho zvládne nasdílet. Zodpovězte případné otázky a potvrďte si domluvený termín testování. Domluvte si způsob komunikace, pokud by nastal jakýkoliv problém ohledně účasti nebo s připojením v den D.

Nevím, zda se respondent bude soustředit plně na testování a nebude rušen (třeba svou dcerou, která se učí vedle u stolu).
Řešení: Při zkušebním hovoru se s každým respondentem domluvte na zajištění potřebných podmínek pro hladký průběh testování. Případné „hrozící“ rušivé elementy je potřeba předem vyřešit nebo si raději domluvit jiný vhodnější termín, aby zbytečně nenatahovaly naplánovaný čas a neovlivňovalo to vyhrazený čas pro dalšího respondenta. Počítejte i tak s dostatečnou časovou rezervou mezi jednotlivými respondenty (30-60 minut).

Čeho se při testování na dálku nejčastěji obávají respondenti a jak to řešit

Že to bude složité.
Řešení: Vysvětlete respondentům, že nikdy netestujete jejich schopnosti. Testuje se produkt nebo služba. Cílem je právě všechny složitosti odhalit. Takže pokud se ukáže, že je něco složité, je to velkým přínosem.

Že přestane fungovat připojení nebo nezvládnou techniku.
Řešení: Uklidněte respondenty, že většinu případných problémů se podaří odhalit i vyřešit při domluveném zkušebním hovoru. A pokud přeci jen technika nebo spojení selže, můžete si pro testování domluvit náhradní termín.

Co respondenty naopak baví a může je motivovat

• Pocit, že jsou součástí něčeho nového nebo pomáhají něco vylepšit; co navíc možná budou sami jednou používat (měli by být z cílové skupiny).
• Mít možnost zažít novou zkušenost. Příležitost naučit se něco nového (technika, online prostředí).
• Komunikace s novými lidmi mimo vlastní bublinu.
• Možnost říct svůj názor, který bude brán v úvahu při tvorbě nových produktů.

Jaké jsou výhody a nevýhody uživatelského testování na dálku

Výhody

• Relevantní a upřímná zpětná vazba je pro respondenta snazší a celý průběh testování hladší, když je ve svém přirozeném prostředí, kde se cítí bezpečně.
• Možnost spojit se s kýmkoliv a odkudkoliv (napříč naší republikou nebo celým světem).
• Odpadá cestování a náklady s ním spojené.
• Odpadá organizace a komunikace s dalšími zainteresovanými lidmi např. na recepci (pokyny k místu konání, rezervace parkování atp.).
• Účastnit se mohou také imobilní respondenti.
• Menší časová náročnost umožňuje účast většímu počtu respondentů; např. matkám na mateřské dovolené (zvládnou v klidu v době spánku dítěte).

Nevýhody

• Chybí osobní kontakt, díky kterému nevnímáte všechny důležité emoce.
• Jste maximálně závislí na kvalitním spojení (včetně kvality zvuku a obrazu).
• Pro obě strany je mnohem náročnější udržet plnou pozornost a soustředění.
• Místo pro testování mají respondenti plně ve svých rukách, tzn. zabránění rušivým elementům je závislé na jejich zodpovědném přístupu.

Tipy a doporučení k organizaci, průběhu a technickému zajištění, aneb co nepodcenit

Vhodné prostředí
Bez rušivých elementů jak na straně moderátora, tak na straně respondenta.

Rozsah testování
Testujte častěji a po menších částech. Klidně i jen jednu obrazovku, kterou máte rozpracovanou pro všechny interakce.

Techniku a připojení
Včetně nahrávání.

Pilotní test s dobrovolníkem
Pro ověření časové náročnosti a případnou úpravu scénáře či předmětu testování na základě zjištěných problémů.

Účast zapisovatele
V ideálním případě.

Zkušební hovory s respondenty jejichž cílem je:

• vzájemně se seznámit,
• vyřešit ideálně písemný souhlas s nahráváním,
• nastínit, co se bude v den D dít,
• zkouška připojení a techniky (včetně audio a video),
• vyzkoušení si práce s online nástrojem (chat, sdílení obrazovky atp.),
• zbavit respondenta strachu z neznámého = společně odladit maximum možných problémů,
• případné potřebné nastavení v zařízení respondenta (např. aktivace „developer mode“ na telefonu pro vizualizaci tapnutí na obrazovku).

Datový objem prototypu
Je potřeba počítat s horším připojením u respondenta, nutností sdílet obrazovku a nahráváním, a to vše přes videohovor.

Souhlas s nahráváním
Měl by být formálně vyřešen již před samotným testováním, aby nedošlo k neočekávanému překvapení a následnému problému s realizací testování.

Zopakování domluveného postupu z testovacího hovoru
Jako sdílení, používání chatu atp.

Délku testování
Ideální je vejít se do 1 hodiny; cokoliv nad bývá již náročné na pozornost jak ze strany respondenta, tak ze strany moderátora.

Časový plán
Všechny respondenty si zorganizovat s dostatečnými pauzami a rezervami pro případ jakýchkoliv neočekávaných zdržení. Při plánování pozor na případný časový posun u respondentů z jiných časových pásem.

Vzájemný kontakt (tel. číslo)
Pro případ neočekávaných problémů s účastí, připojením atp.

Úvod
Stojí za to věnovat čas navození neformální atmosféry, díky které se respondent rozpovídá.

Dobré jméno
Pokud s respondentem provedeme jakékoliv nastavení jeho zařízení (např. zapnutí developer modu na mobilu, aby bylo při testování viditelné „tapnutí“), nezapomeneme mu pomoci s návratem do původního stavu.

Vyzkoušené online nástroje

Skype (testování na mobilu)

• Rozšířené používání ve firmách i soukromě.
• Je potřeba mít založený účet (registraci), kde má každý uživatel svůj nick.
• Umožňuje sdílení, chatování a nahrávání (není nutné řešit externí).
• Po ukončení nahrávání se odešle nahrávka do chatu (pozn.: odtud je dobré nahrávku lokálně stáhnout a z chatu ji smazat, stahování chvíli trvá a než nahrávku z chatu smažete, je potřeba se ujistit, že se stáhla celá).

Google Meet (testování na desktopu)

• Rozšířené používání ve firmách i soukromě.
• Nevyžaduje registraci každého uživatele ani speciální instalaci – pro připojení ke schůzce stačí kliknout na poskytnutý odkaz.
• Umožňuje sdílení, chatování a nahrávání (není nutné řešit externí).
• Po ukončení nahrávání dorazí automaticky nahrávka hovoru a přepis chatové komunikace na Gmail všech pozvaných + se uloží online na Drive a je sdílena pro všechny pozvané (pozn.: organizátor schůzky má možnost si nahrávku stáhnout).

Whereby (testování na desktopu)

• Rozšířené používání ve firmách i soukromě.
• Nevyžaduje registraci každého uživatele ani speciální instalaci – pro připojení ke schůzce stačí kliknout na poskytnutý odkaz.
• Zdarma umožňuje sdílení a chatování (nahrávání je potřeba vyřešit externí např. na Macu přes nativní aplikaci QuickTime Player)
• V placené verzi umožňuje i nahrávání (není nutné řešit externí).

Bonus na závěr

Vzdálené uživatelské testování se „rozmohlo“ hlavně kvůli situaci kolem Covid a věřím, že mnohým z nás (stejně jako mně) otevřelo oči. Vnímám ho jako posunutí z komfortní zóny a to – doufám, že se mnou souhlasíte – není nikdy na škodu! Rozhodně nám, moderátorům uživatelských testů, rozšířilo možnosti. Takže až bude svět zase „normální“, budeme to mít snazší v tom, že budeme mít na výběr, zda je pro konkrétní případ vhodnější uživatelské testování s účastí v „labu“ nebo to vzdálené.

Tak co, už se těšíte, jak si své příští uživatelské testování na dálku užijete? Pro náš Lundegaard design tým je takové testování běžným nástrojem. Rádi se s vámi podělíme o své zkušenosti podrobněji. Pokud máte jakoukoli otázku, potřebujete poradit, nebo pomoct s realizací, neváhejte se na nás obrátit.

A ještě závěrečný tip: pokud nemáte potřebné respondenty a nevíte, kde nebo jak je sehnat, doporučuji obrátit se na Zuzku Štědrou, která umí někdy i zázraky.