it-swarm-eu.dev

Placení testovacích subjektů za testování uživatelů / beta testování

Četl jsem, že fokusové skupiny jsou špatným způsobem provádění uživatelského výzkumu, protože přitahuje profesionální fokusační skupiny, které pracují „obvodem“ fokusní skupiny pro život. To má samozřejmě velké nedostatky, protože získáváte „expertní“ názory namísto náhodného vzorkování typických uživatelů. A co víc, pokud se osoba pravidelně účastní fokusních skupin nebo se věnuje životu, jejich zpětná vazba bude pravděpodobně ovlivněna minulými sezeními.

Ale tento problém nevidím jako jiný pro testování uživatelů. Často vidím reklamy nabízející peníze za účast na testování beta verze nebo jako uživatel tester. Weby jako usertesting.com nabízejí peněžité odměny uživatelům, kteří se zaregistrují na testovacích webech (10 $ na web), takže jejich testovací subjekty budou pravděpodobně také „profesionálními“ testery uživatelů, kteří se účastní velkého počtu studií, aby vydělali více peněz . Jiné společnosti, jako je UserZoom, získávají nábor uživatelů na „profesionální panelové společnosti“, u kterých předpokládám, že také kompenzují jejich členy.

Platí tedy uživatelským testerům správný postup, nebo ohrožuje data, která z nich získáte? Pokud to není dobrý postup, jaké jsou alternativy k získání velkého počtu nezaujatých testovacích předmětů? Byly výherní tomboly účinnější?

Vím, že mnoho stránek jednoduše náhodně vybere návštěvníky, kteří se budou účastnit uživatelských testů. Ale co když vás najme, aby provedl testování použitelnosti pro novou službu, která nemá dostatek provozu k náboru dostatečného počtu beta testerů?

12
Lèse majesté

Četl jsem o nedávné studii, podle níž 90% problémů s uživatelským rozhraním může objevit prvních 5 uživatelů testu. (Bohužel si nemůžu vzpomenout na odkaz, možná někdo jiný.) To se odráží i v mé zkušenosti, ale trik je, jak je uvedeno výše, ujistit se, že uživatel není obeznámen s vaším uživatelským rozhraním a záměry, a udržet během procesu byly nekontaminované.

Protože tolik nepotřebujete, nemělo by být obtížné najít 5-10 přátel přátel nebo rodičů nebo co, co byste mohli (jak je uvedeno výše) jednoduše poděkovat a nabídnout po něm pěkný oběd. Skutečná platba v hotovosti přidává zbytečný stres a očekávání procesu, který není zážitkem, který budou mít vaši pravidelní uživatelé. V ideálním případě se test také odehrává někde docela náhodně, takže se mu nedá vyděsit jeviště/myslet na něj jako na nějaký druh inteligenčního testu a věnovat více pozornosti, řekněme, faqům a podobně, než by za normálních okolností.

4
spongefile

Výběr reprezentativního vzorku je obtížným problémem, který s rozpočtem nemůžete vyřešit s takovou hodnotou 10 $ na testera. To má vliv na všechny ankety.

To, co skutečně potřebujete, je ne reprezentativní vzorek obecné populace. Chcete vzorek, který představuje vaše uživatele. To je mnohem jednodušší. Váš vzorek nemusí být zkreslený - prostě nemusí mít zkreslení v aspektech, které se vztahují k testovanému systému.

Přemýšlejte o tom takto: Na kolik webů byste měli zahrnout čínského rýže, který nikdy neměl přístup k počítači? Musí jich být miliony a miliony, ale přesto je nepotřebujete. (Promiňte, pane Li, za stereotypní vás)

Takže, zjistit: Co jsou potenciální uživatelé? Jak lidé používají - nebo mají používat - váš systém? Máte případy použití u typických uživatelů? z toho vyberte reprezentativní fiktivní uživatele, např .:

  • „uživatel energie gadget-feťák“
  • "luditele CEO"
  • "jeho šéf z něj dělá a on se mu nelíbí"

Zkuste pro to najít zástupce. Nemusí to být generální ředitel, ale někdo netrpělivý, ne důvtipný počítač se spoustou věcí na mysli. (mami? Jsi to ty?)


Pokud jde o konečnou otázku:

Ale co když vás najme, abychom provedli testování použitelnosti pro novou službu, která nemá dostatek provozu k náboru dostatečného počtu beta testerů?

Stačí se zeptat přátel a pozvat je na večeři.

8
peterchen

Pokud jde o vaši poslední otázku, kromě rodinných a přátel používám bezplatné inzeráty, např. craigslist k nalezení náhodných potenciálních uživatelů.

Klíčem je filtrovat zájemce (dříve než jim zavoláte) tím, že jim položíte několik důležitých otázek (online průzkum nebo telefon), které jsou relevantní k tomu, jak "seskupil" své vzorky. Například otázka jako „Dokončili jste již online registraci?“ může být velmi důležitá, pokud chcete měřit účinnost vašeho nového registračního toku; v závislosti na vašich testovacích cílech nebo zamýšleném publiku můžete mít první řádek filtrování na základě této jednoduché otázky.

Líbí se mi to tímto způsobem v tom smyslu, že je více osobní a také mi dává šanci propagovat testovanou službu. To může být užitečné, zejména pokud jste předpokládali, že se jedná o novou službu.

Obvykle jsem udělil účastníkům dárkový poukaz. Ano, řekl jsem jim předem.

8
moey

V akademickém výzkumu je získání souboru účastníků studia stejně problémem a neexistuje jednoduchá odpověď. V zásadě, pokud nabízíte jakoukoli formu vnější odměny, budete přitahovat určitý druh lidí, kteří jsou přitahováni odměnami. Pokud nenabízíte odměnu, přilákáte pouze ty lidi, kteří jsou připraveni vám pomoci za nic.

Jedinou skutečnou odpovědí je, že musíte lidi přimět k tomu, aby vám pomohli, ale ujistěte se, že vyvodíte závěry na základě vzorových úvah.

2