GoldenLine
Zaloguj się
Piotr Zięba

Piotr Zięba UI/UX Designer

Temat: Jakie metody badań użyteczności?

Witam wszystkich.

Jestem na etapie doboru rodzaju badań na potrzeby pracy magisterskiej mających na celu porównanie używalności wybranych, istniejących już stron internetowych. Na chwilę obecną myślę o przeprowadzeniu:

- analizy heurestycznej,
- scenariuszy użycia (podczas badania chciałbym zgromadzić też dane z eye i click trackingu)
- card sortingu

Dodam, że studiuję informatykę - interesują mnie badania, których rezultatem będzie zbiór danych numerycznych, aby wnioski wyglądały możliwie najbardziej obiektywnie. Ankiety nie przekonają umysłów ścisłych recenzentów. Moje pytania brzmią:

1) Czy wybór takich rodzajów badań jest właściwy? Co mógłbym dodać, a może przeprowadzanie któregoś mija się z celem?

2) Czy sortowanie kart powinienem przeprowadzić przed, czy po przejściu scenariuszy użycia? Czy może na zupełnie innej grupie badawczej? Zakładam, że jedno badanie może wpłynąć na drugie - ktoś, kto pozna strukturę strony będzie sprawnie się po niej poruszał podczas testów oraz na odwrót.. Czy tak to wygląda w praktyce?

Będę bardzo wdzięczny za pomoc.
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Tylko nie wybieraj za dużo, bo się zarobisz.
Dobrze uściślij co, jak chcesz badać i do czego dojść.

A czy wybór dobry, to musiałbyś ciut więcej napisać o naturze badania, co dokładnie chcesz badać?

Sortowanie kart to raczej jako praca koncepcyjna przed tworzeniem strony, ew. przy zmianach np. nawigacji. Badać coś sortowaniem kart to tak nie za bardzo. Chyba, że badanie poprawności sortowania innego zespołu.

Numeryczne dane - ale badanie ilościowe, czy jakościowe Cię interesuje?

Opowiedz więcej : ) fajne tematy ogólnie na MA, za moich czasów jeszcze parę lat temu tego nie było, heh.
Link do wypowiedziLink
Piotr Ż.

Piotr Ż. Director of UX EMEA

Temat: Jakie metody badań użyteczności?

zacznij od tezy - co chcesz udowodnic/obalic

czy strona jest użyteczna? wg jakich kryteriów? wtedy dobierasz metodologie badan oraz grupę badanych

jak piszesz, badanie ma byc na podstawie istniejacych serwisow... zatem statystyki powinny byc juz w bazie - znalezienie scieżek użycia i ich analiza powinny być proste

co jest celem serwisu - jaka jest optymalna teoretyczna ścieżka dla usera i jak to sie ma do prawdziwego użycia.

co innego ścieżki na grupie badanej a co innego na prawdziwych codziennych userach [jeszcze inaczej na serwisie dopiero projektowanym]

to samo z istniejaca struktura informacji - sortowanie kart moze wykazac lub nie rozne sprawy - postawic teze po analizie ruchu userow - znaleźć punkty gdzie użytkownicy znikają nie kończąc pełnej pożądanej ścieżki [konwersje i targety]

potem masz wnioski co, jak i gdzie poprawić
Link do wypowiedziLink
Piotr Zięba

Piotr Zięba UI/UX Designer

Temat: Jakie metody badań użyteczności?

Dzięki za odpowiedzi!

Praca ma na celu określenie, który z trzech serwisów uczelnianych można określić mianem najbardziej użytecznego/używalnego. Myślę, że konkretne parametry, jakie będę porównywał będą zależały od typu badań, jakie ostatecznie przeprowadzę. Jednak na pewno zależy mi bardziej na badaniach ilościowych opartych na testach behawioralnych. Na uzyskaniu twardych danych, które będzie można ze sobą zestawić i wyłonić mocne i słabe strony danego serwisu.

Dane, które zamierzam pozyskać na chwilę obecną:

- Odsetek scenariuszy zakończonych z powodzeniem
- Czas potrzebny na wykonanie scenariusza
- Ilość kliknięć/przejść pomiędzy podstronami
- Długość trwania fiksacji i sakad
- Stosunek długości trwania fiksacji w obszarze istotnym dla scenariusza do czasu w obszarach nieistotnych (rozpraszających uwagę użytkownika)
- Błędy (jeszcze nie do końca wiem, jak obliczać ich ilość)

Grupę badanych ograniczam do jednego kryterium - będą to osoby studiujące, lub będące krótko po ukończeniu studiów.

Do istniejących już statystyk nie mam i raczej nie będę miał dostępu. Ponadto w części teoretycznej chciałbym opisać cały proces przebiegu badań - wydaje mi się, że taki opis może zostać uznany przez recenzentów za wartościowy.

Odnośnie sortowania kart - myślałem bardziej o weryfikacji już istniejących struktur informacji. Ale z drugiej strony jest to bardziej badanie jakościowe (można je tak nazwać?) i rzeczywiście po wnikliwym przemyśleniu chyba zostanę przy badaniach ilościowych i uzupełnię je analizą heurystyczną. Czy to według Was wystarczy?

Dodam jeszcze, że nie jestem jeszcze pewien powodzenia badania eye trackingowego - jestem na etapie budowy urządzenia na podstawie opisu Michała Kowalika ( http://gazeinteraction.blogspot.com/2010/08/how-to-bui... ). I choć wszystko wskazuje na to, że może się to udać, to do tej pory nie testowałem empirycznie tego rozwiązania.
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Czekaj, czy dobrze rozumiem, ale napisałeś, że co chcesz badać to zależy od typu badań? Dlaczego tak od tej (pupy) strony?
Raczej postaw sobie jakieś tezy, a potem podpasuj rodzaj badania.
"Mocne" mogą być w sumie i ilościowe i jakościowe...

Acha, czyli tak patrzę jednak jakby na liczby idziesz. A czemu tak? Tak statystycznie chcesz to potem podsumowywać? I wnioski na bazie tego? A wnioski takie z przejściem do rekomendacji zmian?

Masz środowisko do eye trackingu? Szacun...Ten post został edytowany przez Autora dnia 18.10.13 o godzinie 23:35
Link do wypowiedziLink
Piotr Zięba

Piotr Zięba UI/UX Designer

Temat: Jakie metody badań użyteczności?

Czekaj, czy dobrze rozumiem, ale napisałeś, że co chcesz badać to zależy od typu badań?
Dlaczego tak od tej (pupy) strony?

Chciałem przetestować możliwie najwięcej parametrów określających użyteczność stron. Przeprowadzenie wszystkich "znanych" badań nie jest dla mnie osiągalne oraz nie wszystkie pasują dobrze do mojego kierunku. Wobec tego założyłem pomiar w/w parametrów, ale ostatecznie zweryfikuje to właśnie rodzaj testów, jakie będę w stanie przeprowadzić.
Tak statystycznie chcesz to potem podsumowywać? I wnioski na bazie tego? A wnioski takie z przejściem do rekomendacji zmian?

Tak właśnie chciałem to zrobić - wskazać, co należałoby poprawić oraz który serwis jest pod danym względem lepiej zaprojektowany. Wydaje mi się, że przypadku bronienia tej pracy na wydziale informatyki przedstawienie liczb będzie bardziej "wiarygodne" - gdybym studiował na kierunku albo specjalności bliższej HCI albo nawet psychologii, to np. z ankietami nie byłoby problemu.
Masz środowisko do eye trackingu? Szacun...

Czy pomiary z użyciem w/w zmodyfikowanej kamery internetowej i oprogramowania typu ITU Gaze Tracker według Ciebie może być niewystarczające? Bo nie wiem, czy dobrze odczytałem Twoją wypowiedź. :)
Link do wypowiedziLink
Hubert Majchrzak

Hubert Majchrzak Akredytowany Coach
ICF ACC, E-commerce
manager,
interim-m...

Temat: Jakie metody badań użyteczności?

Ja lubię najprostszą. Posadzić pojedynczo kilka osób które "średnio" radzą sobie z internetem. I kazać im "poklikać po stronie".

Bez wcześniejszego mówienia, co to za strona, do czego służy i co robi :-)
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Piotr da radę i bez Morae + sprzęt, pewnie. Camstudio + kamerka i odpowiednie zgranie wszystkiego.
Szacun i tak : )

Hubert ale co z tego wyniknie? Co porównasz?

Cel badania, procedura, scenariusze, potem wnioski i rekomendacje - to tak pi razy drzwi i ja nie polecam opuszczania któregoś z podpunktów.

Powodzenia!
Link do wypowiedziLink
Hubert Majchrzak

Hubert Majchrzak Akredytowany Coach
ICF ACC, E-commerce
manager,
interim-m...

Temat: Jakie metody badań użyteczności?

Miłosz W.:
Hubert ale co z tego wyniknie? Co porównasz?

Często trafiam na nowe strony internetowe z różnych źródeł:
- Reklama w internecie która mnie zainteresowała (na przykład pojawiło się keywords który mnie interesuje),
- Spotkaniach branżowych gdzie często pojawiają się twórcy lub właściciele tychże startup'ów
- itp. itd.

Niestety zdarza się, że po tym jak trafię na stronę główną tego portalu nie wiem co dalej zrobić. Klikam błądzę i dalej nie wiem jak ta strona działa. Czasami nawet zarejestruje się i dalej po niej "chodzę" i tak nie wiem jaki cel przyświecał Twórcą.
Mimo, że widziałem już kilka stron WWW to dalej trafiają mi się takie sytuacje.

"Co z tego wyniknie".

Wiem jak zachowują się potencjalni użytkownicy i czy ta strona jest równie oczywista dla nich jak dla teamu który tworzył tą stronę.

Czasami niestety trzeba cofnąć się o kilka kroków aby pójść do przodu :-)

P.S. Lubię ten typ "badania" mimo, że nie jest najbardziej profesjonalny ani obiektywy. Ale jest najprostszy w zastosowaniu i najszybszy. Dlatego lubię go zaaplikować kilka razy na różnym etapie prac.
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Ale widzisz, to jednak jest badanie, gdzie chcesz się przekonać o skuteczności jakichś aspektów strony. No mi chodziło we wcześniejszej wypowiedzi, że spoko, można tak chaotycznie do tego podejść - ja lubię precyzować co dokładnie chcę osiągnąć. Takie "pełne" badania jednak IMO więcej dają, albo inaczej: wyraźnie dają.
Link do wypowiedziLink
Hubert Majchrzak

Hubert Majchrzak Akredytowany Coach
ICF ACC, E-commerce
manager,
interim-m...

Temat: Jakie metody badań użyteczności?

Oczywiście, masz rację.

Po prostu chciałem coś podrzucić Piotrowi coś co nie było wcześniej omawiane.

Zawsze jest też jest odpowiednia:
- procedura
- scenariusze
- Dokładne pytanie jakie prowadzący zada testowanemu
- Określony czas na poszczególne zadania
- Zawsze schodzimy od ogółu do szczegółu, czyli na początki "jak myślisz co ta strona robi?", a kończąc na "wykonaj taką a taką akcję na stronie".
A potem oczywiście wnioski i rekomendacje.

:-)

Nie porównuje tego do eye trackingu ponieważ to ma inne cele inne możliwości.
Ma najprościej mówiąc ma nam odpowiedzieć czy idziemy w dobrym kierunku czy może użytkownicy mówią nam:
http://www.youtube.com/watch?v=VTBjyhMZj9I
^_^Ten post został edytowany przez Autora dnia 19.10.13 o godzinie 18:33
Link do wypowiedziLink
Piotr Zięba

Piotr Zięba UI/UX Designer

Temat: Jakie metody badań użyteczności?

Hubert, zgadzam się, że można wynieść jakąś wartość z tak przeprowadzonych badań, ale raczej sprawdzą się tylko na użytek wewnętrzny. :) Na co dzień w pracy również testuję interfejsy w podobny sposób, jednak z wynikami nie poszedłbym już do klienta. :)

Ok, wziąłem się w garść i określiłem (mam nadzieję, że jasno) cele, zakres i metody badań.

Chcę ocenić używalność wybranych stron internetowych w oparciu o parametry takie jak czas i łatwość dostępu do najczęściej używanych funkcjonalności (scenariusze już się tworzą). Zestawić wyniki badań oraz wyciągnąć wnioski i ewentualnie zarekomendować zmiany.

Metody to oparte na scenariuszach użycia: testy funkcjonalności, testy eye trackingowe, i click trackingowe. Rezygnuję z analizy heurestycznej oraz jakichkolwiek sfromalizowanych badań eksperckich - może jedynie wspomnę o tym we wnioskach.

Panowie, myślicie, że teraz trzyma się to kupy?Ten post został edytowany przez Autora dnia 19.10.13 o godzinie 19:22
Link do wypowiedziLink
Hubert Majchrzak

Hubert Majchrzak Akredytowany Coach
ICF ACC, E-commerce
manager,
interim-m...

Temat: Jakie metody badań użyteczności?

Wiesz to zależy od klienta. Moją wypowiedź trzymałem w dość swobodnym tonie. Ale nie zobowiązuje to do podobnego przeprowadzenia prezentacji dla klienta.

Osobiście poszedłem do klienta z czymś takim - wszystko zależy jak przygotujesz dane i w jaki sposób zaprezentujesz do klientowi. Sam wiesz najlepiej co do danego klienta przemówi, oraz jaki jest Twój nadrzędny cel.

Raz posadziłem klienta przy badaniu (które było nagrywane kamerą) i obserwowałem jak się wije kiedy testowany nie wiedział o co chodzi na jego stronie i gubił się raz po raz. To znakomicie mu uzmysłowiło, że najwyższa pora zamówić nową stronę a nie bawić się w poprawki na tym strupie którego miał :-)
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Piotr - brzmi nieźle : )
Szczegóły pewnie jeszcze lepiej zabrzmią, spoks.
Link do wypowiedziLink
Piotr Zięba

Piotr Zięba UI/UX Designer

Temat: Jakie metody badań użyteczności?

Dzięki wielkie za pomoc! Pochwalę się, jak coś z tego wyjdzie.
Link do wypowiedziLink

konto usunięte

Temat: Jakie metody badań użyteczności?

Zrób fajną prezentację w stylu infografik i puść do sieci.
Link do wypowiedziLink
« Wróć do tematów
Odpowiedz

Podobne tematy





Wyślij zaproszenie do
Anuluj