SlideShare a Scribd company logo
1 of 34
Távoli UX kutatás
    ClickTale, Verify


        Varga Csaba
TÁVOLI KUTATÁS
Típusok és trendek
Távoli kutatás típusok
•  Split testing (konverzió optimalizálás): élesben, valódi
   látogatókon, azok tudta nélkül, alternatívák tesztelése.
  Eszközök: Google Analytics – Content Experiments (korábban GWO),
  Visual Website Optimizer

•  Élő felhasználói analitika: élesben, valódi látogatók
   viselkedését rögzítjük, majd elemezzük.
  Eszközök: GA, ClickTale, CrazyEgg, ClickHeat, Mouseflow, GhostRec, …

•  Feladat-központú felhasználói kutatás: klasszikus módon
   feladatokat adunk ki, válaszokat várunk, de a válaszokat
   online eszközzel gyűjtjük és aggregáljuk.
  Eszközök: Verify, Usabilla, OptimalSort, Treejack, Loop11, Navflow, …
Gyorsan változó piac
•  Ha ezt a prezit 2013 Q2 után nézed, mindennek
   nézz utána újra
•  Rengeteg új eszköz folyamatosan
•  Meglévő eszközöket fejlesztik, redesignolják,
   funkciólista bővül
•  Két jövőkép:
  1.  Mindenki magának gyárt eszközt, csak aztán
      release-eli, nem dőlnek be a nagy profit hiányában
  2.  Az egész egy hatalmas lufi: GWO visszafogása,
      látványosan túlfújt értékígéretek, rengeteg
      versenyző eszköz egy niche szakértői piacon,
      fennmarad kevés jó eszköz
CLICKTALE
A heatmapek donja és godzillája
Hogyan működik?
•  Integrálod a site-ba (mint egy mérőkódot)
•  Látogatók minden rezdülését riportolja
   magának (egérmoccanás, kattintás,
   gördítés stb.)
•  Visszajátszhatod emulálva az egyes
   látogatói sessionöket
•  Aggregálva a gyűjtött adatok alapján
   hőtérképeket rajzol, mutatószámokat ad
Mit ígér?
•  Hőtérképes in-page analitika piacvezetője
•  Mindent felvesz, amit a user a site-on
   csinál, és azt pixelre visszajátssza
•  Rengeteg mért adat, sok aggregált mutató
•  Űrlap mélyanalitika
•  Copy-paste telepítés
•  Integráltan működik együtt más
   eszközökkel (pl. GWO, Omniture T&T)
Mit tapasztaltunk?
•  Valóban a legrobosztusabb a piacon
•  Borzasztó nehézzé tud válni a telepítése
   •  .NET már nem jó jel
   •  Egyedi és régi keretrendszerek szintén
•  Bizonyos esetekben “fura” alternatívákat gondolnak
   megoldásnak (pl. user töltse fel a saját cache-ét)
•  Olyan sok infó, hogy végül nem használod mind ki
•  Integrálás (pl. GWO) igazából a te feladatod
•  Ami megér 300 USD-t:
   •  Űrlap analitika
   •  Egyedi címkézés (és szegmentálás)
FHB.hu analitika
FHB.hu analitika
•  Pilot jelleggel néhány kulcs oldal vizsgálata:
   •    Főoldal
   •    Legforgalmasabb elosztó oldal
   •    Legnagyobb látogatottságú aloldal
   •    Kapcsolatfelvételi űrlapok
•  Hőtérképek, űrlap vizsgálat, “fun facts”
•  Partnerek:
   •  FHB (megrendelő)
   •  Sense/Net (fejlesztő, implementáló)
FHB.hu főoldal – egérmozgás
FHB.hu főoldal – egérmozgás
FHB.hu főoldal – egérmozgás
FHB.hu főoldal – kattintások
FHB.hu főoldal – gördítés
FHB.hu visszahívás – egérmozgás
FHB.hu visszahívás – form report
FHB.hu visszahívás – time report
                      •  Átlagos
                         felhasználó
                         timeline-ja
                      •  Ha egy nagy form
                         az oldal, mindent
                         egybe mér
                      •  Van még:
                         •  Drop
                         •  Blank field
                         •  Refill
Fun fact rovat
                                Egérmozgások
                                eloszlása: a
                                pageview-k hány
                                százalékában
                                mennyiszer
                                moccant az egér



Heatmapre vetítve:
•  Time to click (hesitation)
•  Hover to click conversion
•  Hover order
•  Click ranking (order)
Mire figyelj oda?
•  Ne becsüld le a setup időt, pilottal indulj
  Napoktól hónapokig tarthat a telepítés, egyedi fejlesztés
  lesz, 100-200 USD a belépés
•  Pontosan találd ki, hogy mit szeretnél megtudni
  Pilot erre is jó, de utána is tervezz előre
•  Alaposan tesztelj élesbe menetel előtt
   •  Minden oldaltípuson és környezetben jó eredményt
      mutat-e a visitor recording
   •  Elfogadható-e a mérési hiba, vagy ki tudod-e szűrni
   •  Szenzitív adatok környékén szuperóvatosan!
•  Jogi kötelezettségeknek tegyél eleget
  EU jogszabályok, EULA/T&C kiegészítés
Aknák még…
•  Mindig limitált a vizualizált userek száma
  Random minta az összesből
•  Interstitial/roadblock bannerek
•  Folyamatosan változó oldalak
  Jegyezd a verziókat
•  Dinamikus oldalfelületek
  Mindent le kell követned a ClickTale felé is
•  Telefonos support a biztos
  Jól beszélnek angolul, de írásban össze tudnak zavarodni
VERIFY
Design tesztelési svájci bicska
Hogyan működik?
•  Választasz egy teszt típust
•  Feltöltesz egy design tervet
•  Megadod a teszt alanynak megjelenő
   kérdést
•  Kiküldöd a teszt URL-t
•  Beérkező válaszokat megnézed egyesével
   vagy aggregálva, és letöltheted csv-ben
Mit ígér?
•  Designt tesztelhetsz még implementálás
   előtt
•  Egyszerű setup, teljesen perszonalizálható
•  Gyors és hasznos eredmények,
   használható riport
•  Olcsó
•  Sok teszt típus = sokrétű
   felhasználhatóság
Teszt típusok
•    Preference test (A/B design teszt)
•    Yes/No test (kattintási teszt “jó válasz” pontokkal)
•    Click test (sima kattintási teszt)
•    Memory test (5mp után mire emlékszik)
•    Annotate test (keretezd be a designon…)
•    Label test (szerinted ez micsoda…)
•    Mood test (boldog-frusztrált-mérges jelzés)
Mit tapasztaltunk?
•  Szeretjük. (Az egyik állandó előfizetésünk.)
•  Nagyjából minden igaz: egyszerű, okos, gyors,
   sokrétű és jól (fel)használható
•  19 USD/hó alap csomag elég napi használatra, de
   nagyobb tervezett tesztre megéri a 49 USD/hó a
   linked test miatt
•  Ne várjunk tőle többet mint ami:
  •  Csak egy screen tesztelésére jó
  •  Kis felbontású kattintási “hőtérképet”, mini riportot ad
  •  Nem túlelemzésre, hanem praktikus felhasználásra
Wizzair.com redesign
Wizzair.com redesign
1.  Eredeti (régi) design tesztelése

2.  2 új design koncepció

3.  1 nyertes vizuál

4.  Kidolgozott új design tesztelése

5.  Teszteredmények összevetése, riport

6.  További iteráció
Wizzair.com redesign
•  40 feladatból álló teszt (az sok)
•  Panel: nemzetközi 100+ fő
•  Ugyanaz a feladatsor régi és új designon
•  Kattintás, annotáció, memory
•  Teszt-specifikus eredmények mellett
   átlagos kattintási idő
•  Annotációból kvalitatív visszajelzések
Wizzair.com redesign – példák
Memory: mire emlékszel a főoldalból?
Wizzair.com redesign – példák
Labeling: mit nem értesz a főoldalon?
Wizzair.com redesign – példák
Click: hova kattintanál, hogy biztosítást adj a foglaláshoz?

              Átl. katt idő:
              58 mp




                 Átl. katt idő:
                         9 mp
Mire figyelj oda?
•  Tervezze előre: tudd, mit kezdesz az
   eredményekkel, vonj konklúziókat
•  Fontos, nagy paneles tesztnél valami
   egyszerűvel indíts, van tanulási görbe
•  Nagyon fáradékonyak a repetitív teszteknél,
   legyél változatos
•  Kösd az instrukciókat (mi volt előtte)
•  Csinálj teszt tesztet: magadon és +1-2 emberen
•  Van kattintási pont, ami tényleg hülyeség
•  Ha gondod van à support, akár termékfejleszt is
Köszi a figyelmet!

    Varga Csaba
 cs.varga@mito.hu


    UX Fetish
   uxfetish.com

More Related Content

Similar to Távoli UX kutatás (ClickTale, Verify)

Mobil Weekend - A tesztelői csapat evolúciója
Mobil Weekend - A tesztelői csapat evolúciójaMobil Weekend - A tesztelői csapat evolúciója
Mobil Weekend - A tesztelői csapat evolúciójaCsaba Szabó
 
A webes űrlapok csodálatos világa
A webes űrlapok csodálatos világaA webes űrlapok csodálatos világa
A webes űrlapok csodálatos világaSzabolcs Bobor
 
Bobor Szabolcs: A webes űrlapok csodálatos világa
Bobor Szabolcs: A webes űrlapok csodálatos világaBobor Szabolcs: A webes űrlapok csodálatos világa
Bobor Szabolcs: A webes űrlapok csodálatos világaFrontend Meetup
 
Vállalati mobilfejlesztés projektek, App!mobil 2013
Vállalati mobilfejlesztés projektek, App!mobil 2013Vállalati mobilfejlesztés projektek, App!mobil 2013
Vállalati mobilfejlesztés projektek, App!mobil 2013Édua Dobos
 
Szerver oldali fejlesztés korszerű módszerekkel C# nyelven
Szerver oldali fejlesztés korszerű módszerekkel C# nyelvenSzerver oldali fejlesztés korszerű módszerekkel C# nyelven
Szerver oldali fejlesztés korszerű módszerekkel C# nyelvenKrisztián Gyula Tóth
 
Fejlesztési kihívások a pénzügyi szektorban
Fejlesztési kihívások a pénzügyi szektorbanFejlesztési kihívások a pénzügyi szektorban
Fejlesztési kihívások a pénzügyi szektorbanPal Vojacsek
 
Big data conference 2015
Big data conference 2015Big data conference 2015
Big data conference 2015Péter Lukács
 
PHP alkalmazások minőségbiztosítása
PHP alkalmazások minőségbiztosításaPHP alkalmazások minőségbiztosítása
PHP alkalmazások minőségbiztosításaFerenc Kovács
 
Elveszett userek nyomában - Evolution 2017
Elveszett userek nyomában - Evolution 2017Elveszett userek nyomában - Evolution 2017
Elveszett userek nyomában - Evolution 2017Norbert Boros
 
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...Digital Natives
 
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...META-INF Kft.
 
Szommer Károly: Internetes profilok - lehetőségek és veszélyek
Szommer Károly: Internetes profilok - lehetőségek és veszélyekSzommer Károly: Internetes profilok - lehetőségek és veszélyek
Szommer Károly: Internetes profilok - lehetőségek és veszélyekInformatikai Intézet
 
Élményarchitektúra J.J. Garrett nyomán
Élményarchitektúra J.J. Garrett nyománÉlményarchitektúra J.J. Garrett nyomán
Élményarchitektúra J.J. Garrett nyománMihály Minkó
 
A jó designer - Gocza Zoltan
A jó designer - Gocza ZoltanA jó designer - Gocza Zoltan
A jó designer - Gocza ZoltanZoltan Gocza
 
Cloud szolgáltatások
Cloud szolgáltatásokCloud szolgáltatások
Cloud szolgáltatásokMárton Szabó
 
CMS en túli webes megoldások
CMS en túli webes megoldásokCMS en túli webes megoldások
CMS en túli webes megoldásokTamas Rigo
 

Similar to Távoli UX kutatás (ClickTale, Verify) (20)

Mobil Weekend - A tesztelői csapat evolúciója
Mobil Weekend - A tesztelői csapat evolúciójaMobil Weekend - A tesztelői csapat evolúciója
Mobil Weekend - A tesztelői csapat evolúciója
 
Szoftver tesztelés
Szoftver tesztelésSzoftver tesztelés
Szoftver tesztelés
 
A webes űrlapok csodálatos világa
A webes űrlapok csodálatos világaA webes űrlapok csodálatos világa
A webes űrlapok csodálatos világa
 
Bobor Szabolcs: A webes űrlapok csodálatos világa
Bobor Szabolcs: A webes űrlapok csodálatos világaBobor Szabolcs: A webes űrlapok csodálatos világa
Bobor Szabolcs: A webes űrlapok csodálatos világa
 
Vállalati mobilfejlesztés projektek, App!mobil 2013
Vállalati mobilfejlesztés projektek, App!mobil 2013Vállalati mobilfejlesztés projektek, App!mobil 2013
Vállalati mobilfejlesztés projektek, App!mobil 2013
 
Szerver oldali fejlesztés korszerű módszerekkel C# nyelven
Szerver oldali fejlesztés korszerű módszerekkel C# nyelvenSzerver oldali fejlesztés korszerű módszerekkel C# nyelven
Szerver oldali fejlesztés korszerű módszerekkel C# nyelven
 
Fejlesztési kihívások a pénzügyi szektorban
Fejlesztési kihívások a pénzügyi szektorbanFejlesztési kihívások a pénzügyi szektorban
Fejlesztési kihívások a pénzügyi szektorban
 
Big data conference 2015
Big data conference 2015Big data conference 2015
Big data conference 2015
 
PHP alkalmazások minőségbiztosítása
PHP alkalmazások minőségbiztosításaPHP alkalmazások minőségbiztosítása
PHP alkalmazások minőségbiztosítása
 
Elveszett userek nyomában - Evolution 2017
Elveszett userek nyomában - Evolution 2017Elveszett userek nyomában - Evolution 2017
Elveszett userek nyomában - Evolution 2017
 
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...
A termékfejlesztés rögös útja (avagy barangolás a módszertanok és eszközök er...
 
Mobile weekend 2015
Mobile weekend 2015Mobile weekend 2015
Mobile weekend 2015
 
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...
Béla, mi élesedett tulajdonképpen? A request to release koncepció mire is ad ...
 
Szommer Károly: Internetes profilok - lehetőségek és veszélyek
Szommer Károly: Internetes profilok - lehetőségek és veszélyekSzommer Károly: Internetes profilok - lehetőségek és veszélyek
Szommer Károly: Internetes profilok - lehetőségek és veszélyek
 
Élményarchitektúra J.J. Garrett nyomán
Élményarchitektúra J.J. Garrett nyománÉlményarchitektúra J.J. Garrett nyomán
Élményarchitektúra J.J. Garrett nyomán
 
A jó designer...
A jó designer...A jó designer...
A jó designer...
 
A jó designer - Gocza Zoltan
A jó designer - Gocza ZoltanA jó designer - Gocza Zoltan
A jó designer - Gocza Zoltan
 
Budapest.rb 201010
Budapest.rb 201010Budapest.rb 201010
Budapest.rb 201010
 
Cloud szolgáltatások
Cloud szolgáltatásokCloud szolgáltatások
Cloud szolgáltatások
 
CMS en túli webes megoldások
CMS en túli webes megoldásokCMS en túli webes megoldások
CMS en túli webes megoldások
 

Távoli UX kutatás (ClickTale, Verify)

  • 1. Távoli UX kutatás ClickTale, Verify Varga Csaba
  • 3. Távoli kutatás típusok •  Split testing (konverzió optimalizálás): élesben, valódi látogatókon, azok tudta nélkül, alternatívák tesztelése. Eszközök: Google Analytics – Content Experiments (korábban GWO), Visual Website Optimizer •  Élő felhasználói analitika: élesben, valódi látogatók viselkedését rögzítjük, majd elemezzük. Eszközök: GA, ClickTale, CrazyEgg, ClickHeat, Mouseflow, GhostRec, … •  Feladat-központú felhasználói kutatás: klasszikus módon feladatokat adunk ki, válaszokat várunk, de a válaszokat online eszközzel gyűjtjük és aggregáljuk. Eszközök: Verify, Usabilla, OptimalSort, Treejack, Loop11, Navflow, …
  • 4. Gyorsan változó piac •  Ha ezt a prezit 2013 Q2 után nézed, mindennek nézz utána újra •  Rengeteg új eszköz folyamatosan •  Meglévő eszközöket fejlesztik, redesignolják, funkciólista bővül •  Két jövőkép: 1.  Mindenki magának gyárt eszközt, csak aztán release-eli, nem dőlnek be a nagy profit hiányában 2.  Az egész egy hatalmas lufi: GWO visszafogása, látványosan túlfújt értékígéretek, rengeteg versenyző eszköz egy niche szakértői piacon, fennmarad kevés jó eszköz
  • 5. CLICKTALE A heatmapek donja és godzillája
  • 6. Hogyan működik? •  Integrálod a site-ba (mint egy mérőkódot) •  Látogatók minden rezdülését riportolja magának (egérmoccanás, kattintás, gördítés stb.) •  Visszajátszhatod emulálva az egyes látogatói sessionöket •  Aggregálva a gyűjtött adatok alapján hőtérképeket rajzol, mutatószámokat ad
  • 7. Mit ígér? •  Hőtérképes in-page analitika piacvezetője •  Mindent felvesz, amit a user a site-on csinál, és azt pixelre visszajátssza •  Rengeteg mért adat, sok aggregált mutató •  Űrlap mélyanalitika •  Copy-paste telepítés •  Integráltan működik együtt más eszközökkel (pl. GWO, Omniture T&T)
  • 8. Mit tapasztaltunk? •  Valóban a legrobosztusabb a piacon •  Borzasztó nehézzé tud válni a telepítése •  .NET már nem jó jel •  Egyedi és régi keretrendszerek szintén •  Bizonyos esetekben “fura” alternatívákat gondolnak megoldásnak (pl. user töltse fel a saját cache-ét) •  Olyan sok infó, hogy végül nem használod mind ki •  Integrálás (pl. GWO) igazából a te feladatod •  Ami megér 300 USD-t: •  Űrlap analitika •  Egyedi címkézés (és szegmentálás)
  • 10. FHB.hu analitika •  Pilot jelleggel néhány kulcs oldal vizsgálata: •  Főoldal •  Legforgalmasabb elosztó oldal •  Legnagyobb látogatottságú aloldal •  Kapcsolatfelvételi űrlapok •  Hőtérképek, űrlap vizsgálat, “fun facts” •  Partnerek: •  FHB (megrendelő) •  Sense/Net (fejlesztő, implementáló)
  • 11. FHB.hu főoldal – egérmozgás
  • 12. FHB.hu főoldal – egérmozgás
  • 13. FHB.hu főoldal – egérmozgás
  • 14. FHB.hu főoldal – kattintások
  • 15. FHB.hu főoldal – gördítés
  • 16. FHB.hu visszahívás – egérmozgás
  • 18. FHB.hu visszahívás – time report •  Átlagos felhasználó timeline-ja •  Ha egy nagy form az oldal, mindent egybe mér •  Van még: •  Drop •  Blank field •  Refill
  • 19. Fun fact rovat Egérmozgások eloszlása: a pageview-k hány százalékában mennyiszer moccant az egér Heatmapre vetítve: •  Time to click (hesitation) •  Hover to click conversion •  Hover order •  Click ranking (order)
  • 20. Mire figyelj oda? •  Ne becsüld le a setup időt, pilottal indulj Napoktól hónapokig tarthat a telepítés, egyedi fejlesztés lesz, 100-200 USD a belépés •  Pontosan találd ki, hogy mit szeretnél megtudni Pilot erre is jó, de utána is tervezz előre •  Alaposan tesztelj élesbe menetel előtt •  Minden oldaltípuson és környezetben jó eredményt mutat-e a visitor recording •  Elfogadható-e a mérési hiba, vagy ki tudod-e szűrni •  Szenzitív adatok környékén szuperóvatosan! •  Jogi kötelezettségeknek tegyél eleget EU jogszabályok, EULA/T&C kiegészítés
  • 21. Aknák még… •  Mindig limitált a vizualizált userek száma Random minta az összesből •  Interstitial/roadblock bannerek •  Folyamatosan változó oldalak Jegyezd a verziókat •  Dinamikus oldalfelületek Mindent le kell követned a ClickTale felé is •  Telefonos support a biztos Jól beszélnek angolul, de írásban össze tudnak zavarodni
  • 23. Hogyan működik? •  Választasz egy teszt típust •  Feltöltesz egy design tervet •  Megadod a teszt alanynak megjelenő kérdést •  Kiküldöd a teszt URL-t •  Beérkező válaszokat megnézed egyesével vagy aggregálva, és letöltheted csv-ben
  • 24. Mit ígér? •  Designt tesztelhetsz még implementálás előtt •  Egyszerű setup, teljesen perszonalizálható •  Gyors és hasznos eredmények, használható riport •  Olcsó •  Sok teszt típus = sokrétű felhasználhatóság
  • 25. Teszt típusok •  Preference test (A/B design teszt) •  Yes/No test (kattintási teszt “jó válasz” pontokkal) •  Click test (sima kattintási teszt) •  Memory test (5mp után mire emlékszik) •  Annotate test (keretezd be a designon…) •  Label test (szerinted ez micsoda…) •  Mood test (boldog-frusztrált-mérges jelzés)
  • 26. Mit tapasztaltunk? •  Szeretjük. (Az egyik állandó előfizetésünk.) •  Nagyjából minden igaz: egyszerű, okos, gyors, sokrétű és jól (fel)használható •  19 USD/hó alap csomag elég napi használatra, de nagyobb tervezett tesztre megéri a 49 USD/hó a linked test miatt •  Ne várjunk tőle többet mint ami: •  Csak egy screen tesztelésére jó •  Kis felbontású kattintási “hőtérképet”, mini riportot ad •  Nem túlelemzésre, hanem praktikus felhasználásra
  • 28. Wizzair.com redesign 1.  Eredeti (régi) design tesztelése 2.  2 új design koncepció 3.  1 nyertes vizuál 4.  Kidolgozott új design tesztelése 5.  Teszteredmények összevetése, riport 6.  További iteráció
  • 29. Wizzair.com redesign •  40 feladatból álló teszt (az sok) •  Panel: nemzetközi 100+ fő •  Ugyanaz a feladatsor régi és új designon •  Kattintás, annotáció, memory •  Teszt-specifikus eredmények mellett átlagos kattintási idő •  Annotációból kvalitatív visszajelzések
  • 30. Wizzair.com redesign – példák Memory: mire emlékszel a főoldalból?
  • 31. Wizzair.com redesign – példák Labeling: mit nem értesz a főoldalon?
  • 32. Wizzair.com redesign – példák Click: hova kattintanál, hogy biztosítást adj a foglaláshoz? Átl. katt idő: 58 mp Átl. katt idő: 9 mp
  • 33. Mire figyelj oda? •  Tervezze előre: tudd, mit kezdesz az eredményekkel, vonj konklúziókat •  Fontos, nagy paneles tesztnél valami egyszerűvel indíts, van tanulási görbe •  Nagyon fáradékonyak a repetitív teszteknél, legyél változatos •  Kösd az instrukciókat (mi volt előtte) •  Csinálj teszt tesztet: magadon és +1-2 emberen •  Van kattintási pont, ami tényleg hülyeség •  Ha gondod van à support, akár termékfejleszt is
  • 34. Köszi a figyelmet! Varga Csaba cs.varga@mito.hu UX Fetish uxfetish.com