+ All Categories
Home > Documents > Kingdom Come: Deliverance (Alpha...

Kingdom Come: Deliverance (Alpha...

Date post: 29-Jun-2020
Category:
Upload: others
View: 1 times
Download: 0 times
Share this document with a friend
34
Kingdom Come: Deliverance (Alpha Access) Testování použitelnosti s uživateli v laboratoři použitelnosti ČVUT v Praze 19. května 2015 Pavel Valach, Barbora Suchanová Pavel Černý, Jakub Begera
Transcript
Page 1: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

Kingdom Come: Deliverance (Alpha Access) Testování použitelnosti s uživateli v laboratoři použitelnosti

ČVUT v Praze

19. května 2015

Pavel Valach, Barbora Suchanová

Pavel Černý, Jakub Begera

Page 2: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 2 z 34

Kapitola 1 - Úvod

Popis programu

Kingdom Come: Deliverance je RPG hra z období středověku zaměřující se především na příběhové

questy, komunikaci s NPCs (non-player characters) a minihry, například odemykání zámků a střelba z

luku.

Hra byla testována ve verzi V0.3 (alpha)

Cíl testu

Cílem testování bylo pro nás studenty vyzkoušet si testování použitelnosti v počítačových hrách.

Dalším cílem pak bylo nalezení chyb použitelnosti hry KCD v rané fázi vývoje. Zaměřovali jsme se

hlavně na plnění questů, práci s inventářem, obchodování, orientaci v herním prostoru a minihry.

Cílová skupina

Hra je pro zkušené hráče RPG, stejně tak může být první hrou tohoto žánru u běžných hráčů a to díky

své marketingové kampani na Kickstarteru, která oslovila velký počet i běžných hráčů.

Page 3: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 3 z 34

Kapitola 2 - Metodika

Plánovaná skupina účastníků testování

Účastníci testování by měli být jak hráči, kteří si zahrají jednou týdně, tak lidé, kteří hrají pravidelně

cca dvě hodiny denně. Dále by měli být zastoupeni jak hráči RPG, tak i lidé, kteří RPG nehrají.

Účastníci by měli být zvyklí hrát na klávesnici a myši, protože jsme měli možnost testovat jen na

těchto periferiích. Účastník musí umět poměrně dobře anglicky - alespoň tak, aby zvládal pobírat

příběhovou linii questů, která je v angličtině s anglickými titulky.

Z testování vynecháváme profesionální hráče (progamery), protože mají k hraní poněkud odlišný

vztah a KCD je hra pro jednoho hráče, nikoliv hra na turnaje v PC hrách.

Výběr účastníků testování

Na sociální síť Facebook jsme vyvěsili odkaz na formulář s dotazníkem Screener. Po získání cca 30

záznamů jsme zvolili 5 lidí tak, že všichni splňovali, že hrají hry alespoň v angličtině s anglickými

titulky. 2 účastníky jsme vybrali ze skupiny “příležitostně si zahraji”, 3 účastníky ze skupiny

“pravidelně hraji (několikrát týdně)”. V rámci každé této skupiny jsme se pak snažili zvolit vždy

jednoho, co nejvíce hraje RPG a jednoho, co nejvíce hraje pokud možno nějaký jiný žánr. Dále pak byl

tento výběr ještě korigován časovou flexibilitou účastníků v den testování. Viz. výsledky dotazníku

Screener (v příloze).

Průběh testu

Testování probíhalo v laboratoři použitelnosti (usability lab) v budově Fakulty elektrotechnické ČVUT

na Karlově náměstí v Praze.

Laboratoř sestává ze dvou oddělených místností. V jedné z těchto místností byl účastník testování

(dále jen účastník) a hrál hru na PC, v druhé pak byli organizátoři testování (dále jen organizátor) a ti

účastníka sledovali pomocí kamery zaměřené na obličej uživatele a dále sledovali přímý přenos

obrazovky účastníka. Oddělená místnost slouží k tomu, aby účastník neměl možnost se organizátorů

ptát a více se simulovalo skutečné prostředí, kdy doma bude hrát pouze sám.

Na začátku každého testu byl účastník zasvěcen do toho, jak vše bude probíhat, a organizátor s ním

prošel dotazník Pre-Test, aby získal představu o zkušenostech účastníka a byl tak schopen správně

interpretovat nalezené chyby a účastníkovo chování.

Pak následoval samotný test, kdy uživatel měl seznam úkolů, které postupně plnil. Případně mu byly

zadávány úkoly “za běhu” organizátory pomocí mikrofonu.

Po testu organizátor prošel s účastníkem dotazník Post-Test a probral nejasnosti organizátorů

ohledně interpretace nalezených chyb a probrání postřehů účastníka.

Page 4: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 4 z 34

Seznam úkolů

Účastník testování na začátku testu obdržel 8 úkolů lícem dolů. Ty postupně plnil. Úkoly a jejich

odhadovaná doba plnění jsou: (text kurzívou viděli jen organizátoři)

1. Seznam se s ovládáním a prohlédni si svět. Oznam až budeš připravený jít dále. (30s)

2. Ve hře je příběh. Zkus najít jak ho odstartovat a začni ho. (2 min)

3. Uprav si nastavení hlasitosti hudby a hlasu, tak aby ti vyhovovalo (například pokud přes

hudbu neslyšíš dialog). (Účastníkovi jsme do hry schválně přednastavili velmi hlasitou hudbu

a skoro neslyšitelné rozhovory) (2min)

4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než pán s bolavým břichem,

posíláme ho za pánem s bolavým břichem) (4min)

5. Pokus se misi splnit. (dojít za babkou kořenářkou) (2min)

6. Pokračuj v plnění mise (natrhej uvedené květiny) (Po té, co najde druhou květinu ho

zastavíme)

7. Dojdi za obchodníkem (řekneme, kde je) a kup si bodlák. Prodej cokoli, aby jsi na bodlák měl

dost peněz. (10min)

8. Jdi za babkou a identifikuj zda jsi misi dokončil, případně, co ti pro splnění mise chybí.

(10min)

Další úkoly zadávané organizátory za běhu, některým účastníkům pokud zbyl čas:

1. Jdi za kovářem a nauč se lockpick

2. Vyzkoušej si střelbu z luku (jdi za shootmasterem, poradili jsme mu kam)

Page 5: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 5 z 34

Kapitola 3 - Testování

Profil účastníků

Na základě dotazníku Pretest (v příloze) a toho jak na nás během testu působili.

ID popis účastníka

#1 Velmi zkušený hráč zejména různých RPG a GTA, hraje prakticky denně. KCD zná. Viděl

několik trailerů a videí.

#2 Zkušený hráč hráč jiného žánru než RPG, hraje World of Tanks, střílečky a závodní hry. Hraje denně. O KCD skoro nic neví.

#3 Zkušený hráč RPG, v současnosti hraje jen příležitostně. Sledoval kampaň KCD.

#4 Hráč zejména izometrických-RPG. Hraje často. O KCD nic neví. Během celého testování byl dost ve stresu.

#5 Hráč RPG, v současnosti hraje jen příležitostně. Sledoval kampaň KCD

Všichni účastníci jsou studenti nebo bývalí studenti ČVUT v oboru informatika.

Záznamy z testování Viz. logy (v příloze) a video v odkazu

https://goo.gl/ew2dJm

Výsledky testování jsou shrnuty v kapitole 4 – Nálezy.

Zpětná vazba od účastníků

Na základě rozhovorů a dotazníku Post-test (v příloze). Výsledky jsou opět reportovány v kapitole 4 -

Nálezy

Potíže dělalo:

Hráči se ztráceli a nevěděli kam běžet.

Měli problémy s orientací, nevšimli si kompasu. (2 účastníci)

Není úplně jasné koho zrovna oslovuje, když je více NPC u sebe. Osoba by mohla mít nad

sebou jméno případně celé, nějak změnit barvu, když s ní chci mluvit. Pokud se mnou osoba

nechce mluvit ať mi to řekne i nahlas “Talk to me later” - titulku si někdy nevšimnu (1

účastník).

Postava pokud s ním promluvím znovu mě pozdraví, jak kdybych s ní předtím nikdy nemluvil.

Opět zmatečné, s kterou postavou jsem mluvil. (1 účastník)

Při hledání páteho kousku uhlí v questu výroba lektvaru byl opravdu naštvaný, že ho nemůže

najít. (1 účastník přímo zmínil, ale i u ostatních během testu to dělalo problémy)

Page 6: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 6 z 34

GUI obchodu je dost nepřehledné, zejména to, že je vše v záložkách a člověk musí pořád

přepínat mezi nimi, místo toho aby vše viděl najednou. (3 účastníci)

Inventář nepoužívá drag'n'drop. Je to dlouhý seznam, člověk musí pořád skrolovat.

V košíku je Esc pro zpět a Y pro exit, což je zmatečné.

V questu lockpicking u kováře přehlédl v dialogu, že má hledat truhlu a pak netušil, co má

dělat.

Celkový dojem:

Grafika u hry je nádherná. Pro jednoho účastníka je však svět nevýrazný (#4).

Kromě účastníka #4, který by hru všichni doporučili všem hráčům RPG. Účastník #4 si připadal jako

blbec a hru by nedoporučil nikomu

Page 7: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 7 z 34

Kapitola 4 - Nálezy Při testování byly zjištěny níže uvedené problémy. U každého je uveden popis, případně návrh

řešení, kód odkazující do testů a priorita, jak moc je nutné problém odstranit.

Kódy se dělí na:

U - Použitelnost

G - Gameplay

N - Ostatní, nezařazené

Priority pak jsou:

P1 - Kritické, je třeba jim věnovat pozornost

P2 - Půjde to, ale zdrží to uživatele

P3 - Nevypadá to dobře

P4 - Věc POV - záleží na pohledu daného uživatele/hráče

Kód Popis Priorita

U Obchod: Je problém určit, kolik má hráč právě u sebe peněz.

#4 byl při obchodování zmaten mezisoučtem částky, co kupuje a co prodává - hledal aktuální stav peněz tam. Ikonky s grošem si kupodivu všiml, ale nespojil si ji se svojí finanční situací.

Zasažení účastníci: hlavně #4, ale i ostatní

P1

Page 8: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 8 z 34

U Obchod: Tlačítka pro potvrzení nákupu neodpovídají těm, co musím zmáčknout klávesnici a nelze na ně ani klikat.

Tlačítko s nápisem A se ve skutečnosti aktivuje stisknutím písmena E apod. Kliknutí myší neudělá nic.

Zasažení účastníci: všichni

P1

U Ovládání: Hráči neví, že je ve hře mapa.

Na herní obrazovce chybí nějaké info, že ve hře existuje něco jako mapa, případně zobrazená minimapa někde v rohu po celou dobu hraní.. Někteří účastníci ji našli přes inventář nebo díky znalosti podobných her, kde se mapa zobrazuje klávesou M.

Zasažení účastníci: hlavně #3

P1

Page 9: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 9 z 34

U Ovládání: V nápovědě je těžké rozlišit mezi klávesami 1 (jednička) a I (velké i).

To následně vede k chybám, zmáčknu I a přitom jsem měl mačkat 1 “místo toho, aby hráč dobil šíp, si omylem schoval luk a neví, co se stalo” - viz gameplay chyby, Střelba z luku.

Zasažení účastníci: #3

P1

G Nutná velká blízkost a přesnost pro sběr bodláků (a jiných rostlin).

P1

G Nelze scrollovat mapu myší.

Lze to pouze pomocí šipek, a proto si většina myslela, že nejde posouvat vůbec.

P1

Page 10: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 10 z 34

G Jak zacházet s paklíčem: V misi “nauč se lockpicking” u kováře kovář po dotazu hráče “Naučíte mě to?” řekne “Určitě, dávej pozor. Támhle mám truhlu, na ní si to můžeš vyzkoušet” a dál se s hráčem nebaví.

Takže si uživatel myslí, že postava kováře bude něco předvádět, při tom kovář ho poslal k truhle a dál ho hráč nezajímá. Zároveň hráč po tomto dotazu dostane lockpicker, aniž by o tom věděl.

Zasažení účastníci: #1, #4

P1

G Střelba z luku: Po dokončení minihry už nelze znovu vidět instrukce pro minihru. Uživatel si omylem otevřel inventář a minihra skončila. Po druhé už neviděl nápovědu.

#3 přišel omylem o luk zmáčknutím jedničky (jediný účastník, co střílel z luku). Při pokazení minihry už nelze znovu zobrazit instrukce.

Zasažení účastníci: #3

P1

Page 11: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 11 z 34

G Tvorba lektvaru: #4 ani po sehnání všech ingrediencí a rozmluvě s bábou nemohl začít vařit svůj nápoj, nebylo možné “použít” herbář. To následně vedlo k záseku a předčasnému ukončení testu.

Rozumíme, že je to neduh technické alfaverze hry.

Zasažení účastníci: #4

P1

U Obchod/výměna věcí: Žádná zpětná vazba, pokud nějaká osoba dává něco hlavnímu hrdinovi nebo naopak pokud hlavni hrdina něco prodává. Uživatel si není jistý zda transakce proběhla, případně si vůbec nevšimne, že něco předal (např. 3 groše pro babku kořenářku při získání questu, věci v inventáři, lockpicky při odemykání). Bylo by dobré doplnit i zpětnou vazbu, pokud nic od postavy nedostanu: v misi “promluvit si s kovářem o uhlí” lidé předpokládají, že jej dostali a musí si to kontrolovat později v inventáři (kde zjistí, že nedostali nic).

Zasažení účastníci: všichni

P2

Page 12: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 12 z 34

U Obchod: Na konci obchodování chybí zpětná vazba o koupi; obchod zmizí stejným způsobem, jako by z něj člověk bez nakoupení odešel.

#1 si musel po transakci v inventáři ověřit, že věci od obchodníka skutečně koupil, #4 si zprvu po stisknutí tlačítka pro nákup myslel, že věci nekoupil.

Zasažení účastníci: hlavně #1, #4

P2

U Nastavení: Nastavení hudby je třeba potvrdit kliknutím na “Apply” a poté “Yes”. A zároveň když dávám Apply, tak zmizí hodnoty a nepamatuji si, co vlastně už potvrzuji

Stačilo by ponechat zobrazené hodnoty z předchozího kroku a změnit jen RESET-APPLY-BACK na pply changes?-YES-NO

Zasažení účastníci: všichni

P2

Page 13: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 13 z 34

U Kompas: Symbol erbu, který značí aktuální cíl(e) posouvá se na kompasu a občas je skrytý úplně, není viditelný na první pohled.

Zasažení účastníci: všichni

P2

U Rozhovory/questy: Nelze poznat, zda už hráč od postavy dostal quest, nebo si s ní pořád jen povídal. Chybí něco jako hláška „získán nový úkol“ po dokončení dialogu.

P2

U Rozhovory: Není zřejmé, jak přeskočit dialog. Nikde není zobrazeno, že lze zmáčknout klávesu „Esc“ pro rychlé přeskočení.

Uživatelé zběsile buší do klávesnice, což situaci nepomáhá.

Zasažení účastníci: hlavně #3, #5

P2

G Nelze snadno přeskakovat ploty.

Jeden příklad za všechny: #1 po několikátém nepodařeném pokusu “áá tyvole” a je naštvaný.

Zasažení účastníci: všichni

P2

G Návody obecně (lockpicking, střelba z luku) nejsou stručné. Musím to dlouho číst než to pochopím.

Návod by se mohl dát do menšího tutoriálu, kde by bylo krok za krokem ukázáno, jak se danou věc naučit/zvládnout.

P2

Page 14: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 14 z 34

G Uhlí u kováře: V misi “posbírej uhlí u kováře” není těžké přehlédnout uhlí na zemi; hráč jej pak hledá někde v krbu, míse a podobně. Stejně tak byl problém najít poslední 5. kus uhlí.

Bylo by lepší dát víc než přesně požadovaný počet, nebo kousky umístit tak, aby je bylo lépe vidět. Na druhou stranu je pravda, že si uhlí může hráč také koupit - u koho jiného než u kováře.

Zasažení účastníci: #1, #4

P2

G Střelba z luku: Není jasné, kam šíp letěl. P2

U Questlog: Pro lepší představu o rostlinách/předmětech chybí v questlogu obrázky předmětů.

P3

U Kompas: Značka aktuálního cíle v kompasu je odlišná od značky na mapě (měla by být stejná nebo mít alespoň stejnou barvu).

P3

Page 15: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 15 z 34

U Rozhovory: Žádná zpětná hlasová vazba, pokud se osoba nechce bavit, objeví se jen hláška “I am busy, can’t you see” nebo obdobná. Tato hláška však není nadabovaná. Uživatelé, kteří umí dobře anglicky pouze poslouchají a titulkům nemusí vždy věnovat pozornost.

Nejspíš kvůli nekompletnímu dabingu v alfa verzi Zasažení účastníci: #5

P3

U Chybí identifikace lidí např. jména, role při přiblížení k určité osobě.

P3

U Nelze vyskočit během dialogu (např. do nastavení zvuku apod.) jednou rychlou akcí. Musím projít celý dialog a až k rozloučení se s postavou

P3

Page 16: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 16 z 34

G Není jasné, jak ve hře poznat obchodníka.

Odlišuje se akorát tím, že má v nabídce u dialogu shopping - hodilo by se více zvýraznit, případně nějaká grafická ikona… Aby člověku bylo na první pohled jasné, že se nejedná o běžný dialog

Zasažení účastníci: #3

P3

N Není zřejmé, co je “Video” v nastavení zvuku. Navíc při zvednutí hlasitosti v položce Video se po kliknutí na “Apply” sama opět zresetuje na nejnižší možnou hodnotu.

Zasažení účastníci: všichni

P3

Page 17: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 17 z 34

N Mapa: Není poznat, kterým směrem se postava na mapě dívá. Nejde se pak zorientovat z mapy – například teď by bylo intuitivní se otočit o 180° a vydat se za žluou značkou X. Ale my nevíme kterým směrem je ve skutečném světě natočena.

Stačilo by přidat šipku, kam se postava na mapě právě dívá.

Zasažení účastníci: #4

P3

U Nastavení: U nastavení nejsou ikonky. Člověk si musí opravdu přečíst všechny texty, nejde najít například zvuk rychle pomocí třeba ikonky notička.

P4

Page 18: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 18 z 34

G Tvorba lektvaru: Při tvorbě lektvaru si musí uživatel počítat nahlas. Mozek člověka vnímá jinak, pokud v realitě doopravdy fyzicky provede nějakou akci, například 2x zatáhnout za provaz. A pokud ve hře jen klikne 2x klikne na tlačítko.

Hodilo by se nějaké počítadlo na obrazovce, kolikrát už akci provedl. (Jediný účastník, který vařil lektvar, byl #1.)

Zasažení účastníci: #1

P4

N Mapa: Postava hráče na mapě splývá s mapu, je málo výrazná. Vypadá jako socha, např. když stojí na náměstí, vypadá to, že je součástí mapového podkladu.

Mohla by se nějak rozanimovat nebo alespoň blikat, aby byla více výrazná

P4

N Mapa: Podle #4 byla mapa nepřehledná, měl potíže interpretovat informace z kresleného obrázeku do skutečného světa ve hře.

Zasažení účastníci: #4

P4

Page 19: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 19 z 34

Kapitola 5 - Závěr V provedeném testování jsme ve hře Kingdome Comes: Deliverance (Alpha Access) V0.3 objevili 29

chyb. Chyby jsou uvedeny v kapitole 4 Nálezy. Opravdu velmi zkušený hráč RPG (účatník #1) je

schopen hru hrát. Průměrní hráči však budou mít řadu problémů a záseků, které negativně ovlivní

jejich zážitek ze hry.

Systém obsahuje 9 problémů „priorita P1“ (4x Usability, 5x Gameplay), kde je velmi zásadně narušen

uživatelův průběh hrou a musí dlouho vymýšlet, jak potíž obejít.

Systém obsahuje 9 problémů „priority P2“ (5x Usability, 4x Gameplay), kde je narušena uživatelova

flow, ale dokáže si poměrně rychle najít cestičku „okolo“.

Systém obsahuje 7 problémů „priorita P3“ (5x Usability, 1x Gamplay, 1x Nezařazen), které nejsou

zásadní, ale zlepšili by zážitek ze hry.

Systém obsahuje 5 problémů „priorita P4“ (1x Usability, 1x Gameplay, 3x Nezařazen), které by

pomohli k tomu, že hráči by si opravdu chválili, jak je to ve hře dobře udělané.

Považujeme za nutné odstranit problémy „priorita P1“, a pokud možno i „priorita P2“.

Page 20: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 20 z 34

Přílohy Logy

Pretest

Posttest

Screener - vybraní účastníci

Page 21: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 21 z 34

Log - účastník 1

Ukol Cas Poznámky Komentáře

1 1:07 Bez problemu

2 2:05 Snazi se v dialogu vyskocit do nastaveni,aby nastavil hlasitost, nejde

2 2:55 Inventar projizdi a snazi se zabit slepic, nema cim...

2 3:15 Louci zapalil

2 3:51 Objevil obchodnika a rika mu o cloveku s bolavym brichem

3 7:30 Jde za babkou kořenárkou, ALE PRITOM NEDOSTAL QUEST

3 8:10 Nevi kam jit, pouzil mapu (poradili jsme ze do lesa)

3 9:34 Bloudi lesem

3 9:43 Narazil na babku korenarku

3 10:40 Snazi se v inventari najit quest

3 12:50 "X neco znaci v mape?" pta se

3 13:20 Jde za hospodskym

Nastavil si svuj

vlastni pointer

na babku

korenarku

3 13:46 Promlouva ve meste s hospodyni

3 16:00 napoveda - "Najdi chlapka s bolavym brichem"

3 19:00 Ziskal quest a nevsimnul si, ze mu to ukazuje nahore pointer

3 21:00 Promlouva se starostou a nevi kam jit aby vyresil quest

Page 22: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 22 z 34

3 21:40 Pripomneli jsme mu ze ma nahore pointer

3 22:45 Promlouva s babkou korenarkou uz s questem

3 23:32 Pouzil silu pri konverzaci

3 24:38:00 Dal si znacku do mapy kde by meli rust koprivy a jde za nimi

3 25:30:00 Je u kovare a hleda uhli

3 26:15:00 Nenasel uhli

3 27:00:00 Chodi kolem kopriv ale nevsima si (nevi ze je muze sebrat)

3 27:45:00 Kouka do inventare a checkuje quest

3 28:50:00 Promlouva opet se starostou

3 29:30:00 Nasel koprivu a sbira koprivy(Komentar - "Jo to musim nad nimi stat")

3 30:15:00 Nasel obchodnika

3 30:40:00 Prohlizi si moznosti, klikne na sell

3 31:00:00 Bez problemu prodal 5 kopriv

3 32:10:00 A koupil bodlaky?

Není jasné,

zda se

transakce

provedla a co

vlastně koupil

a co přišel

3 32:30:00 Kontroluje v inventari kolik ma ceho pro splneni ukolu

3 34:00:00 Promlouva s kovarem a zjistil

3 34:10:00 Kouka se do inventare jestli mu uhli nepribyo

Page 23: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 23 z 34

3 34:20:00 Promlouva s kovarem znovu, protoze mu uhli nepribylo

3 35:55:00 Nevsima si uhli , PORADIME MU

3 36:10:00 Sbira uhli

3 37:30:00 Hleda posledni uhli

3 37:40:00 Nasel ho v trave WOW

3 38:00:00 Nevsimul si ze mu BK mu jiz strhla 3 grose a pritom se boji ze ma malo -

2,5 grose

3 39:00:00 Mluvi s babkou korenarkou a SPLNIL quest

3 39:40:00 Je u alchymistickyho stolu a dela lek pro CBB

3 41:10:00 Cte alchymistickou knizku

3 41:20:00 Tvori lektvar (pocita nahlas)

3 41:55:00 Nasel hodiny

3 42:54:00 Vyrobil lektvar

3 42:10:00.0

00 Snazi se dostat od alchymistickeho stolu :D

3 42:45:00 Odesel

3 44:10:00 Nastavil si znacku k cloveku s bolavym brichem a jde za nim

3 44:50:00 Dokzal preskocit plot..napotreti

3 45:10:00 Komentar - "aa ty vole" (nastvany z plotu a obchazi dum)

3 46:20:00 U CBB a promlouva s nim

Page 24: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 24 z 34

Ukonci

Page 25: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 25 z 34

Log - účastník 2

Ukol Cas Poznámky Komentáře

1 0:40 Vstoupil do hry a seznamuje se s ovladanim Libi se mu grafika

2 1:10 Uz se seznamil

1:24 Nasel mapu

1:45 Jde do vesnice

2:10 Neni videt s kym mluvi...s rolnikem Pravdepodobne to neni quest]

3:05 Blouma vesnickou

Neoslovuje lidi... a stezuje si

na nastaveni grafiky(ikdyz

jsme se snazili ji preladit :D

3:30 Hraje si s mapou a hleda quest Prvni (neuspesny) pokus o

posunuti mapy

3 4:30 Snazi si nastavit hlasitost, bez problemu.. Pozastavil se nad polozkou

video(nebyl si jisty co to je)

5:44 Advanced graphics nasel az po chvili ruzne meni nastaveni

Stve ho ze neni slyset jiz v

nastaveni zmena hlasitosti

rovnou

7:45 Vracime se k ukolu 2..nenasel quest

9:20 Promlouva s kovarem a hleda quest(ktery je u CBB)

10:20 Myslel si ze zadny penize nema

11:50 Poradili jsme mu aby sel za CBB, ihned ho nasel a

promlouva s nim Nepreskakuje konverzaci Esc

4 14:20 Ziskal quest

15:50 Pochopil zadani questu, jde do lesa Nevi kudy do lesa

Page 26: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 26 z 34

16:40 Kouka se na mapu Neda se soupat, vadi mu to

17:40 Jde do lesa Narazil na konec mapy

18:19 Nevsim si ikonky v mape

18:33 Poradili jsme mu ze ma pointer nahore na kompasu

19:34 Potkal BK Vaha jakou moznost zvolit

22:30 Nevi jak se dostat do inventare(jak zjistit kolik ma clovek

penez) Chybi mu pro quest u BK

23:00 Vydava se do mesta ziskat penize NEJAK

23:30 Narazil na obchodnika a ihned ho nechal Nenapadlo ho, ze muze neco

prodat

23:44 Mluvi s hospodskou

25:10:00 Mysli si, ze CBB si vymyslel ze mu je blbe:D

25:20:00 Promlouva se starostou Dalsi quest odmitl:D

27:00:00 Nevi ze ma VUBEC naky veci

27:30:00 Chce neco prodat

Snazi se zmacknout Acko

dlouho a nakonec zmacknul E

spravne

28:40:00 Mysli si ze UZ prodal neco,ale bylo to v kosiku teprv Nakonec prodal a ma dostatek

penez pro BK

29:50:00 Došel za BK

32:00:00 Nevi kde by hledal ingredience a chodi po svete

33:30:00 Nápověda - uhlí se dá sehnat u kováře Nejdou mu vzit veci

34:00:00 Promlouva s kovarem, snazi se koupit COAL

Page 27: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 27 z 34

35:00:00 Nejde klikat na tlacitka v modu nakupovani

36:45:00 Prodava vsecko co muze, aby mel na uhli

36:50:00 "Já tomu moc nerozumim"

38:00:00 Snaha pomoct pri nakupu

39:00:00 Prochazi polozky nakupu Nevi jestli predmet stoji 0.1

nebo sedm predmetu stoji 0.1

41:00:00 KONEC

Page 28: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 28 z 34

Log - účastník 3

Ukol Cas Poznámky Komentáře

1 0:30 Zkousi ovladani a nemuze strilet ani bojovat

1:20 Vsimnul si staminy pri behani

2 1:57 Promlouva s rolnikem Nepreskakuje s

Esc

3:25 Promlouva se starostou

5:13 Hleda hospodu Nic zajimaveho o

klicich

5:23 Mluvi s kovarem Nic zajimaveho o

klicich

6:45 Promlouva s zenskou a povida mu o ztracenych klicich

8:02 Snazi se preskocit dialog a nejde mu to

9:30 Kovar promluva o klicich (po napovede)

11:30 Dialog u kovare - hra spadla

12:45 Hra znovu spuštěna

13:50 Dorazil zpátky ke starostovi

14:10 Jde ke kovari

14:35 Dorazil ke kováři, dialog

kovář mu řekne

"dívej se

pozorně"

16:05 Hleda truhlu, pta se starosty

"nebaví mě to"

nemůžu najít

truhlu (rozumněl

něco jiného,

nebo špatně

přečetl)

21:43 Nasel truhlu není vidět, že

dostal lockpick

22:50 Zlomil si klíč a chce další

22:20 Dostal klíč a neví o tom

Page 29: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 29 z 34

23:50 Zlomil si klíč a chce další

24:00:00 Dostal klíč

24:40:00 Truhla odemcena

25:18:00 Promlouva se starostou o klicich

27:00:00 Promlouva s kovarem (znacka)

28:40:00 Zkousi lockpickovat dvere u starosty

neví, že má

hledat dveře,

nejsou označeny

kam jít

29:00:00 Neni videt co dostal od starosty

29:45:00 Zkousi nastavit hudbu bez problemu...

30:30:00 Jde za obchodnikem..hleda ho Jak poznat

obchodníka?

32:00:00 Zacina nakupovat

33:10:00 Chvillku vahal a neslo mu to ale nakonec bez problemu koupil

i prodal

34:39:00 (A) v

nabídce

nefunguje

36:00:00.

000 Poslali jsme ho za shootmasterem

40:00:00 Hleda lucistnika

43:00:00 Nasel lucistnika

44:20:00 Nema penize, tak jde prodavat aby mohl strilet Vi kolik ma penez

45:30:00 Uz ma penize a jde se strilet

46:30:00 Prvni ma modry a jde to zkontrolovat protoze nevi a zmizel

mu luk

"Jsem se jako

trefil?", nejdou

vrátit instrukce,

když pokazil

minihru

47:15:00 KONEC

Zmáčknul "1"

místo "I", když

chtěl znovu nabít

luk a ono ho to

vyhodilo z

minihry

Page 30: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 30 z 34

Log - účastník 4

Ukol Cas Poznámky Komentáře Komentář participanta

1 0:20 Prohlizi si krajinu a zkousi ovladani

2:40 Promlouva s CBB

4:30 Jde za hostinskou..zmatene hleda

5:30 Kouknul do inventare a ihned

zavrel

6:30 Nejde mu promluvit s lidma(je

daleko) Nadava... (s touto

osobu neslo mluvit)

7:34 Vzdal hledani hostinsky, povida si

se starostou

9:40 Pockal na Jerryho Poznal ze byl Jerry na

zachode

11:22 Nastaveni hlasitosti Bez problemu

12:05 Mapu otevrel a dokaze se po ni

posouvat

14:10 Odmitl jit do lesu pro lek a snazi se

usvedcit Marianu

"Okej, tak nejdřív zkusím

najít tu ženskou, která by pro

něj mohla mít lék, ale

předpokládám, že mě pošle

do háje s tím, že neví, co to

bylo za jed, takže ho nebude

moct vyléčit, dokud

neusvědčim jakoby tu

Marianu, případně někoho

jinýho... Ale to se neví, no..."

16:05 Vsimnul si vlajecky ale ne pointru v

kompasu

16:20 Mluvi s babkou Obava se rict, ze hleda

lek pro Jerryho :D

18:20 Dostal quest od babky, najit

koprivu atd.

19:00 Nevi kde je inventar...na potreti

nasel quest log v inventari ..a jde hledat

ingredience

20:30 Sbira bez problemu koprivy

21:30 Nepamatuje si, kde najde bodlák ta informace není v

Page 31: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 31 z 34

logu ani nikde jinde

24:30:00 Nemuze najit bodlak, pta se babky

25:40:00

NAŠEL BODLÁK!!!! stojí u něj a

nejde sebrat (po chvíli se mu to

povedlo) "když ví člověk, co hledat,

tak se to hledá lépe"

27:38:00 U obchodnika nakupuje zbyle

bodlaky

Mysli ze nema penize a

nezaregistroval ze

neco koupil

28:10:00 Otázka: kolik mám peněz – vidí, že

je v mínusu

přitom nekoukal na

stav svých peněz, ale

na součet

probíhajícího obchodu

"abych si ten bodlák koupil,

tak budu muset něco

prodat"

29:51:00

pomocí klávesy X provedl obchod,

ale myslí si, že bodlák nekoupil,

znovu jde do obchodu nebylo zde znatelné

potvrzení

RADA od nás: počet peněz je v

modrém pásku v spodní části

"V modrým pásku... Jo

tadyhle?! To jsou jako

peníze, jo? Mhm, dobře..."

30:30:00 Hleda uhli v ohnistich, tam ale neni

32:18:00 Promlouva s kovarem a hleda uhli

Myslel, ze od nej

dostal uhli (ale

nedostal), koukal do

inventare

34:00:00 NASEL UHLI!!! ujistil se, že coal =

charcoal

38:00:00 S nasi pomoci nasel posledni uhli

hlásíme: vlaječka a erb

v kompasu míří na

stejné místo

39:10:00 Prinesl ingredience babce

39:40:00 baba kořenářka neřekne, jak

vyrobit lektvar, stále se jí ptá

40:20:00 Neni si jisty JAK a KDE varit lektvary Nevime, proc tu

minihru nejde spustit...

41:00:00 má problém začít s vařením, nic se

nezobrazuje

bug ve hře, asi po dvou

minutách neúspěšných

pokusů jsme test

raději ukončili

KONEC

Page 32: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 32 z 34

Pretest - účastník 1-5

Pre-test Participant 1 Participant 2 Participant 3 Participant 4 Participant 5

Co víš o Kingdom

Come: Deliverance?

videa, trailer,

design Pouze jméno

sledoval

aktivitu o

vydání hry na

internetu

O hře dříve

neslyšel, myslel

si ale, že půjde o

RPG.

Před rokem si

všimnul webové

stránky, kde hra

sbírala peníze na

vývoj této hry. Ví

že budou 3 díly.

Jaký máš vztah k PC

hrám a hrám

obecně?(Herní

platforma, kdy a proč

hraješ, ...)

PC, večer si

zahraje

Nemá rád

konzole. Má

rád "osobní

aktivitu v

bitvě" (to, že

on, může

ovlivnit

výsledek celé

bitvy). Hrál by

denně, kdyby

to šlo.

strategie, RPG,

někdy dávno

hrával Gothic,

hraje na PC

Hrál by více,

nicméně teď

nemá čas.

Hlavně hraje na

PC, méně na

PlayStation.

Hlavně hraje RPG

a také World of

Tank. Nyní nemá

čas. Preferuje

klávesnici a myš

Kdy jsi hrál naposled

nějaké RPG?

GTA 4 dny

zpátky plus

hraje

Elderscrolls

online a hodně

hrál Skyrim

Lineage před 4

lety. před 1.5 roku

Právě hraje

Pillars of

Eternity,

předtím Baldur's

Gate.

Naposledy hrál v

listopadu 2014

Risen 3.

Jakou studuješ školu,

obor?

FEL, OI,

počítačové

vědy

ČVUT-FEL,

KME - sítě FEL OI

bývalý student

ČVUT FIT

ČVUT-FEL, OI -

Soft. systémy

Page 33: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 33 z 34

Posttest - účastník 1-5

Post-test Participant 1 Participant 2 Participant 3 Participant 4 Participant 5

Jak se ti to líbilo?

dobré (grafika,

středověk)

No grafika

pěkná, ale

jinak strašný

ovládání,

debilní mapa,

nevěděl jsem,

že vůbec byl

inventář...

Super. Hra se

musí hrát delší

dobu v kuse,

aby si ji užil.

Nevýrazný

svět, občas si

"připadal jako

blbec". Líbilo.

Co ti dělalo

největší potíže?

Ztrácel se

nevěděl, kam

má běžet.

Orientace -

nevšiml si

kompasu

GUI v obchodu

("velmi mnoho

sprostých

nadávek")

Nepřečetl si

titulky, když mu

kovář říkal o

truhle.

Obtížná

orientace v

prostoru, plus

při hledání uhlí

byl vyloženě

naštvaný, když

se mu nedařilo

najít pátý

kousek.

Nevěděl, že může

oslovit lidi, když nad

sebou neměli jméno

nebo roli. Když by

jich bylo víc, není si

jistý jakou přesně

oslovil (oslovuje??).

"Zapamatovat si, co

se po mě chce v

questu".

Co by si změnil?

Inventář

nepoužíval drag

n drop. V

košíku Esc pro

zpět a Y pro

exit, zmatečné,

že jsou to dvě

různé věci. V

obchodu jsou

postavy v

oddělených

slotech musí

přepínat.

Nebylo ve hře

sledovat kam

mám jít.

Ovládání v

obchodu.

Okamžité

změny

hlasitosti

hudby v

nastavení.

Postava, pokud

s ní znovu začnu

konverzaci, mě

znovu pozdraví,

jak kdybych s ní

nikdy předtím

nemluvil.

Inventář -

nemohl najít,

kolik má peněz

- viděl ikonku

"mince", ale

nespojil si ji s

aktuálním

počtem peněz.

Také dlouhý

seznam věcí jej

nutil skrolovat.

Navrhoval, že by

postava mohla

zčervenat, aby

člověk věděl, že

promluví právě s

touto osobou (např.

v davu lidí) apod.

Apply v ovládání by

člověka mělo vrátit

do hlavního menu.

Dynamičtější hudba.

Kovář by mohl ŘÍCT

talk to me later a ne

pouze titulek.

("Reaguji spíše na

to, když na mě

někdo promluví").

Doporučil bys

někomu, aby si

tuto hru zahrál?

Fanouškům

zaklínače.

Lidem, co mají

rádi středověké

téma.

Kdyby měl rád

RPGečka, jinak

ne Určitě Ano

Page 34: Kingdom Come: Deliverance (Alpha Access)hcisemestralky.felk.cvut.cz/system/mems/7784/original/begerjak... · 4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než

KINGDOM COME: DELIVERANCE (ALPHA ACCESS)

ČVUT v Praze 34 z 34

Screener Výsledky pouze od vyfiltrovaných účastníků testování

číslo

účastníka intenzita hraní

žánry, co

hraje

nejvíce

hraje progamer na čem hraje úroveň AJ

#5

Příležitostně si

zahraji

Strategie,

RPG, Závodní RPG Ne

Klávesnici a

myš S anglickými titulky

#3

Příležitostně si

zahraji RPG Gothic3 Ne

Klávesnici a

myš

S anglickým

dabingem (bez

titulků)

#1

Pravidelně hraji

(několikrát týdně)

Střílečky,

Strategie,

RPG,

Adventury

Elder

Scrolls, GTA Nevím

Klávesnici a

myš

S anglickým

dabingem (bez

titulků)

#2

Pravidelně hraji

(několikrát týdně)

Střílečky,

Závodní,

World of

Tanks

World of

Tanks Nevím

Klávesnici a

myš

S anglickým

dabingem (bez

titulků)

#4

Pravidelně hraji

(několikrát týdně)

Střílečky,

Strategie,

RPG,

Adventury Strategie Ne

Klávesnici a

myš S anglickými titulky


Recommended