Kingdom Come: Deliverance (Alpha Access) Testování použitelnosti s uživateli v laboratoři použitelnosti
ČVUT v Praze
19. května 2015
Pavel Valach, Barbora Suchanová
Pavel Černý, Jakub Begera
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 2 z 34
Kapitola 1 - Úvod
Popis programu
Kingdom Come: Deliverance je RPG hra z období středověku zaměřující se především na příběhové
questy, komunikaci s NPCs (non-player characters) a minihry, například odemykání zámků a střelba z
luku.
Hra byla testována ve verzi V0.3 (alpha)
Cíl testu
Cílem testování bylo pro nás studenty vyzkoušet si testování použitelnosti v počítačových hrách.
Dalším cílem pak bylo nalezení chyb použitelnosti hry KCD v rané fázi vývoje. Zaměřovali jsme se
hlavně na plnění questů, práci s inventářem, obchodování, orientaci v herním prostoru a minihry.
Cílová skupina
Hra je pro zkušené hráče RPG, stejně tak může být první hrou tohoto žánru u běžných hráčů a to díky
své marketingové kampani na Kickstarteru, která oslovila velký počet i běžných hráčů.
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 3 z 34
Kapitola 2 - Metodika
Plánovaná skupina účastníků testování
Účastníci testování by měli být jak hráči, kteří si zahrají jednou týdně, tak lidé, kteří hrají pravidelně
cca dvě hodiny denně. Dále by měli být zastoupeni jak hráči RPG, tak i lidé, kteří RPG nehrají.
Účastníci by měli být zvyklí hrát na klávesnici a myši, protože jsme měli možnost testovat jen na
těchto periferiích. Účastník musí umět poměrně dobře anglicky - alespoň tak, aby zvládal pobírat
příběhovou linii questů, která je v angličtině s anglickými titulky.
Z testování vynecháváme profesionální hráče (progamery), protože mají k hraní poněkud odlišný
vztah a KCD je hra pro jednoho hráče, nikoliv hra na turnaje v PC hrách.
Výběr účastníků testování
Na sociální síť Facebook jsme vyvěsili odkaz na formulář s dotazníkem Screener. Po získání cca 30
záznamů jsme zvolili 5 lidí tak, že všichni splňovali, že hrají hry alespoň v angličtině s anglickými
titulky. 2 účastníky jsme vybrali ze skupiny “příležitostně si zahraji”, 3 účastníky ze skupiny
“pravidelně hraji (několikrát týdně)”. V rámci každé této skupiny jsme se pak snažili zvolit vždy
jednoho, co nejvíce hraje RPG a jednoho, co nejvíce hraje pokud možno nějaký jiný žánr. Dále pak byl
tento výběr ještě korigován časovou flexibilitou účastníků v den testování. Viz. výsledky dotazníku
Screener (v příloze).
Průběh testu
Testování probíhalo v laboratoři použitelnosti (usability lab) v budově Fakulty elektrotechnické ČVUT
na Karlově náměstí v Praze.
Laboratoř sestává ze dvou oddělených místností. V jedné z těchto místností byl účastník testování
(dále jen účastník) a hrál hru na PC, v druhé pak byli organizátoři testování (dále jen organizátor) a ti
účastníka sledovali pomocí kamery zaměřené na obličej uživatele a dále sledovali přímý přenos
obrazovky účastníka. Oddělená místnost slouží k tomu, aby účastník neměl možnost se organizátorů
ptát a více se simulovalo skutečné prostředí, kdy doma bude hrát pouze sám.
Na začátku každého testu byl účastník zasvěcen do toho, jak vše bude probíhat, a organizátor s ním
prošel dotazník Pre-Test, aby získal představu o zkušenostech účastníka a byl tak schopen správně
interpretovat nalezené chyby a účastníkovo chování.
Pak následoval samotný test, kdy uživatel měl seznam úkolů, které postupně plnil. Případně mu byly
zadávány úkoly “za běhu” organizátory pomocí mikrofonu.
Po testu organizátor prošel s účastníkem dotazník Post-Test a probral nejasnosti organizátorů
ohledně interpretace nalezených chyb a probrání postřehů účastníka.
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 4 z 34
Seznam úkolů
Účastník testování na začátku testu obdržel 8 úkolů lícem dolů. Ty postupně plnil. Úkoly a jejich
odhadovaná doba plnění jsou: (text kurzívou viděli jen organizátoři)
1. Seznam se s ovládáním a prohlédni si svět. Oznam až budeš připravený jít dále. (30s)
2. Ve hře je příběh. Zkus najít jak ho odstartovat a začni ho. (2 min)
3. Uprav si nastavení hlasitosti hudby a hlasu, tak aby ti vyhovovalo (například pokud přes
hudbu neslyšíš dialog). (Účastníkovi jsme do hry schválně přednastavili velmi hlasitou hudbu
a skoro neslyšitelné rozhovory) (2min)
4. Zjisti, co je cílem mise. (Pokud začne misi u někoho jiného než pán s bolavým břichem,
posíláme ho za pánem s bolavým břichem) (4min)
5. Pokus se misi splnit. (dojít za babkou kořenářkou) (2min)
6. Pokračuj v plnění mise (natrhej uvedené květiny) (Po té, co najde druhou květinu ho
zastavíme)
7. Dojdi za obchodníkem (řekneme, kde je) a kup si bodlák. Prodej cokoli, aby jsi na bodlák měl
dost peněz. (10min)
8. Jdi za babkou a identifikuj zda jsi misi dokončil, případně, co ti pro splnění mise chybí.
(10min)
Další úkoly zadávané organizátory za běhu, některým účastníkům pokud zbyl čas:
1. Jdi za kovářem a nauč se lockpick
2. Vyzkoušej si střelbu z luku (jdi za shootmasterem, poradili jsme mu kam)
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 5 z 34
Kapitola 3 - Testování
Profil účastníků
Na základě dotazníku Pretest (v příloze) a toho jak na nás během testu působili.
ID popis účastníka
#1 Velmi zkušený hráč zejména různých RPG a GTA, hraje prakticky denně. KCD zná. Viděl
několik trailerů a videí.
#2 Zkušený hráč hráč jiného žánru než RPG, hraje World of Tanks, střílečky a závodní hry. Hraje denně. O KCD skoro nic neví.
#3 Zkušený hráč RPG, v současnosti hraje jen příležitostně. Sledoval kampaň KCD.
#4 Hráč zejména izometrických-RPG. Hraje často. O KCD nic neví. Během celého testování byl dost ve stresu.
#5 Hráč RPG, v současnosti hraje jen příležitostně. Sledoval kampaň KCD
Všichni účastníci jsou studenti nebo bývalí studenti ČVUT v oboru informatika.
Záznamy z testování Viz. logy (v příloze) a video v odkazu
https://goo.gl/ew2dJm
Výsledky testování jsou shrnuty v kapitole 4 – Nálezy.
Zpětná vazba od účastníků
Na základě rozhovorů a dotazníku Post-test (v příloze). Výsledky jsou opět reportovány v kapitole 4 -
Nálezy
Potíže dělalo:
Hráči se ztráceli a nevěděli kam běžet.
Měli problémy s orientací, nevšimli si kompasu. (2 účastníci)
Není úplně jasné koho zrovna oslovuje, když je více NPC u sebe. Osoba by mohla mít nad
sebou jméno případně celé, nějak změnit barvu, když s ní chci mluvit. Pokud se mnou osoba
nechce mluvit ať mi to řekne i nahlas “Talk to me later” - titulku si někdy nevšimnu (1
účastník).
Postava pokud s ním promluvím znovu mě pozdraví, jak kdybych s ní předtím nikdy nemluvil.
Opět zmatečné, s kterou postavou jsem mluvil. (1 účastník)
Při hledání páteho kousku uhlí v questu výroba lektvaru byl opravdu naštvaný, že ho nemůže
najít. (1 účastník přímo zmínil, ale i u ostatních během testu to dělalo problémy)
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 6 z 34
GUI obchodu je dost nepřehledné, zejména to, že je vše v záložkách a člověk musí pořád
přepínat mezi nimi, místo toho aby vše viděl najednou. (3 účastníci)
Inventář nepoužívá drag'n'drop. Je to dlouhý seznam, člověk musí pořád skrolovat.
V košíku je Esc pro zpět a Y pro exit, což je zmatečné.
V questu lockpicking u kováře přehlédl v dialogu, že má hledat truhlu a pak netušil, co má
dělat.
Celkový dojem:
Grafika u hry je nádherná. Pro jednoho účastníka je však svět nevýrazný (#4).
Kromě účastníka #4, který by hru všichni doporučili všem hráčům RPG. Účastník #4 si připadal jako
blbec a hru by nedoporučil nikomu
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 7 z 34
Kapitola 4 - Nálezy Při testování byly zjištěny níže uvedené problémy. U každého je uveden popis, případně návrh
řešení, kód odkazující do testů a priorita, jak moc je nutné problém odstranit.
Kódy se dělí na:
U - Použitelnost
G - Gameplay
N - Ostatní, nezařazené
Priority pak jsou:
P1 - Kritické, je třeba jim věnovat pozornost
P2 - Půjde to, ale zdrží to uživatele
P3 - Nevypadá to dobře
P4 - Věc POV - záleží na pohledu daného uživatele/hráče
Kód Popis Priorita
U Obchod: Je problém určit, kolik má hráč právě u sebe peněz.
#4 byl při obchodování zmaten mezisoučtem částky, co kupuje a co prodává - hledal aktuální stav peněz tam. Ikonky s grošem si kupodivu všiml, ale nespojil si ji se svojí finanční situací.
Zasažení účastníci: hlavně #4, ale i ostatní
P1
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 8 z 34
U Obchod: Tlačítka pro potvrzení nákupu neodpovídají těm, co musím zmáčknout klávesnici a nelze na ně ani klikat.
Tlačítko s nápisem A se ve skutečnosti aktivuje stisknutím písmena E apod. Kliknutí myší neudělá nic.
Zasažení účastníci: všichni
P1
U Ovládání: Hráči neví, že je ve hře mapa.
Na herní obrazovce chybí nějaké info, že ve hře existuje něco jako mapa, případně zobrazená minimapa někde v rohu po celou dobu hraní.. Někteří účastníci ji našli přes inventář nebo díky znalosti podobných her, kde se mapa zobrazuje klávesou M.
Zasažení účastníci: hlavně #3
P1
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 9 z 34
U Ovládání: V nápovědě je těžké rozlišit mezi klávesami 1 (jednička) a I (velké i).
To následně vede k chybám, zmáčknu I a přitom jsem měl mačkat 1 “místo toho, aby hráč dobil šíp, si omylem schoval luk a neví, co se stalo” - viz gameplay chyby, Střelba z luku.
Zasažení účastníci: #3
P1
G Nutná velká blízkost a přesnost pro sběr bodláků (a jiných rostlin).
P1
G Nelze scrollovat mapu myší.
Lze to pouze pomocí šipek, a proto si většina myslela, že nejde posouvat vůbec.
P1
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 10 z 34
G Jak zacházet s paklíčem: V misi “nauč se lockpicking” u kováře kovář po dotazu hráče “Naučíte mě to?” řekne “Určitě, dávej pozor. Támhle mám truhlu, na ní si to můžeš vyzkoušet” a dál se s hráčem nebaví.
Takže si uživatel myslí, že postava kováře bude něco předvádět, při tom kovář ho poslal k truhle a dál ho hráč nezajímá. Zároveň hráč po tomto dotazu dostane lockpicker, aniž by o tom věděl.
Zasažení účastníci: #1, #4
P1
G Střelba z luku: Po dokončení minihry už nelze znovu vidět instrukce pro minihru. Uživatel si omylem otevřel inventář a minihra skončila. Po druhé už neviděl nápovědu.
#3 přišel omylem o luk zmáčknutím jedničky (jediný účastník, co střílel z luku). Při pokazení minihry už nelze znovu zobrazit instrukce.
Zasažení účastníci: #3
P1
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 11 z 34
G Tvorba lektvaru: #4 ani po sehnání všech ingrediencí a rozmluvě s bábou nemohl začít vařit svůj nápoj, nebylo možné “použít” herbář. To následně vedlo k záseku a předčasnému ukončení testu.
Rozumíme, že je to neduh technické alfaverze hry.
Zasažení účastníci: #4
P1
U Obchod/výměna věcí: Žádná zpětná vazba, pokud nějaká osoba dává něco hlavnímu hrdinovi nebo naopak pokud hlavni hrdina něco prodává. Uživatel si není jistý zda transakce proběhla, případně si vůbec nevšimne, že něco předal (např. 3 groše pro babku kořenářku při získání questu, věci v inventáři, lockpicky při odemykání). Bylo by dobré doplnit i zpětnou vazbu, pokud nic od postavy nedostanu: v misi “promluvit si s kovářem o uhlí” lidé předpokládají, že jej dostali a musí si to kontrolovat později v inventáři (kde zjistí, že nedostali nic).
Zasažení účastníci: všichni
P2
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 12 z 34
U Obchod: Na konci obchodování chybí zpětná vazba o koupi; obchod zmizí stejným způsobem, jako by z něj člověk bez nakoupení odešel.
#1 si musel po transakci v inventáři ověřit, že věci od obchodníka skutečně koupil, #4 si zprvu po stisknutí tlačítka pro nákup myslel, že věci nekoupil.
Zasažení účastníci: hlavně #1, #4
P2
U Nastavení: Nastavení hudby je třeba potvrdit kliknutím na “Apply” a poté “Yes”. A zároveň když dávám Apply, tak zmizí hodnoty a nepamatuji si, co vlastně už potvrzuji
Stačilo by ponechat zobrazené hodnoty z předchozího kroku a změnit jen RESET-APPLY-BACK na pply changes?-YES-NO
Zasažení účastníci: všichni
P2
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 13 z 34
U Kompas: Symbol erbu, který značí aktuální cíl(e) posouvá se na kompasu a občas je skrytý úplně, není viditelný na první pohled.
Zasažení účastníci: všichni
P2
U Rozhovory/questy: Nelze poznat, zda už hráč od postavy dostal quest, nebo si s ní pořád jen povídal. Chybí něco jako hláška „získán nový úkol“ po dokončení dialogu.
P2
U Rozhovory: Není zřejmé, jak přeskočit dialog. Nikde není zobrazeno, že lze zmáčknout klávesu „Esc“ pro rychlé přeskočení.
Uživatelé zběsile buší do klávesnice, což situaci nepomáhá.
Zasažení účastníci: hlavně #3, #5
P2
G Nelze snadno přeskakovat ploty.
Jeden příklad za všechny: #1 po několikátém nepodařeném pokusu “áá tyvole” a je naštvaný.
Zasažení účastníci: všichni
P2
G Návody obecně (lockpicking, střelba z luku) nejsou stručné. Musím to dlouho číst než to pochopím.
Návod by se mohl dát do menšího tutoriálu, kde by bylo krok za krokem ukázáno, jak se danou věc naučit/zvládnout.
P2
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 14 z 34
G Uhlí u kováře: V misi “posbírej uhlí u kováře” není těžké přehlédnout uhlí na zemi; hráč jej pak hledá někde v krbu, míse a podobně. Stejně tak byl problém najít poslední 5. kus uhlí.
Bylo by lepší dát víc než přesně požadovaný počet, nebo kousky umístit tak, aby je bylo lépe vidět. Na druhou stranu je pravda, že si uhlí může hráč také koupit - u koho jiného než u kováře.
Zasažení účastníci: #1, #4
P2
G Střelba z luku: Není jasné, kam šíp letěl. P2
U Questlog: Pro lepší představu o rostlinách/předmětech chybí v questlogu obrázky předmětů.
P3
U Kompas: Značka aktuálního cíle v kompasu je odlišná od značky na mapě (měla by být stejná nebo mít alespoň stejnou barvu).
P3
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 15 z 34
U Rozhovory: Žádná zpětná hlasová vazba, pokud se osoba nechce bavit, objeví se jen hláška “I am busy, can’t you see” nebo obdobná. Tato hláška však není nadabovaná. Uživatelé, kteří umí dobře anglicky pouze poslouchají a titulkům nemusí vždy věnovat pozornost.
Nejspíš kvůli nekompletnímu dabingu v alfa verzi Zasažení účastníci: #5
P3
U Chybí identifikace lidí např. jména, role při přiblížení k určité osobě.
P3
U Nelze vyskočit během dialogu (např. do nastavení zvuku apod.) jednou rychlou akcí. Musím projít celý dialog a až k rozloučení se s postavou
P3
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 16 z 34
G Není jasné, jak ve hře poznat obchodníka.
Odlišuje se akorát tím, že má v nabídce u dialogu shopping - hodilo by se více zvýraznit, případně nějaká grafická ikona… Aby člověku bylo na první pohled jasné, že se nejedná o běžný dialog
Zasažení účastníci: #3
P3
N Není zřejmé, co je “Video” v nastavení zvuku. Navíc při zvednutí hlasitosti v položce Video se po kliknutí na “Apply” sama opět zresetuje na nejnižší možnou hodnotu.
Zasažení účastníci: všichni
P3
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 17 z 34
N Mapa: Není poznat, kterým směrem se postava na mapě dívá. Nejde se pak zorientovat z mapy – například teď by bylo intuitivní se otočit o 180° a vydat se za žluou značkou X. Ale my nevíme kterým směrem je ve skutečném světě natočena.
Stačilo by přidat šipku, kam se postava na mapě právě dívá.
Zasažení účastníci: #4
P3
U Nastavení: U nastavení nejsou ikonky. Člověk si musí opravdu přečíst všechny texty, nejde najít například zvuk rychle pomocí třeba ikonky notička.
P4
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 18 z 34
G Tvorba lektvaru: Při tvorbě lektvaru si musí uživatel počítat nahlas. Mozek člověka vnímá jinak, pokud v realitě doopravdy fyzicky provede nějakou akci, například 2x zatáhnout za provaz. A pokud ve hře jen klikne 2x klikne na tlačítko.
Hodilo by se nějaké počítadlo na obrazovce, kolikrát už akci provedl. (Jediný účastník, který vařil lektvar, byl #1.)
Zasažení účastníci: #1
P4
N Mapa: Postava hráče na mapě splývá s mapu, je málo výrazná. Vypadá jako socha, např. když stojí na náměstí, vypadá to, že je součástí mapového podkladu.
Mohla by se nějak rozanimovat nebo alespoň blikat, aby byla více výrazná
P4
N Mapa: Podle #4 byla mapa nepřehledná, měl potíže interpretovat informace z kresleného obrázeku do skutečného světa ve hře.
Zasažení účastníci: #4
P4
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 19 z 34
Kapitola 5 - Závěr V provedeném testování jsme ve hře Kingdome Comes: Deliverance (Alpha Access) V0.3 objevili 29
chyb. Chyby jsou uvedeny v kapitole 4 Nálezy. Opravdu velmi zkušený hráč RPG (účatník #1) je
schopen hru hrát. Průměrní hráči však budou mít řadu problémů a záseků, které negativně ovlivní
jejich zážitek ze hry.
Systém obsahuje 9 problémů „priorita P1“ (4x Usability, 5x Gameplay), kde je velmi zásadně narušen
uživatelův průběh hrou a musí dlouho vymýšlet, jak potíž obejít.
Systém obsahuje 9 problémů „priority P2“ (5x Usability, 4x Gameplay), kde je narušena uživatelova
flow, ale dokáže si poměrně rychle najít cestičku „okolo“.
Systém obsahuje 7 problémů „priorita P3“ (5x Usability, 1x Gamplay, 1x Nezařazen), které nejsou
zásadní, ale zlepšili by zážitek ze hry.
Systém obsahuje 5 problémů „priorita P4“ (1x Usability, 1x Gameplay, 3x Nezařazen), které by
pomohli k tomu, že hráči by si opravdu chválili, jak je to ve hře dobře udělané.
Považujeme za nutné odstranit problémy „priorita P1“, a pokud možno i „priorita P2“.
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 20 z 34
Přílohy Logy
Pretest
Posttest
Screener - vybraní účastníci
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 21 z 34
Log - účastník 1
Ukol Cas Poznámky Komentáře
1 1:07 Bez problemu
2 2:05 Snazi se v dialogu vyskocit do nastaveni,aby nastavil hlasitost, nejde
2 2:55 Inventar projizdi a snazi se zabit slepic, nema cim...
2 3:15 Louci zapalil
2 3:51 Objevil obchodnika a rika mu o cloveku s bolavym brichem
3 7:30 Jde za babkou kořenárkou, ALE PRITOM NEDOSTAL QUEST
3 8:10 Nevi kam jit, pouzil mapu (poradili jsme ze do lesa)
3 9:34 Bloudi lesem
3 9:43 Narazil na babku korenarku
3 10:40 Snazi se v inventari najit quest
3 12:50 "X neco znaci v mape?" pta se
3 13:20 Jde za hospodskym
Nastavil si svuj
vlastni pointer
na babku
korenarku
3 13:46 Promlouva ve meste s hospodyni
3 16:00 napoveda - "Najdi chlapka s bolavym brichem"
3 19:00 Ziskal quest a nevsimnul si, ze mu to ukazuje nahore pointer
3 21:00 Promlouva se starostou a nevi kam jit aby vyresil quest
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 22 z 34
3 21:40 Pripomneli jsme mu ze ma nahore pointer
3 22:45 Promlouva s babkou korenarkou uz s questem
3 23:32 Pouzil silu pri konverzaci
3 24:38:00 Dal si znacku do mapy kde by meli rust koprivy a jde za nimi
3 25:30:00 Je u kovare a hleda uhli
3 26:15:00 Nenasel uhli
3 27:00:00 Chodi kolem kopriv ale nevsima si (nevi ze je muze sebrat)
3 27:45:00 Kouka do inventare a checkuje quest
3 28:50:00 Promlouva opet se starostou
3 29:30:00 Nasel koprivu a sbira koprivy(Komentar - "Jo to musim nad nimi stat")
3 30:15:00 Nasel obchodnika
3 30:40:00 Prohlizi si moznosti, klikne na sell
3 31:00:00 Bez problemu prodal 5 kopriv
3 32:10:00 A koupil bodlaky?
Není jasné,
zda se
transakce
provedla a co
vlastně koupil
a co přišel
3 32:30:00 Kontroluje v inventari kolik ma ceho pro splneni ukolu
3 34:00:00 Promlouva s kovarem a zjistil
3 34:10:00 Kouka se do inventare jestli mu uhli nepribyo
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 23 z 34
3 34:20:00 Promlouva s kovarem znovu, protoze mu uhli nepribylo
3 35:55:00 Nevsima si uhli , PORADIME MU
3 36:10:00 Sbira uhli
3 37:30:00 Hleda posledni uhli
3 37:40:00 Nasel ho v trave WOW
3 38:00:00 Nevsimul si ze mu BK mu jiz strhla 3 grose a pritom se boji ze ma malo -
2,5 grose
3 39:00:00 Mluvi s babkou korenarkou a SPLNIL quest
3 39:40:00 Je u alchymistickyho stolu a dela lek pro CBB
3 41:10:00 Cte alchymistickou knizku
3 41:20:00 Tvori lektvar (pocita nahlas)
3 41:55:00 Nasel hodiny
3 42:54:00 Vyrobil lektvar
3 42:10:00.0
00 Snazi se dostat od alchymistickeho stolu :D
3 42:45:00 Odesel
3 44:10:00 Nastavil si znacku k cloveku s bolavym brichem a jde za nim
3 44:50:00 Dokzal preskocit plot..napotreti
3 45:10:00 Komentar - "aa ty vole" (nastvany z plotu a obchazi dum)
3 46:20:00 U CBB a promlouva s nim
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 24 z 34
Ukonci
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 25 z 34
Log - účastník 2
Ukol Cas Poznámky Komentáře
1 0:40 Vstoupil do hry a seznamuje se s ovladanim Libi se mu grafika
2 1:10 Uz se seznamil
1:24 Nasel mapu
1:45 Jde do vesnice
2:10 Neni videt s kym mluvi...s rolnikem Pravdepodobne to neni quest]
3:05 Blouma vesnickou
Neoslovuje lidi... a stezuje si
na nastaveni grafiky(ikdyz
jsme se snazili ji preladit :D
3:30 Hraje si s mapou a hleda quest Prvni (neuspesny) pokus o
posunuti mapy
3 4:30 Snazi si nastavit hlasitost, bez problemu.. Pozastavil se nad polozkou
video(nebyl si jisty co to je)
5:44 Advanced graphics nasel az po chvili ruzne meni nastaveni
Stve ho ze neni slyset jiz v
nastaveni zmena hlasitosti
rovnou
7:45 Vracime se k ukolu 2..nenasel quest
9:20 Promlouva s kovarem a hleda quest(ktery je u CBB)
10:20 Myslel si ze zadny penize nema
11:50 Poradili jsme mu aby sel za CBB, ihned ho nasel a
promlouva s nim Nepreskakuje konverzaci Esc
4 14:20 Ziskal quest
15:50 Pochopil zadani questu, jde do lesa Nevi kudy do lesa
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 26 z 34
16:40 Kouka se na mapu Neda se soupat, vadi mu to
17:40 Jde do lesa Narazil na konec mapy
18:19 Nevsim si ikonky v mape
18:33 Poradili jsme mu ze ma pointer nahore na kompasu
19:34 Potkal BK Vaha jakou moznost zvolit
22:30 Nevi jak se dostat do inventare(jak zjistit kolik ma clovek
penez) Chybi mu pro quest u BK
23:00 Vydava se do mesta ziskat penize NEJAK
23:30 Narazil na obchodnika a ihned ho nechal Nenapadlo ho, ze muze neco
prodat
23:44 Mluvi s hospodskou
25:10:00 Mysli si, ze CBB si vymyslel ze mu je blbe:D
25:20:00 Promlouva se starostou Dalsi quest odmitl:D
27:00:00 Nevi ze ma VUBEC naky veci
27:30:00 Chce neco prodat
Snazi se zmacknout Acko
dlouho a nakonec zmacknul E
spravne
28:40:00 Mysli si ze UZ prodal neco,ale bylo to v kosiku teprv Nakonec prodal a ma dostatek
penez pro BK
29:50:00 Došel za BK
32:00:00 Nevi kde by hledal ingredience a chodi po svete
33:30:00 Nápověda - uhlí se dá sehnat u kováře Nejdou mu vzit veci
34:00:00 Promlouva s kovarem, snazi se koupit COAL
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 27 z 34
35:00:00 Nejde klikat na tlacitka v modu nakupovani
36:45:00 Prodava vsecko co muze, aby mel na uhli
36:50:00 "Já tomu moc nerozumim"
38:00:00 Snaha pomoct pri nakupu
39:00:00 Prochazi polozky nakupu Nevi jestli predmet stoji 0.1
nebo sedm predmetu stoji 0.1
41:00:00 KONEC
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 28 z 34
Log - účastník 3
Ukol Cas Poznámky Komentáře
1 0:30 Zkousi ovladani a nemuze strilet ani bojovat
1:20 Vsimnul si staminy pri behani
2 1:57 Promlouva s rolnikem Nepreskakuje s
Esc
3:25 Promlouva se starostou
5:13 Hleda hospodu Nic zajimaveho o
klicich
5:23 Mluvi s kovarem Nic zajimaveho o
klicich
6:45 Promlouva s zenskou a povida mu o ztracenych klicich
8:02 Snazi se preskocit dialog a nejde mu to
9:30 Kovar promluva o klicich (po napovede)
11:30 Dialog u kovare - hra spadla
12:45 Hra znovu spuštěna
13:50 Dorazil zpátky ke starostovi
14:10 Jde ke kovari
14:35 Dorazil ke kováři, dialog
kovář mu řekne
"dívej se
pozorně"
16:05 Hleda truhlu, pta se starosty
"nebaví mě to"
nemůžu najít
truhlu (rozumněl
něco jiného,
nebo špatně
přečetl)
21:43 Nasel truhlu není vidět, že
dostal lockpick
22:50 Zlomil si klíč a chce další
22:20 Dostal klíč a neví o tom
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 29 z 34
23:50 Zlomil si klíč a chce další
24:00:00 Dostal klíč
24:40:00 Truhla odemcena
25:18:00 Promlouva se starostou o klicich
27:00:00 Promlouva s kovarem (znacka)
28:40:00 Zkousi lockpickovat dvere u starosty
neví, že má
hledat dveře,
nejsou označeny
kam jít
29:00:00 Neni videt co dostal od starosty
29:45:00 Zkousi nastavit hudbu bez problemu...
30:30:00 Jde za obchodnikem..hleda ho Jak poznat
obchodníka?
32:00:00 Zacina nakupovat
33:10:00 Chvillku vahal a neslo mu to ale nakonec bez problemu koupil
i prodal
34:39:00 (A) v
nabídce
nefunguje
36:00:00.
000 Poslali jsme ho za shootmasterem
40:00:00 Hleda lucistnika
43:00:00 Nasel lucistnika
44:20:00 Nema penize, tak jde prodavat aby mohl strilet Vi kolik ma penez
45:30:00 Uz ma penize a jde se strilet
46:30:00 Prvni ma modry a jde to zkontrolovat protoze nevi a zmizel
mu luk
"Jsem se jako
trefil?", nejdou
vrátit instrukce,
když pokazil
minihru
47:15:00 KONEC
Zmáčknul "1"
místo "I", když
chtěl znovu nabít
luk a ono ho to
vyhodilo z
minihry
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 30 z 34
Log - účastník 4
Ukol Cas Poznámky Komentáře Komentář participanta
1 0:20 Prohlizi si krajinu a zkousi ovladani
2:40 Promlouva s CBB
4:30 Jde za hostinskou..zmatene hleda
5:30 Kouknul do inventare a ihned
zavrel
6:30 Nejde mu promluvit s lidma(je
daleko) Nadava... (s touto
osobu neslo mluvit)
7:34 Vzdal hledani hostinsky, povida si
se starostou
9:40 Pockal na Jerryho Poznal ze byl Jerry na
zachode
11:22 Nastaveni hlasitosti Bez problemu
12:05 Mapu otevrel a dokaze se po ni
posouvat
14:10 Odmitl jit do lesu pro lek a snazi se
usvedcit Marianu
"Okej, tak nejdřív zkusím
najít tu ženskou, která by pro
něj mohla mít lék, ale
předpokládám, že mě pošle
do háje s tím, že neví, co to
bylo za jed, takže ho nebude
moct vyléčit, dokud
neusvědčim jakoby tu
Marianu, případně někoho
jinýho... Ale to se neví, no..."
16:05 Vsimnul si vlajecky ale ne pointru v
kompasu
16:20 Mluvi s babkou Obava se rict, ze hleda
lek pro Jerryho :D
18:20 Dostal quest od babky, najit
koprivu atd.
19:00 Nevi kde je inventar...na potreti
nasel quest log v inventari ..a jde hledat
ingredience
20:30 Sbira bez problemu koprivy
21:30 Nepamatuje si, kde najde bodlák ta informace není v
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 31 z 34
logu ani nikde jinde
24:30:00 Nemuze najit bodlak, pta se babky
25:40:00
NAŠEL BODLÁK!!!! stojí u něj a
nejde sebrat (po chvíli se mu to
povedlo) "když ví člověk, co hledat,
tak se to hledá lépe"
27:38:00 U obchodnika nakupuje zbyle
bodlaky
Mysli ze nema penize a
nezaregistroval ze
neco koupil
28:10:00 Otázka: kolik mám peněz – vidí, že
je v mínusu
přitom nekoukal na
stav svých peněz, ale
na součet
probíhajícího obchodu
"abych si ten bodlák koupil,
tak budu muset něco
prodat"
29:51:00
pomocí klávesy X provedl obchod,
ale myslí si, že bodlák nekoupil,
znovu jde do obchodu nebylo zde znatelné
potvrzení
RADA od nás: počet peněz je v
modrém pásku v spodní části
"V modrým pásku... Jo
tadyhle?! To jsou jako
peníze, jo? Mhm, dobře..."
30:30:00 Hleda uhli v ohnistich, tam ale neni
32:18:00 Promlouva s kovarem a hleda uhli
Myslel, ze od nej
dostal uhli (ale
nedostal), koukal do
inventare
34:00:00 NASEL UHLI!!! ujistil se, že coal =
charcoal
38:00:00 S nasi pomoci nasel posledni uhli
hlásíme: vlaječka a erb
v kompasu míří na
stejné místo
39:10:00 Prinesl ingredience babce
39:40:00 baba kořenářka neřekne, jak
vyrobit lektvar, stále se jí ptá
40:20:00 Neni si jisty JAK a KDE varit lektvary Nevime, proc tu
minihru nejde spustit...
41:00:00 má problém začít s vařením, nic se
nezobrazuje
bug ve hře, asi po dvou
minutách neúspěšných
pokusů jsme test
raději ukončili
KONEC
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 32 z 34
Pretest - účastník 1-5
Pre-test Participant 1 Participant 2 Participant 3 Participant 4 Participant 5
Co víš o Kingdom
Come: Deliverance?
videa, trailer,
design Pouze jméno
sledoval
aktivitu o
vydání hry na
internetu
O hře dříve
neslyšel, myslel
si ale, že půjde o
RPG.
Před rokem si
všimnul webové
stránky, kde hra
sbírala peníze na
vývoj této hry. Ví
že budou 3 díly.
Jaký máš vztah k PC
hrám a hrám
obecně?(Herní
platforma, kdy a proč
hraješ, ...)
PC, večer si
zahraje
Nemá rád
konzole. Má
rád "osobní
aktivitu v
bitvě" (to, že
on, může
ovlivnit
výsledek celé
bitvy). Hrál by
denně, kdyby
to šlo.
strategie, RPG,
někdy dávno
hrával Gothic,
hraje na PC
Hrál by více,
nicméně teď
nemá čas.
Hlavně hraje na
PC, méně na
PlayStation.
Hlavně hraje RPG
a také World of
Tank. Nyní nemá
čas. Preferuje
klávesnici a myš
Kdy jsi hrál naposled
nějaké RPG?
GTA 4 dny
zpátky plus
hraje
Elderscrolls
online a hodně
hrál Skyrim
Lineage před 4
lety. před 1.5 roku
Právě hraje
Pillars of
Eternity,
předtím Baldur's
Gate.
Naposledy hrál v
listopadu 2014
Risen 3.
Jakou studuješ školu,
obor?
FEL, OI,
počítačové
vědy
ČVUT-FEL,
KME - sítě FEL OI
bývalý student
ČVUT FIT
ČVUT-FEL, OI -
Soft. systémy
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 33 z 34
Posttest - účastník 1-5
Post-test Participant 1 Participant 2 Participant 3 Participant 4 Participant 5
Jak se ti to líbilo?
dobré (grafika,
středověk)
No grafika
pěkná, ale
jinak strašný
ovládání,
debilní mapa,
nevěděl jsem,
že vůbec byl
inventář...
Super. Hra se
musí hrát delší
dobu v kuse,
aby si ji užil.
Nevýrazný
svět, občas si
"připadal jako
blbec". Líbilo.
Co ti dělalo
největší potíže?
Ztrácel se
nevěděl, kam
má běžet.
Orientace -
nevšiml si
kompasu
GUI v obchodu
("velmi mnoho
sprostých
nadávek")
Nepřečetl si
titulky, když mu
kovář říkal o
truhle.
Obtížná
orientace v
prostoru, plus
při hledání uhlí
byl vyloženě
naštvaný, když
se mu nedařilo
najít pátý
kousek.
Nevěděl, že může
oslovit lidi, když nad
sebou neměli jméno
nebo roli. Když by
jich bylo víc, není si
jistý jakou přesně
oslovil (oslovuje??).
"Zapamatovat si, co
se po mě chce v
questu".
Co by si změnil?
Inventář
nepoužíval drag
n drop. V
košíku Esc pro
zpět a Y pro
exit, zmatečné,
že jsou to dvě
různé věci. V
obchodu jsou
postavy v
oddělených
slotech musí
přepínat.
Nebylo ve hře
sledovat kam
mám jít.
Ovládání v
obchodu.
Okamžité
změny
hlasitosti
hudby v
nastavení.
Postava, pokud
s ní znovu začnu
konverzaci, mě
znovu pozdraví,
jak kdybych s ní
nikdy předtím
nemluvil.
Inventář -
nemohl najít,
kolik má peněz
- viděl ikonku
"mince", ale
nespojil si ji s
aktuálním
počtem peněz.
Také dlouhý
seznam věcí jej
nutil skrolovat.
Navrhoval, že by
postava mohla
zčervenat, aby
člověk věděl, že
promluví právě s
touto osobou (např.
v davu lidí) apod.
Apply v ovládání by
člověka mělo vrátit
do hlavního menu.
Dynamičtější hudba.
Kovář by mohl ŘÍCT
talk to me later a ne
pouze titulek.
("Reaguji spíše na
to, když na mě
někdo promluví").
Doporučil bys
někomu, aby si
tuto hru zahrál?
Fanouškům
zaklínače.
Lidem, co mají
rádi středověké
téma.
Kdyby měl rád
RPGečka, jinak
ne Určitě Ano
KINGDOM COME: DELIVERANCE (ALPHA ACCESS)
ČVUT v Praze 34 z 34
Screener Výsledky pouze od vyfiltrovaných účastníků testování
číslo
účastníka intenzita hraní
žánry, co
hraje
nejvíce
hraje progamer na čem hraje úroveň AJ
#5
Příležitostně si
zahraji
Strategie,
RPG, Závodní RPG Ne
Klávesnici a
myš S anglickými titulky
#3
Příležitostně si
zahraji RPG Gothic3 Ne
Klávesnici a
myš
S anglickým
dabingem (bez
titulků)
#1
Pravidelně hraji
(několikrát týdně)
Střílečky,
Strategie,
RPG,
Adventury
Elder
Scrolls, GTA Nevím
Klávesnici a
myš
S anglickým
dabingem (bez
titulků)
#2
Pravidelně hraji
(několikrát týdně)
Střílečky,
Závodní,
World of
Tanks
World of
Tanks Nevím
Klávesnici a
myš
S anglickým
dabingem (bez
titulků)
#4
Pravidelně hraji
(několikrát týdně)
Střílečky,
Strategie,
RPG,
Adventury Strategie Ne
Klávesnici a
myš S anglickými titulky