Raporty testów eksploracyjnych. Studenckie przykłady

Raporty testów eksploracyjnych. Studenckie przykłady
Studenckie dyplomy, projekty i zadania mogą czasami zaowocować całkiem ciekawym materiałem edukacyjnym. Tym razem są to przykłady raportów z sesji eksploracyjnych.
 

Od kilku lat na Uniwersytecie Jagiellońskim oraz na Vistuli prowadzę kilkugodzinne wykłady z testowania eksploracyjnego - mówi Radek Smilgin. Jest to ciągle niedoceniana metoda inteligentnego testowania manualnego. Owocem tych wykładów są prace domowe. Pomimo tego, że sam wykład trwa tylko 4 godziny, to prace dostarczane przez studentów często są bardzo wysokiej jakości - dodaje.

Prezentujemy dwa przekazane nam raporty z testów.

1.

RAPORT

Sprawdzenie wyszukiwania produktów z uwzględnieniem filtrów
-----------------------------------------------------------------------
TESTER:

Kinga Ćwik
-----------------------------------------------------------------------
DATA I GODZINA ROZPOCZĘCIA:

22.01.2018 16:25

-----------------------------------------------------------------------

CZAS TRWANIA:

60 minut

-----------------------------------------------------------------------

Środowisko:

https://www.englishhome.pl/
Czas dostępu: 22.01.2018, 16:25
Przeglądarka: Google Chrome Wersja 63.0.3239.132

----------------------------------------------------------------------------------------

System Information
------------------
Time of this report: 1/22/2018, 16:25:30
Machine name: DESKTOP-07BULSI
Machine Id: {2C279D70-CCCC-4C62-BDB2-405E5569472D}
Operating System: Windows 10 Home 64-bit (10.0, Build 16299) (16299.rs3_release.170928-1534)
Language: Polish (Regional Setting: Polish)
System Manufacturer: Dell Inc.
System Model: Inspiron 5558
BIOS: A05
Processor: Intel(R) Core(TM) i5-5250U CPU @ 1.60GHz (4 CPUs), ~1.6GHz
Memory: 8192MB RAM
Available OS Memory: 8102MB RAM
Page File: 10114MB used, 2947MB available
Windows Dir: C:WINDOWS
DirectX Version: DirectX 12
DX Setup Parameters: Not found
User DPI Setting: 96 DPI (100 percent)
System DPI Setting: 96 DPI (100 percent)
DWM DPI Scaling: Disabled
Miracast: Available, with HDCP
Microsoft Graphics Hybrid: Supported
DxDiag Version: 10.00.16299.0015 64bit Unicode

-----------------------------------------------------------------------

UWAGI:

Testowanie wyszukiwania także pod kątem responsywności

-----------------------------------------------------------------------

OBSZAR:

Wyszukiwanie w oknie wyszukiwania:

  • konkretny produkt - ok
  • braku produktów spełniających kryteria - ok
  • walidacja okna - ok

Wyszukiwanie w poszczególnych działach - defekt D01
Wyszukiwanie wg filtru kolor - defekt D02
Wyszukiwanie wg filtru stanu (prawa strona) - defekt D03, D04
Wyszukiwanie wg filtru sortuj (prawa strona) - defekt D05
Zgodność filtrów wersja desktopowa vs mobilna - brak zgodności D06a,D06b
Dostępność filtrów w wersji mobilnej - defekt D07

-----------------------------------------------------------------------

DEFEKTY:

D01. Zdublowane podkategorie (sypialnia>koce i pledy>koc koc)
D02. Brak koloru na guziku filtra koloru (filtr koloru, m.in. kolory: brudny różowy, fuksja, koralowy, seledynowy, ecru)
D03. Wyświetlenie wielokrotności wyboru filtra (następuje blokada funkcji, aż do ponownego przeładowania strony)
D04. Brak możliwości zaznaczenia filtra stan (następuje przeładowanie strony)
D05. Brak możliwości zaznaczenia filtra sortuj (następuje przeładowanie strony)
D06a, D06b Inne możliwości wyboru w wersji mobilnej i desktopowej
D07 Zasłonięcie filtrów przez pasek górnego menu (wersja mobilna)
D08 Zbędny element na stronie (poniżej filtra koloru)
-----------------------------------------------------------------------

ODKRYCIA:

  1. W widoku urządzeń mobilnych brak możliwości szybkiego powrotu na górę strony (strzałka).
  2. Poprawa jakości użytkowania w wersji mobilnej - brak skryptu JS zwijającego filtr stan/sortuj po dokonaniu wyboru.

-----------------------------------------------------------------------

ZAŁACZNIKI:

Screenshoty i pliki wideo dokumentujące opisane defekty.

[*od Redakcji: filmy pominęliśmy, screenshoty można znaleźć TUTAJ]

 

2.

#CEL oraz stopień jego realizacji

Weryfikacja poprawności działania wyszukiwarki na stronie TK: http://trybunal.gov.pl/postepowanie-i-orzeczenia/

Realizacja 70%

-----------------------------------------------------------------------

#TESTER:

Kordian Marczak

-----------------------------------------------------------------------

#START:

1/22/2018, 22:47:23

-----------------------------------------------------------------------

#CZAS TRWANIA:

30 min

-----------------------------------------------------------------------

#Środowisko:

-----------------------------------------------------------------------

Google Chrome

------------------
#System Information
------------------
Time of this report: 1/22/2018, 22:47:23
Machine name: ASUSN53
Machine Id: {5946F1CF-E8FC-43FE-B8D3-14880BBA485F}
Operating System: Windows 10 Pro 64-bit (10.0, Build 16299) (16299.rs3_release.170928-1534)
Language: Polish (Regional Setting: Polish)
System Manufacturer: ASUSTeK Computer Inc.
System Model: N53SN
BIOS: BIOS Date: 04/07/11 12:35:13 Ver: 04.06.03
Processor: Intel(R) Core(TM) i7-2630QM CPU @ 2.00GHz (8 CPUs), ~2.0GHz
Memory: 16384MB RAM
Available OS Memory: 16296MB RAM
Page File: 3624MB used, 15102MB available
Windows Dir: C:WINDOWS
DirectX Version: DirectX 12
DX Setup Parameters: Not found
User DPI Setting: 96 DPI (100 percent)
System DPI Setting: 96 DPI (100 percent)
DWM DPI Scaling: Disabled
Miracast: Not Available
Microsoft Graphics Hybrid: Not Supported
DxDiag Version: 10.00.16299.0015 64bit Unicode

-----------------------------------------------------------------------

#OBSZAR:

  1. Wyszukiwanie fraz za pomocą poprawnych, standardowych ciągów znaków
  2. Wyszukiwanie po "każdym słowie" oraz "całej frazie"
  3. Wyszukiwanie znaków specjalnych
  4. Weryfikacja przycisków nawigacji
  5. Weryfikacja stronicowania wyników
  6. Weryfikacja wyszukiwania kodu html
  7. Weryfikacja wyszukiwania ciągu znaków w innym specyficznym języku jak cyrylica.

-----------------------------------------------------------------------

#UWAGI

Wyszukiwanie po całej frazie powinno wyszukiwać jedynie te artykuły, które w całości zawierają wyszukiwaną frazę. Przy wpisaniu "prawo", wyświetlanie artykułów z "prawa" jest błędem.

Przyciski nawigacji do przodu i do tyłu powinny zostać dezaktywowane, gdy wynik wyszukiwania zwraca jedną stronę z dopasowanymi danymi.

Brak rozróżnienia wielkości liter.

-----------------------------------------------------------------------

#DEFEKTY:

  1. Brak adekwatnych wyników dla ciągu znaków "!@" (B1)
  2. Wprowadzenie frazy "!@#$%^&*()" i wyszukanie jej w "Wyszukaj w portalu TK" powoduję wyszukanie innego ciągu znaków, tj. "!@" (B1)
  3. Możliwe jest wyszukanie wyników dla pojedynczego znaku"b", lecz dla ciągu znaku "a" brak jest wyników. (B2, B2_@)
  4. Wyszukanie frazy odpowiednio długiej frazy w postaci html powoduję błąd serwera.
  5. Wyszukanie odpowiednio długiego ciągu w cyrylicy powoduje błąd serwera.

-----------------------------------------------------------------------

#ODKRYCIA:

Wpisując "//" możliwe przejście do newslettera.

Kliknięcie "Czy chodziło o" nie zamienia wyszukiwanego tekstu i nie wyłącza się po jego wybraniu.

-----------------------------------------------------------------------

#ZAŁACZNIKI:

Nagranie mp4 testów.

Zrzuty ekranu B1, B2, B2_2 [*od Redakcji: zrzuty TUTAJ].

 

Dziękujemy studentom UJ, Kindze Ćwik oraz Kordianowi Marczakowi, za zgodę na udostępnienie ich prac.

 

 

To powinno Cię zainteresować