infoEtap weryfikacji
Z raportów Cedefopu (agencji zajmującej się rozwojem i promocją edukacji zawodowej i uczenia się przez całe życie w Unii Europejskiej) wynika, że metodę testów teoretycznych stosuje się głównie na etapie weryfikacji. Tak dzieje się m.in. w Czechach, Estonii, Flandrii, Francji, Portugalii, Wielkiej Brytanii i w Republice Południowej Afryki.

infoWiedza
Za pomocą testu teoretycznego można sprawdzać wiedzę, zwłaszcza faktograficzną, ze wszystkich poziomów PRK.

infoUmiejętności
Metoda jest szczególnie przydatna do sprawdzania efektów uczenia się w zakresie:
- informacji;
- organizacji pracy;
-narzędzi i materiałów na poziomach 4–6 PRK;
- uczenia się i rozwoju zawodowego.

infoKompetencje społeczne
Test teoretyczny można zastosować do sprawdzenia kompetencji społecznych w zakresie:
- przestrzegania reguł na poziomach 1–3 PRK (z wyjątkiem efektów uczenia się dotyczących rzetelnego informowania o rezultatach prac i dotrzymywania uzgodnień);
- odpowiedzialności na poziomach 2–5 PRK (dotyczącej uwzględniania różnego rodzaju skutków działań zawodowych).

Pobierz wersję PDF
(Czarno-biały)

Test teoretyczny

Test teoretyczny

Charakterystyka

Charakterystyka

Test teoretyczny polega na zadawaniu kandydatowi pytań lub wykonywaniu przez niego określonych zadań w zakresie wiedzy i umiejętności kognitywnych oraz na analizie rezultatów tych działań.

Testy teoretyczne przebiegają w warunkach kontrolowanych. Za ich pomocą można sprawdzić jednocześnie wiele osób. Wyniki testów teoretycznych łatwo odnieść do zewnętrznych standardów. Jednocześnie same podlegają standaryzacji. Oznacza to, że istnieje ujednolicony sposób posługiwania się nimi (obejmujący m.in. kolejność i treść pytań, które są zazwyczaj identyczne dla wszystkich kandydatów), a ich trafność (weryfikowane są te efekty uczenia się, które wybrano do sprawdzenia) i rzetelność (wyniki są powtarzalne niezależnie od czasu i miejsca) została sprawdzona na większych grupach osób. Testy zasadniczo powinny mierzyć jakość wiedzy, a nie jej ilość.

Test teoretyczny, zwany czasem testem wiedzy, jest jedną z najczęściej stosowanych metod weryfikacji. Test taki nie powinien być jedynie testem wiedzy zapamiętanej, ale przede wszystkim narzędziem pozwalającym ocenić umiejętności posługiwania się tą wiedzą. Pozwala na zastosowanie jasnych kryteriów oceny, a konstrukcja narzędzi i organizacja weryfikacji zapewniają bezstronność i rzetelność sprawdzania.

Dodatkowo specyfika teoretycznego testu pisemnego sprawia, że kandydat może pozostać anonimowy, a jego dane osobowe można zakodować w celu zwiększenia obiektywizmu oceny. Test pisemny powinien się składać z dużej liczby zadań obejmujących szeroki zakres wybranych zagadnień dotyczących kwalifikacji.

Testy ustne mogą (ale nie muszą) mieć wystandaryzowane pytania, identyczne dla wszystkich kandydatów. Ich zaletą jest możliwość zbadania głębi rozumienia danego zagadnienia przez kandydata.

Testy teoretyczne mogą przyjmować różne formy. Przedstawia je poniższa tabela.

Tabela 1. Rodzaje testów teoretycznych

Czynnik podziału Rodzaje testów

Typ czynności wykonywanej przez osobę przystępującą do testu*

  • Testy pisemne – wymagają od kandydatów wypowiedzi na piśmie.
  • Testy ustne – rozwiązywane przez kandydatów w formie słownej odpowiedzi.

Zasięg stosowania

  • Testy standaryzowane (szerokiego użytku) – stosowane głównie w edukacji formalnej i pozaformalnej. Nad ich opracowaniem czuwają zespoły ekspertów, a ich stosowanie jest poprzedzone procedurą standaryzacji. Ten rodzaj testów powinien mieć instrukcję rozwiązywania dla kandydatów, karty odpowiedzi i podręcznik testowania dla asesorów, w którym umieszczone są dane techniczne testowania oraz normy dla poszczególnych ocen.
  • Testy niestandaryzowane – opracowywane na własny użytek przez asesora. Nie są poddawane procedurze standaryzacji. Wyników takich testów nie można porównywać pomiędzy poszczególnymi asesorami/ośrodkami.

Cel pomiaru

  • Testy sprawdzające – ich wyniki pozwalają na ustalenie stopnia opanowania przez kandydatów efektów uczenia się. Na ich podstawie można stwierdzić, jakie czynności/umiejętności sprawiają osobom zdającym największe trudności i wysnuć wnioski na temat dalszego uczenia się. Szczególną odmianą są testy sprawdzające wielostopniowe, w których określone grupy zadań reprezentują kryteria weryfikacji przypisane poszczególnym ocenom.
  • Testy różnicujące – treść zadań testowych jest dobierana na podstawie aktualnych wyników innych osób. Wykorzystywane są przeważnie w selekcji kandydatów na określone stanowisko lub w badaniach naukowych.
* Ten czynnik jest podstawą podziału testów teoretycznych w Katalogu metod stosowanych w walidacji efektów uczenia się.

 

Testy przeznaczone dla większej liczby zdających powinny być narzędziami standaryzowanymi. Innymi słowy, powinny pozwalać w obiektywny sposób zmierzyć poziom efektów uczenia się, a ich trafność i rzetelność została wcześniej sprawdzona i potwierdzona w badaniach na dużej liczbie osób.

Asesor powinien przestrzegać instrukcji dotyczących wypełniania narzędzi służących do oceny odpowiedzi.

Jeśli w testach stosuje się pytania otwarte, wówczas należy uważnie analizować odpowiedzi. Przy odpowiedziach ustnych zachodzi niebezpieczeństwo, że informacje zawarte w wypowiedziach kandydata będą redukowane. Można temu zapobiec m.in. poprzez przygotowanie przez asesora oceny opisowej, w której znajdują się fragmenty odpowiedzi, które świadczą o osiągnięciu danych efektów.

Etapy walidacji, na których rekomenduje się stosowanie danej metody

Etapy walidacji, na których rekomenduje się stosowanie danej metody

Z raportów Cedefopu (agencji zajmującej się rozwojem i promocją edukacji zawodowej i uczenia się przez całe życie w Unii Europejskiej) wynika, że metodę testów teoretycznych stosuje się głównie na etapie weryfikacji. Tak dzieje się m.in. w Czechach, Estonii, Flandrii, Francji, Portugalii, Wielkiej Brytanii i w Republice Południowej Afryki.

Zakres efektów uczenia się, które można sprawdzać daną metodą

Zakres efektów uczenia się, które można sprawdzać daną metodą

Wskazówki dotyczące efektów uczenia się, które można sprawdzać za pomocą testu teoretycznego, mają charakter orientacyjny. Zostały opracowane na podstawie analizy wymagań zawartych w Polskiej Ramie Kwalifikacji (w charakterystykach II stopnia typowych dla kwalifikacji o charakterze zawodowym), dotyczących efektów uczenia się.

Należy pamiętać, że wybór danej metody zawsze musi wynikać z analizy efektów uczenia się zdefiniowanych dla danej kwalifikacji.

Wiedza

Za pomocą testu teoretycznego można sprawdzać wiedzę, zwłaszcza faktograficzną, ze wszystkich poziomów PRK.

Umiejętności

Metoda jest szczególnie przydatna do sprawdzania efektów uczenia się w zakresie:

  • informacji („obliczenia, analiza, synteza i prognozowanie”) na poziomach 2–4 PRK (dotyczących wyszukiwania, porównywania, oceniania oraz analizowania lub przetwarzania informacji potrzebnych do wykonywania działań zawodowych); na poziomach 5–6 PRK (dotyczących dokonywania analizy prowadzonej działalności zawodowej z uwzględnieniem dostępnych danych ilościowych); na 7 poziomie PRK (dotyczącym prognozowania rozwoju sytuacji w dziedzinie działalności
  • zawodowej) i na 8 poziomie PRK (dotyczącym tworzenia modeli rozwoju w dziedzinie działalności zawodowej i wnioskowania na ich podstawie);
  • organizacji pracy („planowanie i korygowanie planów” oraz „korygowanie działań”) na poziomach 3 i 4 PRK;
  • narzędzi i materiałów na poziomach 4–6 PRK;
  • uczenia się i rozwoju zawodowego („wspieranie rozwoju innych osób”) na 7 poziomie PRK.
Kompetencje społeczne

Test teoretyczny można zastosować do sprawdzenia kompetencji społecznych w zakresie:

  • przestrzegania reguł na poziomach 1–3 PRK (z wyjątkiem efektów uczenia się dotyczących rzetelnego informowania o rezultatach prac i dotrzymywania uzgodnień);
  • odpowiedzialności na poziomach 2–5 PRK (dotyczącej uwzględniania różnego rodzaju skutków działań zawodowych).

Wskazówki dotyczące efektów uczenia się, które można sprawdzić za pomocą metody Test teoretyczny

Mocne i słabe strony testu teoretycznego

Mocne i słabe strony testu teoretycznego 

Mocne strony Słabe strony
  • metoda powszechnie znana i oceniana jako trafna i rzetelna
  • tania i wygodna do zastosowania w porównaniu z innymi metodami
  • wyniki łatwo odnieść do zewnętrznych standardów
  • wszyscy zdający dostają takie same pytania
  • zachowana jest obiektywność oceny (jednakowe kryteria)
  • pozwala na różnorodność formalną i merytoryczną pytań; duża liczba pytań umożliwia objęcie wielu efektów uczenia się
  • łatwa do oceny
  • zapewnia powtarzalność wyników
  • metoda mało podatna na tzw. efekt egzaminatora (wpływ subiektywnej oceny asesora na wyniki, zwłaszcza w testach pisemnych, można w dużym stopniu ograniczyć)
  • metoda nieodpowiednia do sprawdzenia wielu umiejętności (zwłaszcza praktycznych) i kompetencji społecznych
  • gotowych testów nie można dowolnie dostosowywać do indywidualnych potrzeb kandydatów
  • konstrukcja zadań może mieć wpływ na jakość testu (np. większość zadań może sprawdzać tylko odtwarzanie wiedzy a nie rozwiązywanie problemów)
  • sposób formułowania pytań może mieć wpływ na wyniki (interpretacja i klucz odpowiedzi)
  • istnieje ryzyko nadmiernego upraszczania i pytania o rzeczy błahe
  • ma ograniczoną liczbę pytań

 

Ograniczenia w stosowaniu

Ograniczenia w stosowaniu

Ograniczeniem w stosowaniu testu teoretycznego jest przede wszystkim rodzaj efektów uczenia się, które wybrano do sprawdzenia. Metoda ta jest przeznaczona głównie do weryfikowania wiedzy i umiejętności kognitywnych, natomiast zakres umiejętności praktycznych i kompetencji społecznych, które można zweryfikować za jej pomocą jest dość ograniczony.

Niepożądany wpływ na przebieg testu i końcowe wyniki kandydata mogą mieć różne czynniki. Trudności z wykazaniem efektów uczenia się za pomocą tej metody mogą mieć na przykład osoby o niskich umiejętnościach werbalnych i pisania tekstów, a także takie, które wcześnie wypadły z systemu edukacji formalnej, mające trudności z rozwiązywaniem testów oraz osoby ze specjalnymi potrzebami.

Konieczne zasoby kadrowe i organizacyjno-materialne

Konieczne zasoby kadrowe i organizacyjno-materialne

Wymagane zasoby kadrowe i organizacyjno-materialne są uzależnione od celu testu i liczby osób sprawdzanych jednocześnie za pomocą tej metody.

Należy przewidzieć udział w walidacji osób przygotowujących testy i asesorów, a także koszty ich zatrudnienia lub przeszkolenia.

Aby móc zastosować metodę testu teoretycznego niezbędne są zasoby organizacyjno-materialne, obejmujące m.in.:

  • przygotowanie testów, w tym ich standaryzację (jeśli uznano to za stosowne);
  • materiały konieczne do przeprowadzenia testu (np. kartki papieru, stanowiska komputerowe);
  • pomieszczenia, w których przeprowadzany jest test.

Koszty przygotowania i przeprowadzenia testu mogą się wahać od kilkuset złotych (np. druk materiałów egzaminacyjnych) do nawet kilkudziesięciu milionów – szczególnie kosztowne jest stworzenie testów pisemnych standaryzowanych na dużej próbie.

Instytucje certyfikujące powinny liczyć się z koniecznością zaangażowania dodatkowych zasobów w przypadku kandydatów z niepełnosprawnością słuchu lub wzroku. Należy zadbać o odpowiednią organizację testu i przygotowanie dostosowanych materiałów (np. arkuszy pytań o dużej czcionce). Przeprowadzenie testu może wymagać dodatkowych umiejętności zarówno od asesorów, jak i od kandydatów (np. znajomość języka migowego, alfabetu Braille’a).

Możliwości łączenia testu teoretycznego z innymi metodami

Możliwości łączenia testu teoretycznego z innymi metodami

W Polsce, zarówno w edukacji formalnej, jak i pozaformalnej, testy teoretyczne są często łączone z obserwacją w warunkach symulowanych (zadania praktyczne). Ponadto, test może uzupełniać bądź zastępować wywiad swobodny i ustrukturyzowany.

Możliwe jest także uzupełnienie testu w formie odpowiedzi ustnej o obserwację w warunkach rzeczywistych, prezentację, debatę swobodną oraz analizę dowodów i deklaracji.

Przykładowe techniki

Przykładowe techniki

Technika to podejście w ramach danej metody wykorzystywane do zbierania i analizowania danych świadczących o posiadaniu przez daną osobę efektów uczenia się.

Odpowiedź ustna

Odpowiedź ustna przyjmuje najczęściej formę serii pytań zadawanych kandydatom. Umożliwia sprawdzenie przede wszystkim głębi rozumienia danego zagadnienia i umiejętności rozwiązywania problemów. Pozwala także na sprawdzenie wiedzy faktograficznej oraz umiejętności i kompetencji społecznych.

Odpowiedź ustna zazwyczaj nie jest ustrukturyzowana, a asesor na bieżąco dostosowuje pytania do odpowiedzi kandydata. Ta cecha upodabnia ją do wywiadu swobodnego (technika – rozmowa). Prowadzący wywiad posługuje się tzw. dyspozycjami do wywiadu, czyli ustalonym celem oraz luźno sformułowanymi tematami, które może omówić z kandydatem w dowolny sposób. Jednak wywiad swobodny nie jest z reguły ukierunkowany na sprawdzenie wiedzy, jak ma to miejsce w przypadku odpowiedzi ustnej.

Brak określonej struktury odpowiedzi ustnej sprawia, że nie można dokładnie przewidzieć przebiegu walidacji za pomocą tej techniki.

Rzetelność i trafność odpowiedzi ustnej zależy od jakości i formy pytań (np. zadawanie pytań problemowych pozwala na sprawdzenie umiejętności stosowania zdobytych dotychczas wiadomości w nowych sytuacjach oraz logicznego myślenia). Powinny one w jasny i precyzyjny sposób sprawdzać opanowanie wymaganych efektów uczenia się. Mogą dotyczyć rozumienia, uzasadniania, ustalania przyczyn i skutków. Forma pytań powinna być różnorodna, a odpowiedzi zwięzłe i logiczne.

Należy pamiętać, że gdy ocenie podlega wypowiedź kandydata, wszelkie zaburzenia w rozmowie (np. zmiana tematu), mogą mieć wpływ na ostateczną ocenę. Jest to szczególnie szkodliwe, gdy nowy wątek dotyczy efektów uczenia się, które nie były ujęte w scenariuszu walidacji. Asesor, który postępuje w ten sposób, nierzetelnie wykonuje swoje obowiązki. Jednak nawet w przypadku mniej istotnych zaburzeń, efekt takiego postępowania może np. zmienić atmosferę sprawdzania. W rezultacie kandydat może przestać odpowiadać tak szczegółowo lub szczerze. Rodzi to też stres u osoby podchodzącej do walidacji, co może skutkować gorszym wynikiem.

Można wyróżnić kilka typów odpowiedzi ustnych. Poniżej przedstawiono trzy z nich:

  1. Viva voce

    Jest to odpowiedź ustna na pytania zadawane przez komisję egzaminacyjną złożoną z zewnętrznego i wewnętrznego asesora. Technika viva voce jest stosowana głównie na poziomie uniwersyteckim (podyplomowym), po przedłożeniu pracy końcowej. Celem jest upewnienie się, że kandydat wie wystarczająco dużo na dany temat oraz że jest to jego własna praca.

  2. Test ustny stanowiący uzupełnienie obserwacji w warunkach symulowanych (symulacji)

    Jest to odpowiedź ustna na pytania zadawane przez asesora po wykonaniu przez kandydata zadania praktycznego. Stanowi część sesji podsumowującej. Zazwyczaj nie ma formalnej struktury, ale asesorzy zazwyczaj zadają zaplanowane wcześniej pytania. Możliwe jest także zadanie pytań ogólnych, na które odpowiadają wszyscy kandydaci w czasie wykonywania zadania praktycznego.

  3. Rozumienie ze słuchu w teście językowym

    Jest to test ukierunkowany na ocenę poziomu biegłości posługiwania się przez kandydata danym językiem. Test rozumienia ze słuchu jest często przeprowadzany z wykorzystaniem urządzeń odtwarzających pliki dźwiękowe. Powinny być one dopasowane do poziomu biegłości zdającego w zakresie rozumienia ze słuchu.

Ramka 1. Etapy odpowiedzi ustnej

Przebieg odpowiedzi ustnej zależy od jej typu, można jednak wyróżnić następujące etapy:

  1. Pytanie wprowadzające, dające możliwość spontanicznej odpowiedzi na wybrany temat, przeanalizowania jakiejś kwestii.
  2. Pytania pogłębiające, służące zaangażowaniu kandydata w rozmowę, np. „Skąd to wiedziałeś?”, „Jakiej metody użyłeś, aby dojść do tego wniosku?”.
  3. Pytania naprowadzające, w których asesor może dać zdającemu pewne wskazówki, mogące naprowadzić go na właściwą odpowiedź, np. „Pamiętasz fakt xx?”, „Z czym jest powiązany?”.
  4. Pytania problemowe, służące zmierzeniu głębi rozumienia zagadnień, np. „Czy możesz udowodnić, że dana metoda jest lepsza od innej?”.
Mocne strony odpowiedzi ustnej:
  • gwarantuje natychmiastowy wynik (asesorzy od razu otrzymują odpowiedzi) i daje możliwość bezpośredniej obserwacji reakcji kandydata;
  • daje możliwość sformułowania dodatkowych pytań, prześledzenia poprawności toku myślenia, zapytania kandydata, w jaki sposób doszedł do odpowiedzi;
  • daje możliwość bezpośredniego poznania kandydata i ewentualnego ukierunkowania jego dalszej ścieżki edukacyjnej;
  • dobrze uzupełnia zadania praktyczne;
  • umożliwia ocenę umiejętności poprawnego, zwięzłego i logicznego wypowiadania się kandydata;
  • pozwala na poznanie cech osobowościowych kandydata;
  • daje kandydatowi swobodę w formułowaniu odpowiedzi;
  • uniemożliwia oszukiwanie.
Słabe strony odpowiedzi ustnej:
  • w zależności od liczby kandydatów sprawdzanych jednocześnie, zastosowanie tej techniki może być czasochłonne i tym samym zwiększać koszty walidacji;
  • wymagane są jasne kryteria oceniania, zmniejszające wpływ opinii asesora na wyniki kandydata;
  • ocena jest narażona na wpływ subiektywnych czynników zewnętrznych i postronnych, co stwarza trudność w zapewnieniu obiektywnego, rzetelnego i trafnego sprawdzania;
  • odpowiedź ustna może sprawiać trudność obcokrajowcom, którzy nie znają dobrze języka, w jakim ma być prowadzona weryfikacja;
  • ocena odpowiedzi ustnej powinna być uzupełniona o raport z przebiegu weryfikacji, w celu zwiększenia jej rzetelności;
  • odpowiedzi udzielane w czasie ustnego testu powinny być nagrywane lub dokumentowane, aby umożliwić procedurę odwoławczą lub rewizję oceny w przyszłości;
  • nie zawsze da się przewidzieć długość odpowiedzi ustnej udzielanej przez kandydata;
  • brak powtarzalności wyników;
  • brak możliwości wykorzystania wyników do celów statystycznych.

 

Test pisemny

Test teoretyczny pisemny jest zbiorem zadań do rozwiązania, reprezentujących wybrany zakres poznawczej treści uczenia się. Wykonuje się go zazwyczaj podczas pojedynczej sesji.

Czynności osoby wykonującej test mogą obejmować:

  • odtwarzanie wiadomości z pamięci,
  • rozumienie,
  • rozwiązywanie znanego problemu,
  • rozwiązywanie nowego problemu,
  • krytyczną ocenę sytuacji,
  • syntezę wiedzy.

Narzędziem testów pisemnych jest zadanie testowe. To względnie niezależny, osobno punktowany element, którego rozwiązanie polega na wybraniu odpowiedzi spośród zaproponowanych lub udzieleniu własnej odpowiedzi.

Szczególnym rodzajem testu teoretycznego pisemnego jest studium przypadku. Ta technika może być stosowana podczas obserwacji w warunkach symulowanych (symulacji) oraz w teście teoretycznym pisemnym.

Ramka 2. Studium przypadku

„Studium przypadku” ma wiele definicji. Pojęcie to odnosi się m.in. do metod badawczych, stosowanych w naukach społecznych oraz do metod dydaktycznych. Z tego powodu może być różnie rozumiana przez poszczególne osoby.

W odniesieniu do walidacji studium przypadku jest techniką sprawdzania efektów uczenia się, która polega na wykonaniu zadania lub udzieleniu odpowiedzi na pytania na podstawie informacji zawartych w opisie konkretnej sytuacji (prawdziwej albo wymyślonej). Wynikiem studium przypadku może być m.in. diagnoza danego zdarzenia, propozycja rozwiązania problemów przedstawionych w opisie przypadku, prognoza dalszego rozwoju sytuacji czy propozycja działania.

Za pomocą studium przypadku można sprawdzić m.in. umiejętność analizy informacji, wyciągania wniosków, krytycznego myślenia oraz zastosowania wiedzy w praktyce. Kandydat może na przykład określić przyczyny danej sytuacji, wskazać główne problemy poruszone w opisie przypadku, wskazać zależności pomiędzy faktami, przewidzieć lub ocenić skutki opisanych działań/zdarzeń.

Przykłady zastosowania testu teoretycznego

Przykłady zastosowania testu teoretycznego 

Przykłady zagraniczne

Przykłady na zastosowanie testu teoretycznego są zawarte w Bazie Dobrych Praktyk. Walidacja, zapewnianie jakości walidacji i certyfikowania.

Metoda ta jest stosowana m.in. w wypadku kwalifikacji:

Przykład polski

Poniższy przykład opracowano na podstawie poradnika dla autorów zadań i egzaminów testowych, przygotowanego przez Henryka Rebandela.

Nazwa instytucji

Warszawski Uniwersytet Medyczny

Zakład Dydaktyki i Efektów Kształcenia Wydziału Nauki o Zdrowiu WUM
Pracownia Ewaluacji i Doskonalenia Kształcenia Medycznego
Biuro ds. Egzaminów Uczelnianych

Kraj pochodzenia

Polska

Kontekst funkcjonowania instytucji

Za kompleksową obsługę egzaminów testowych przeprowadzanych przez WUM odpowiedzialne jest bezpośrednio Biuro ds. Egzaminów Uczelnianych, utworzone 22 maja 2014 roku. Do głównych zadań Biura należy:

  • obsługa testów przeprowadzanych w wersji papierowej przez jednostki naukowo-dydaktyczne WUM, w szczególności:
    • przygotowanie i wydruk kart egzaminacyjnych,
    • analiza parametrów jakościowych pytań egzaminacyjnych,
    • archiwizacja danych;
  • wdrożenie i obsługa uczelnianego systemu egzaminów elektronicznych, w szczególności:
    • koordynacja pracy nad stworzeniem i rozwojem bazy pytań egzaminacyjnych,
    • analiza parametrów jakościowych pytań egzaminacyjnych,
    • przeprowadzanie egzaminów elektronicznych oraz nadzór nad ich prawidłowym przebiegiem,
    • weryfikacja wyników egzaminów elektronicznych;
  • współpraca z Zakładem Dydaktyki i Efektów Kształcenia oraz jednostkami naukowo-dydaktycznymi WUM w zakresie przygotowywania i przeprowadzania testów.

Nazwa kwalifikacji

doktor nauk medycznych, doktor nauk farmaceutycznych, dyplom ukończenia studiów I stopnia na kierunku techniki dentystyczne i inne kwalifikacje

Krótki opis stosowania danej metody

Test teoretyczny

Możliwości samodzielnego zdobycia informacji o metodzie/z pomocą doradcy

Na początku danego okresu nauczania (zazwyczaj na początku roku akademickiego) studentom udostępniana jest informacja o wymaganiach egzaminacyjnych, formie, objętości i czasie trwania egzaminu, a także o kryterium progowym jego zaliczenia (graniczna liczba punktów).

Czynniki, jakie stały za wyborem danej metody w danych okolicznościach

Metodę testu wybrano ze względu na to, że pozwala na dogłębne sprawdzenie wiedzy studentów. Umożliwiają to m.in.: duża liczba zadań, identyczne zestawy zadań dla wszystkich zdających, krótki czas egzaminowania (istotny w wypadku grup o dużej liczebności), obiektywna skala ocen (przyznawania punktów).

Dobrze zaprojektowany test pozwala szybko ocenić stopień opanowania efektów uczenia się zakładanych dla danego przedmiotu.

Przebieg

Student przystępuje do testu po identyfikacji danych osobowych na podstawie dokumentu tożsamości. Wejście studenta na salę egzaminacyjną jest odnotowywane na liście obecności, co umożliwia ustalenie, czy po rozwiązaniu testu wszyscy zdający oddali karty egzaminacyjne.

Aby wykluczyć wszelkie pomyłki i oszustwa, karty testowe (egzaminacyjne) są personalizowane (imię, nazwisko, numer albumu) i podpisywane przez osoby zdające. Studenci składają podpisy również na książeczkach testowych. Umożliwia to zidentyfikowanie osób, które nie oddały książeczki testowej po zakończeniu egzaminu.

Książeczki testowe są traktowane jako chroniona prawem autorskim publikacja przeznaczona do użycia w ściśle określonym celu, tj. wyłącznie podczas testu. Ma to zapobiec nieautoryzowanemu ujawnianiu zbioru zadań.

Sale egzaminacyjne powinny być na tyle duże, by umożliwiały zachowanie odpowiednich odstępów pomiędzy wszystkimi osobami przystępującymi do testu. Studenci zajmują kolejne miejsca na sali wg listy, zazwyczaj uporządkowanej alfabetycznie, co zmniejsza prawdopodobieństwo, że obok siebie usiądą osoby „pomagające” sobie w udzielaniu odpowiedzi. Możliwość oszukiwania ograniczana jest również dzięki zapewnieniu odpowiedniej liczby osób pilnujących przebiegu testu, odebraniu kart osobom oszukującym oraz stosowaniu kilku wersji testu, aby sąsiadujące ze sobą osoby miały różne zestawy do rozwiązania.

Osoby przeprowadzające test mają obowiązek poinformować o obowiązujących zasadach przed rozdaniem kart egzaminacyjnych. Powinny przedstawić: czas trwania testu, sposób rozpoczęcia, godzinę i sposób zakończenia, sposób zgłaszania pytań, sposób postępowania w wypadku stwierdzenia błędów na kartach egzaminacyjnych, sposób postępowania w wypadku wcześniejszego rozwiązania testu, zasady korzystania z sanitariatu, zasady dotyczące posiadania telefonów komórkowych, skutki stwierdzenia zachowania niepożądanego.

Faktyczną godzinę rozpoczęcia i zakończenia testu ustala się po rozdaniu książeczek testowych wszystkim zdającym. Osoby przeprowadzające test powinny kilka razy w trakcie trwania egzaminu informować, ile czasu zostało do zakończenia pisania testu. Po upływie czasu wyznaczonego na rozwiązanie testu osoby zdające powinny pozostać na swoich miejscach, dopóki nie zostaną zebrane książeczki testowe wraz z kartami egzaminacyjnymi.

Przy ustalaniu czasu przeznaczonego na rozwiązanie testu należy wziąć pod uwagę wszystkie czynności związane z jego rozwiązywaniem, ale nie powinien on być zbyt długi, aby test dobrze różnicował lepiej i gorzej przygotowanych.

Ponadto test:

  • może składać się z maksymalnie 100 pytań,
  • zadanie testowe może zawierać maksymalnie 5 wariantów odpowiedzi (A, B, C, D, E).

Można przygotować maksymalnie 4 wersje testu.

Wyniki procesu walidacji

Test jest stosowany do weryfikacji efektów uczenia się.

Test można zaliczyć albo nie zaliczyć. Nie przewiduje się potwierdzania części efektów uczenia się.

Zasoby organizacyjne i materialne

Do przeprowadzenia testu potrzebna jest sala dopasowana do liczby osób zdających, uwzględniająca konieczność zachowania między nimi odpowiednich odstępów.

Metoda ta wymaga wyposażenia w postaci sprzętu komputerowego i oprogramowania do wprowadzania odpowiedzi i obliczenia wyników oraz badania parametrów statystycznych i psychometrycznych. Należy również pamiętać o kosztach związanych z wydrukowaniem odpowiedniej ilości książeczek egzaminacyjnych i spersonalizowanych kart egzaminacyjnych w kilku wersjach.

Należy także zadbać o odpowiednią liczbę osób, które będą przeprowadzać test i pilnować jego przebiegu.

Powinno się przygotować bank zadań z gotowymi, wystandaryzowanymi pozycjami testowymi. Do kolejnego testu można układać nowe zadania, jednak korzystniej jest wybrać część zadań o znanych parametrach z banku zadań, a tylko pewną część (np. 20%) powinny stanowić zadania nowe. 

Zalecane jest, by zadania testowe były układane przez przynajmniej kilku specjalistów z danej dziedziny – daje to gwarancję jakości i różnorodności stosowanych narzędzi pomiarowych.

Ograniczenia w stosowaniu

Test nie zawsze jest odpowiednią metodą do badania konkretnych umiejętności praktycznych czy rozwiązywania problemów w sytuacjach nietypowych.

Na stworzenie dużego banku zadań potrzeba czasu i doświadczenia ze strony układających zadania testowe.

 

 

Bibliografia

Bibliografia 

American Educational Research Association, American Psychological Association i National Council on Measurement in Education (1999). Standards for educational and psychological testing. Washington: AERA. Pobrane z http://www.apa.org/science/programs/testing/standards.aspx

European Commission, DG Education and Culture i Cedefop (2010). European inventory on validation of validation of non-formal and informal learning 2010. Thematic Report: Assessment methods. Luxembourg: Publications Office.

European Commission, Cedefop i ICF International (2014). European inventory on validation of validation of non-formal and informal learning 2014. Thematic report: validation methods. Luxembourg: Publications Office.

Jablow, P. (2015). 5 things to know about the financial cost of testing. Philadelphia Public School. The Notebook. Pobrane z http://thenotebook.org/latest0/2015/11/24/5-things-to-know-about-the-financial-cost-of-testing

Kubiszyn, T. i Borich, G. (2009). Educational Testing and Measurement: Classroom Application and Practice. John Wiley & Sons, Inc.

Komunikat dyrektora Centralnej Komisji Egzaminacyjnej z 1 września 2016 r. w sprawie szczegółowych sposobów dostosowania warunków i form przeprowadzania egzaminu potwierdzającego kwalifikacje w zawodzie do potrzeb i możliwości zdających ze specjalnymi potrzebami edukacyjnymi w roku szkolnym 2016/2017. Pobrane z https://cke.gov.pl/images/_KOMUNIKATY/Komunikat%20o%20dostosowaniach%20w%20roku%20szkolnym%202017-2018.pdf

Łobocki, M. (2000). Metody i techniki badań edukacyjnych. Kraków: Oficyna Wydawnicza „Impuls”.

Łoś, E. i Reszka, A. (2009). Metody nauczania stosowane w kształtowaniu kompetencji kluczowych. Matematyka. Podręcznik metodyki operacyjnej. Lublin: Innovatio Press Wydawnictwo Naukowe Wyższej Szkoły Ekonomii i Innowacji.

Strony internetowe:

Centralna Komisja Egzaminacyjna: https://cke.gov.pl/

Fundacja Vocational Competence Certificate: http://vccsystem.eu/

Rebandel, H. Poradnik dla autorów zadań i egzaminów testowych. Warszawski Uniwersytet Medyczny; http://biurojakosci.wum.edu.pl/content/poradnik-dla-autorow-zadan-i-egzaminow-testowych-0