• Nie Znaleziono Wyników

Podejście, metoda i techniki badawcze

na Uniwersytecie X wobec systemu oceniania okresowego pracowników

3.1. Podejście, metoda i techniki badawcze

Ze względu na cel badania, którym jest wyjaśnienie kształtowania się postaw wobec oceniania okresowego nauczycieli akademickich na uniwersytecie, a więc szczegółowego przedstawienia zjawiska i jego uwarunkowań w określonych wa-runkach, a także wskazania możliwości kształtowania postaw przez uczelnię, au-torka zdecydowała się zastosować podejście idiograficzne, którego metodą jest studium przypadku (Matejun, 2011, s.  204; Strumińska-Kutra, Koładkiewicz, 2012, s. 4). Studium przypadku związane jest z przeprowadzeniem pogłębionej analizy jego obiektu, którym może być zarówno osoba, organizacja, proces, jak i relacje społeczne wraz z kontekstem, w którym występują (Strumińska-Kutra, Koładkiewicz, 2012, s. 2).

Charakterystyczną cechą wybranej metody jest „korzystanie z wielu źródeł da-nych i różda-nych technik ich gromadzenia w celu rzetelności i trafności wnioskowa-nia (triangulacja)” (Cewińska, 2013, s. 65). S. Stańczyk (2015, s. 244) stwierdza, że o triangulacji często mówi się w sytuacji wykorzystania grupy różnych metod w celu „uzyskania spójności podstaw empirycznych wnioskowania”, daje ona bo-wiem możliwość „pełniejszego poznania i eliminowania błędów poznawczych” (Denzin, 1970, za Stańczyk, 2015, s. 248; Konecki, 2000, za Stańczyk, 2015, s. 248). Triangulacja oznacza, że wyniki badań uzyskane w wyniku użycia różnych metod porównuje się i łączy. Może to dotyczyć sytuacji łączenia metod jakościowych i ilo-ściowych (Kostera, 2003, za Stańczyk, 2015, s. 244). Efektem triangulacji metod jest triangulacja danych, ponieważ stosując różne metody pozyskuje się zróżni-cowanego rodzaju dane (Stańczyk, 2015, s. 247). Kolejnym rodzajem triangulacji,

o której można mówić w przypadku przeprowadzonych przez autorkę badań, jest triangulacja źródeł (Stańczyk, 2015, s. 248). S. Stańczyk (2015, s. 262) podkre-śla, że metody, które zostaną dobrane do badania, muszą się uzupełniać i służyć odpowiedzi na to samo pytanie badawcze, ponieważ badanie jakościowe pozwala stwierdzić występowanie określonego zjawiska, a ilościowe – ocenić jego nasilenie (Paluchowski, 2012, za Stańczyk, 2015, s. 262).

Wymieniane są następujące potencjalne problemy związane z metodą studium przypadku (za Strumińska-Kutra, Koładkiewicz, 2012, s. 14–35):

■ niebezpieczeństwo utraty obiektywizmu przez badacza. Jest to potencjalny problem każdych badań jakościowych ze względu na interaktywną rolę ba-dacza (i wynikający stąd brak dystansu) oraz możliwe zmiany postrzegania problemu w toku prowadzenia badań;

■ weryfikacja hipotez na podstawie badań jakościowych może być mniej jed-noznaczna niż w przypadku badań ilościowych ze względu na subiektywizm badacza. Zmniejszeniu wpływu subiektywizmu badacza służą jednak for-malne procedury podczas pozyskiwania danych, stosowanie technik anali-tycznych czy triangulacja metod. Zwracana jest również uwaga, że studium przypadku może być przydatne nie tylko w weryfikowaniu, ale też w stawia-niu hipotez, pytań badawczych czy wskazywastawia-niu nowych kierunków badań (Siggelkow, 2007, za Strumińska-Kutra, Koładkiewicz, 2012, s. 34);

■ małe możliwości generalizowania i sposób doboru przypadków do próby. Zdaniem B. Flyvbjerga (2006, za Strumińska-Kutra, Koładkiewicz, 2012, s. 35) uogólnienia nie zawsze są potrzebne. Jednocześnie w pewnych oko-licznościach (związanych z doborem przypadków) generalizacje są możliwe; ■ brak możliwości testowania hipotez na dużych losowo dobranych próbach.

Z drugiej strony możliwe jest uwzględnienie kontekstu zjawiska przy jego badaniu (Eisenhardt i Graebner, 2007, za Strumińska-Kutra, Koładkiewicz, 2012, s. 35). Ta bliskość przedmiotu badań pozwala na uzyskanie pełniejszej wiedzy o nim (Flyvbjerg, 2006, za Strumińska-Kutra, Koładkiewicz, 2012, s. 35).

Autorka przeprowadziła jednokrotne studium przypadku – badanie dotyczy postaw nauczycieli akademickich wobec systemu oceniania okresowego pracow-ników i ich kształtowania na Uniwersytecie X. Nawiązując do typologii przypad-ków R.E. Stake’a (2009, za Strumińska-Kutra i Koładkiewicz, 2012, s. 16), można stwierdzić, że jest to instrumentalne studium przypadku – celem autorki jest bowiem nie tylko poznanie jednego przypadku, ale również próba uogólnienia wniosków na inne jednostki.

Decyzja o jednokrotnym studium przypadku i wyborze Uniwersytetu X podyk-towane są pewną typowością czy reprezentatywnością przypadku – wszystkie uni-wersytety działają na podstawie ustawy Prawo o szkolnictwie wyższym. Ustawa ta określa podstawowe zasady oceniania okresowego pracowników, które znajdują od-zwierciedlenie w systemach oceniania okresowego nauczycieli akademickich, obo-wiązujących na poszczególnych uczelniach. Nauczyciele akademiccy niezależnie

od uniwersytetu, na którym są zatrudnieni, mają te same, również określone usta-wą, podstawowe obowiązki. Elementy systemu oceniania, jak częstotliwość doko-nywania oceny, główne kategorie kryteriów, wykorzystanie ocen są również w du-żym stopniu regulowane przez ustawę. Należy też podkreślić, że SOOP w obecnej formie pojawiły się na różnych uniwersytetach w podobnym momencie (związa-nym z nałożeniem na uczelnie obowiązku oceniania pracowników). Jednakowe dla wszystkich są również zasady finansowania uczelni, z których wynikają sto-sowane kryteria szczegółowe. Powyższe daje możliwość odnoszenia wniosków z przeprowadzonego badania do innych przypadków – uniwersytetów. Dodat-kową zaletą wybranego typu badania jest możliwość dogłębnego zbadania zjawi-ska i zrozumienia go w odniesieniu do kontekstu, w jakim występuje. Dążąc do zmniejszenia potencjalnej subiektywności wynikającej z jakościowego charakteru badania, jedną z technik jest sondaż diagnostyczny, dzięki któremu możliwe jest spojrzenie na postawiony problem również z perspektywy ilościowej. Ogranicze-niem metody jednokrotnego studium przypadku jest trudniejsze i mniej pewne uogólnianie wyników i tworzenie teorii (Strumińska-Kutra, Koładkiewicz, 2012, s. 15), co zdaniem autorki w dużym stopniu eliminowane jest przez typowość wy-branego przypadku.

W ramach przeprowadzonego badania wykorzystano następujące techniki

ba-dawcze: badanie dokumentów, wywiad oraz sondaż diagnostyczny.

Badanie dokumentów jest techniką polegającą na analizie ich treści. Analizy

te mogą mieć charakter zarówno ilościowy, jak i jakościowy. Celem badania może być określenie faktów, ale również pozyskanie danych do prognozowania (Apa-nowicz, 2002, s. 89). Według M. Łobockiego (2010, s. 225) badanie dokumentów składa się z analizy wewnętrznej i zewnętrznej. Analiza wewnętrzna związana jest z poznaniem i wyjaśnieniem treści, jak również rozpoznaniem najważniejszych komponentów, idei i relacji między nimi. Analiza zewnętrzna dotyczy dodatko-wych, zewnętrznych informacji, takich jak na przykład czas i okoliczności powsta-nia dokumentu.

Badanie dokumentów związanych z ocenianiem okresowym nauczycieli aka-demickich zatrudnionych na Uniwersytecie X objęło następujące dokumenty we-wnętrzne lub ich fragmenty dotyczące wyróżnionego aspektu: Statut Uniwersytetu X, uchwały Senatu Uniwersytetu X, dotyczące zasad postępowania przy ocenie okresowej pracowników, punktacji osiągnięć i arkuszy oceny oraz uchwały rad wy-działów, doprecyzowujące kwestie związane z ocenianiem okresowym. Ze wzglę-du na konieczność zachowania anonimowości podmiotu badań nie będą używane nazwy i tytuły dokumentów wewnętrznych. Badanie to służyło scharakteryzowa-niu systemu oceniania okresowego badanej jednostki.

Drugą zastosowaną techniką badań był wywiad wolny nieustrukturyzowany (wywiad niestandaryzowany nieustrukturyzowany). Wywiad to „specyficzna for-ma rozmowy, w trakcie której wiedzę tworzy się w toku interakcji między osobą prowadzącą wywiad a respondentem” (Kvale, 2010, s. 19–20). Wywiad niestanda-ryzowany charakteryzuje się dowolnością w zakresie kolejności zadawania pytań

– to badacz w trakcie wywiadu w zależności od jego przebiegu decyduje o układzie pytań (Gudkova, 2012, s. 114). Prowadzone wywiady były nieustrukturyzowane – zadawane pytania były otwarte, pozostawiające swobodę respondentowi w zakresie formy i treści wypowiedzi (Gudkova, 2012, s. 114). Badanie postaw i zachowań lu-dzi wymaga zastosowania wywiadu swobodnego, by nie zawężać pola badawczego. Taki rodzaj wywiadu daje najbardziej pogłębiony wgląd w badaną problematykę. Dla autorki najważniejszym wynikiem badania były doświadczenia pracowników i ich interpretacje faktów. Interesowało ją ocenianie okresowe pracowników, ale z perspektywy uczestników tego procesu – ich poglądy, doświadczenia, emocje, za-chowania. Autorka nadawała ogólny kierunek prowadzonej rozmowie, jednak zde-cydowała, że kolejność poruszanych tematów nie będzie stała, tylko uzależniona od kierunku, w którym będzie chciał podążać respondent. Badanie dotyczyło postaw, więc szczególnie istotne było zwrócenie uwagi na obszary, które generowały najwię-cej emocji respondenta. Powodowało to, że nie z każdym respondentem rozmowy o poszczególnych zagadnieniach były w tym samym stopniu pogłębione – tak, jak wspomniano, kierowano się odpowiedziami respondenta, jego zainteresowaniem poszczególnymi kwestiami, okazywanymi emocjami. Badanie miało charakter eks-ploracyjny, a celem było poznanie i opisanie postaw wobec systemu oceniania okre-sowego, czynników kształtujących te postawy oraz działań, jakie powinny być pod-jęte w celu zmiany postaw na bardziej pozytywne (z perspektywy respondentów).

Trzecia zastosowana technika badawcza to sondaż diagnostyczny. Jest ona stosowana w celu przebadania dużej zbiorowości w krótkim czasie (Kuc, 2015, s. 130). Technika ta jest polecana, gdy populacja jest zbyt duża i nie ma możliwo-ści bezpośredniej obserwacji (Babbie, 2008, s. 276). Wśród jej zalet wymieniane są: przydatność przy większych zbiorowościach, pewna elastyczność – możliwość zadania większej liczby pytań i większa elastyczność późniejszych analiz, standa-ryzacja, ułatwiająca pomiar, w przypadku próby losowej i prawidłowej konstrukcji kwestionariusza ankiety możliwość uogólniania wyników na całą populację (Bab-bie, 2008, s. 312). E. Babbie (2008, s. 313) zwraca również uwagę, że w porównaniu z wywiadami, badanie ankietowe, dzięki standaryzacji pytań, w dużym stopniu ogranicza nierzetelność obserwacji, związanej z osobą badacza, a w przypadku do-chowania należytej staranności przy formułowaniu pytań, również tej powodowa-nej przez badanych. Zaletą jest również większa skłonność badanych do udzielania odpowiedzi na pytania drażliwe w anonimowej ankiecie niż w trakcie wywiadu (Babbie, 2008, s. 311).

Technika ta ma również słabe strony, a wśród nich wymienia się brak oglą-du całościowego, co przekłada się na brak kontekstu, nieelastyczność, wynikającą z jednej strony z wymogu niezmieniania początkowego kształtu badania w trakcie, a z drugiej z braku obserwacji, a więc często i świadomości wystąpienia dodat-kowych, istotnych zmiennych oraz niekompletne kwestionariusze. Kolejnym pro-blemem jest konieczność przygotowania narzędzia odpowiedniego dla wszystkich badanych, co może prowadzić do pominięcia pytań ważnych dla istotnej ich części ((Babbie, 2008, s. 311–313). Zwraca się uwagę, że nie każdy przedmiot badania jest

odpowiedni do pomiaru przy użyciu kwestionariusza. J. Lutyński (1994, s. 121) podkreśla brak możliwości kontrolowania sposobu wypełniania kwestionariu-sza przez respondenta. Dodatkowo sam proces badania określonego zjawiska, na przykład postaw, może mieć wpływ na to zjawisko. Badany w trakcie odpowia-dania na pytania kwestionariusza może wyrobić sobie opinię o jego przedmiocie. Badaniom ankietowym zarzucane są również problemy z trafnością ze względu na pewną sztuczność formy badania (Babbie, 2008, s. 313).

Założono, że ze względu na odmienną specyfikę obowiązków, spodziewane różnice prowadzenia procesu oceniania okresowego pracowników i wymagań sta-wianych przed zatrudnionymi, uzyskanie katalogu możliwych wyjaśnień dla pre-zentowanych postaw możliwe jest jedynie na podstawie badań przeprowadzonych na wszystkich wydziałach wśród nauczycieli akademickich zajmujących wszystkie typy stanowisk.

Narzędziem badawczym sondażu diagnostycznego był kwestionariusz

ankie-ty, który zawierał pytania zamknięte i trzy otwarte. Pytania dotyczyły poszcze-gólnych aspektów SOOP, takich jak kryteria oceny (ich znajomość, zrozumiałość, ocena dopasowania do wykonywanej pracy), sprawiedliwość punktacji osiągnięć, częstotliwość oceniania, procedury, rola przełożonego, komisji oceniającej i inne. Pytano również o subiektywnie postrzeganą wiedzę pracowników o systemie oce-niania aktualnie oraz w momencie wprowadzania systemu oceoce-niania albo roz-poczynania pracy. Pytania otwarte dotyczyły aktualnych i oczekiwanych celów oceniania. Trzecie z pytań otwartych to dodatkowe uwagi pracowników. Kwestio-nariusz zawierał również część metryczkową, która obejmowała płeć, wiek, stano-wisko, stopień/tytuł naukowy i staż pracy. Uzyskano również informację dotyczącą wydziału, na którym pracownik jest zatrudniony.

Zdecydowano, że badanie postaw zostanie przeprowadzone na podstawie wskaźników, nie zaś bezpośredniej deklaracji respondentów w tym zakresie. Zgod-nie z definicją S. Nowaka wskaźnik jest „pewną cechą, zdarzeZgod-niem lub zjawiskiem, na podstawie zajścia którego wnioskujemy z pewnością bądź z określonym praw-dopodobieństwem, bądź wreszcie z prawdopodobieństwem wyższym od przecięt-nego, iż zachodzi zjawisko, jakie nas interesuje” (Nowak, 1970, za Marody, 1976, s. 33). M. Marody (1976, s. 33) stwierdza występowanie dwóch rodzajów wskaź-ników: empirycznych (dotyczących zjawisk obserwowalnych) i inferencyjnych (dotyczących zjawisk nieobserwowalnych). Postawy należą do tej drugiej kategorii zjawisk, a więc wypowiedzi respondentów dotyczące na przykład uczuć czy zacho-wań są wskaźnikami empirycznymi deklarowanych zachozacho-wań czy przeżywanych emocji, a jednocześnie inferencyjnymi wskaźnikami emocjonalnego czy behawio-ralnego komponentu postawy. Powyższe nie odnosi się do narzędzi służących na przykład do badania postaw utajonych. Autorkę interesują postawy jawne, a stoso-wana technika badania opiera się na samoopisie.

Wnioskowanie o postawach na podstawie wypowiedzi respondentów jest za-grożone wystąpieniem różnego typu błędów. Taki sposób rozumowania przebiega w sposób przedstawiony na rysunku 3.1.

Nauczyciele akademiccy wobec systemu oceniania okresowego…

86

Zakłócenia zarówno relacji ekspresyjnej (brak zgodności pomiędzy rzeczywi-stymi a deklarowanymi odczuciami, wiedzą czy przekonaniami), jak i relacji ko-munikacyjnej zmniejszają poprawność wnioskowania o postawie respondenta.

Relacja ekspresyjna może być zniekształcona świadomie lub nieświadomie przez badanego. Zniekształcenie takie może wystąpić w sytuacji, gdy respondent nie udziela odpowiedzi zgodnej z rzeczywistymi przekonaniami czy uczuciami (Marody, 1976, s. 37–38). Relacja ta może też być zaburzona przez osobę bada-cza, narzędzie badawcze czy błędne założenia teoretyczne. Relacja komunikacyjna może zostać zakłócona przez fizyczne zniekształcenia czy niezgodne rozumienie terminów przez respondenta i badacza.

Opracowując narzędzie badawcze, starano się zminimalizować omówione za-kłócenia. W tym celu na początkowym etapie prac zastosowano metodę sędziów kompetentnych do wyboru stwierdzeń wchodzących w skład wskaźnika emocjo-nalnego, poznawczego i behawioralnego. Kryterium doboru sędziów było posia-danie wykształcenia wyższego psychologicznego. Czterech psychologów otrzyma-ło listę stwierdzeń, spośród których mieli za zadanie wybrać te najlepiej oddające charakter trzech wskaźników. Mieli oni również możliwość przedstawienia wła-snych propozycji. Dalsze prace prowadzone były na podstawie stwierdzeń wskaza-nych przez sędziów. W toku prac stwierdzenia te zostały dopasowane do specyfiki oceniania okresowego na Uniwersytecie X.

Opracowany kwestionariusz był również konsultowany z przedstawicielami środowiska akademickiego, a ich uwagi zostały wykorzystane do zwiększenia zro-zumiałości narzędzia i jego przejrzystości, doprowadziły również do usunięcia części pytań, co do których pojawiły się wątpliwości interpretacyjne.

Mimo podjętych działań po wstępnej analizie danych zdecydowano o odrzuce-niu dwóch pytań ze względu na wątpliwości co do sposobu ich interpretacji przez badanych. Pytania dotyczyły objaśnień do kryteriów oraz przejmowania się pro-cesem oceniania okresowego.

Rysunek 3.1. Przebieg procesu wnioskowania o postawach

na podstawie wypowiedzi respondentów

Źródło: opracowanie na podstawie: Nowak, 1970, za Marody, 1976, s. 36.

interesuje” (Nowak, 1970, za Marody, 1976, s. 33). M. Marody (1976, s. 33) stwierdza występowanie dwóch rodzajów wskaźników: empirycznych (dotyczących zjawisk obserwowalnych) i inferencyjnych (dotyczących zjawisk nieobserwowalnych). Postawy należą do tej drugiej kategorii zjawisk, a więc wypowiedzi respondentów dotyczące na przykład uczuć czy zachowań są wskaźnikami empirycznymi deklarowanych zachowań czy przeżywanych emocji, a jednocześnie inferencyjnymi wskaźnikami emocjonalnego czy behawioralnego komponentu postawy. Powyższe nie odnosi się do narzędzi służących na przykład do badania postaw utajonych. Autorkę interesują postawy jawne, a stosowana technika badania opiera się na samoopisie.

Wnioskowanie o postawach na podstawie wypowiedzi respondentów jest zagrożone wystąpieniem różnego typu błędów. Taki sposób rozumowania przebiega sposób przedstawiony na rysunku 3.1.

Rysunek 3.1. Przebieg procesu wnioskowania o postawach na podstawie wypowiedzi respondentów Źródło: opracowanie na podstawie: Nowak, 1970, za Marody, 1976, s. 36.

Zakłócenia zarówno relacji ekspresyjnej (brak zgodności pomiędzy rzeczywistymi a deklarowanymi odczuciami, wiedzą czy przekonaniami), jak i relacji komunikacyjnej zmniejszają poprawność wnioskowania o postawie respondenta.

Relacja ekspresyjna może być zniekształcona świadomie lub nieświadomie przez badanego. Zniekształcenie takie może wystąpić w sytuacji, gdy respondent nie udziela odpowiedzi zgodnej z rzeczywistymi przekonaniami czy uczuciami (Marody, 1976, s. 37–38). Relacja ta może też być zaburzona przez osobę badacza, narzędzie badawcze czy błędne założenia teoretyczne. Relacja komunikacyjna może zostać zakłócona przez fizyczne zniekształcenia czy niezgodne rozumienie terminów przez respondenta i badacza.

Opracowując narzędzie badawcze, starano się zminimalizować omówione zakłócenia. W tym celu na początkowym etapie prac zastosowano metodę sędziów kompetentnych do wyboru stwierdzeń wchodzących w skład wskaźnika emocjonalnego, poznawczego i behawioralnego. Kryterium doboru sędziów było posiadanie wykształcenia wyższego psychologicznego. Czterech psychologów otrzymało listę stwierdzeń, spośród których mieli za zadanie wybrać te najlepiej oddające charakter trzech wskaźników. Mieli oni również

relacja komunikacyjna relacja

ekspresyjna Postawa wobec

obiektu wypowiedziTreść

respondenta Treść wypowiedzi odebrana i zrozumiana przez badawcza Postawa wobec obiektu

Metodyka badania postaw nauczycieli akademickich… 87