Reliability i validity to pojęcia używane do oceny jakości badań. Wskazują one, jak dobrze dana metoda, technika lub test coś mierzy. Rzetelność dotyczy spójności pomiaru, a trafność – dokładności pomiaru.
Ważne jest, aby wziąć pod uwagę rzetelność i trafność podczas tworzenia projektu badania, planowania metod i opracowywania wyników, zwłaszcza w badaniach ilościowych.
| Reliability | Validity | |
|---|---|---|
| Co Ci to mówi? | Stopień, w jakim wyniki mogą być odtworzone, gdy badania są powtarzane w tych samych warunkach. | Stopień, w jakim wyniki naprawdę mierzą to, co mają mierzyć. |
| Jak to się ocenia? | Sprawdzając spójność wyników w czasie, między różnymi obserwatorami i między częściami samego testu. | Sprawdzając, jak dobrze wyniki odpowiadają ustalonym teoriom i innym miarom tej samej koncepcji. |
| Jak się odnoszą? | Wiarygodny pomiar nie zawsze jest ważny: wyniki mogą być powtarzalne, ale niekoniecznie są poprawne. | Ważny pomiar jest generalnie wiarygodny: jeśli test daje dokładne wyniki, powinny być one powtarzalne. |
Zrozumienie rzetelności i ważności
Retelność i ważność są ściśle powiązane, ale oznaczają różne rzeczy. Pomiar może być wiarygodny, ale nie musi być ważny. Jednakże, jeśli pomiar jest ważny, zazwyczaj jest również wiarygodny.
Co to jest wiarygodność?
Reliability odnosi się do tego, jak konsekwentnie dana metoda mierzy coś. Jeśli ten sam wynik może być konsekwentnie osiągnięty przy użyciu tych samych metod w tych samych okolicznościach, pomiar jest uważany za wiarygodny.
Co to jest wiarygodność?
Ważność odnosi się do tego, jak dokładnie metoda mierzy to, co ma mierzyć. Jeśli badania mają wysoką wiarygodność, oznacza to, że dają wyniki, które odpowiadają rzeczywistym właściwościom, cechom i wariacjom w świecie fizycznym lub społecznym.
Wysoka wiarygodność jest jednym ze wskaźników, że pomiar jest ważny. Jeśli metoda nie jest wiarygodna, prawdopodobnie nie jest ważna.
Jeśli termometr pokazuje za każdym razem inną temperaturę, mimo że warunki są starannie kontrolowane, aby zapewnić, że temperatura próbki pozostaje taka sama, termometr prawdopodobnie działa nieprawidłowo, a zatem jego pomiary nie są ważne.
Jednakże wiarygodność sama w sobie nie wystarcza do zapewnienia ważności. Nawet jeśli test jest wiarygodny, może niedokładnie odzwierciedlać rzeczywistą sytuację.
Ważność jest trudniejsza do oceny niż rzetelność, ale jest nawet ważniejsza. Aby uzyskać użyteczne wyniki, metody, których używasz do zbierania danych, muszą być ważne: badanie musi mierzyć to, co twierdzi, że mierzy. To gwarantuje, że Twoje omówienie danych i wyciągnięte wnioski są również ważne.
Jak ocenia się rzetelność i trafność?
Retelność można oszacować porównując różne wersje tego samego pomiaru. Ważność jest trudniejsza do oszacowania, ale można ją oszacować poprzez porównanie wyników z innymi odpowiednimi danymi lub teorią. Metody szacowania rzetelności i trafności są zwykle podzielone na różne typy.
Typy rzetelności
Różne typy rzetelności mogą być szacowane za pomocą różnych metod statystycznych.
| Typ rzetelności | Co ocenia? | Przykład |
|---|---|---|
| Test-retest | Spójność pomiaru w czasie: czy otrzymujesz te same wyniki, gdy powtarzasz pomiar? | Grupa uczestników wypełnia kwestionariusz zaprojektowany do pomiaru cech osobowości. Jeśli powtarzają kwestionariusz w odstępie kilku dni, tygodni lub miesięcy i udzielają tych samych odpowiedzi, wskazuje to na wysoką rzetelność test-retest. |
| Interrater | Spójność pomiaru pomiędzy oceniającymi lub obserwatorami: czy uzyskuje się te same wyniki, gdy różne osoby przeprowadzają ten sam pomiar. | Na podstawie listy kontrolnej kryteriów oceny pięciu egzaminatorów przedstawia znacząco różne wyniki dla tego samego projektu studenckiego. Wskazuje to, że lista kontrolna ma niską rzetelność międzylaboratoryjną (na przykład dlatego, że kryteria są zbyt subiektywne). |
| Spójność wewnętrzna | Spójność samego pomiaru: czy otrzymujesz takie same wyniki z różnych części testu, które mają mierzyć to samo? | Zaprojektowałeś kwestionariusz do pomiaru poczucia własnej wartości. Jeśli losowo podzielisz wyniki na dwie połowy, powinna istnieć silna korelacja między dwoma zestawami wyników. Jeśli te dwa wyniki są bardzo różne, wskazuje to na niską spójność wewnętrzną. |
Typy ważności
Ważność pomiaru można oszacować na podstawie trzech głównych rodzajów dowodów. Każdy typ może być oceniany za pomocą oceny eksperckiej lub metod statystycznych.
| Typ ważności | Co ocenia? | Przykład |
|---|---|---|
| Konstrukcja | Przystawalność miary do istniejącej teorii i wiedzy na temat mierzonego pojęcia. | Kwestionariusz poczucia własnej wartości może być oceniany poprzez pomiar innych cech, o których wiadomo lub zakłada się, że są związane z pojęciem poczucia własnej wartości (takich jak umiejętności społeczne i optymizm). Silna korelacja pomiędzy wynikami w zakresie poczucia własnej wartości a powiązanymi cechami wskazywałaby na wysoką trafność konstrukcyjną. |
| Zawartość | Stopień, w jakim pomiar obejmuje wszystkie aspekty mierzonej koncepcji. | Test, który ma na celu zmierzenie poziomu znajomości języka hiszpańskiego w danej klasie uczniów, zawiera komponenty dotyczące czytania, pisania i mówienia, ale nie zawiera komponentu dotyczącego słuchania. Eksperci zgadzają się, że rozumienie ze słuchu jest istotnym aspektem umiejętności językowych, więc testowi brakuje trafności merytorycznej do pomiaru ogólnego poziomu umiejętności w języku hiszpańskim. |
| Kryterium | Stopień, w jakim wynik pomiaru odpowiada innym trafnym pomiarom tej samej koncepcji. | Sondaż jest przeprowadzany w celu zmierzenia opinii politycznych wyborców w regionie. Jeśli wyniki dokładnie przewidują późniejszy wynik wyborów w tym regionie, oznacza to, że ankieta ma wysoką ważność kryterialną. |
Aby ocenić ważność związku przyczynowo-skutkowego, należy również rozważyć ważność wewnętrzną (projekt eksperymentu) i zewnętrzną (możliwość uogólnienia wyników).
Jak zapewnić ważność i wiarygodność w swoich badaniach
Wiarygodność i ważność Twoich wyników zależy od stworzenia silnego projektu badawczego, wyboru odpowiednich metod i prób oraz starannego i konsekwentnego prowadzenia badań.
Zapewnienie ważności
Jeśli używasz punktacji lub ocen do pomiaru zmian w czymś (takich jak cechy psychologiczne, poziom zdolności lub właściwości fizyczne), ważne jest, aby Twoje wyniki odzwierciedlały rzeczywiste zmiany tak dokładnie, jak to możliwe. Walidacja powinna być brana pod uwagę już w najwcześniejszych etapach badania, kiedy decydujemy o sposobie zbierania danych.
- Wybierz odpowiednie metody pomiaru
Pewność, że metoda i technika pomiaru są wysokiej jakości i ukierunkowane na pomiar dokładnie tego, czego chcemy się dowiedzieć. Powinny być dokładnie zbadane i oparte na istniejącej wiedzy.
Na przykład, aby zebrać dane na temat cechy osobowości, można użyć standaryzowanego kwestionariusza, który jest uważany za wiarygodny i ważny. Jeśli opracujesz własny kwestionariusz, powinien on opierać się na teorii ugruntowanej lub wynikach wcześniejszych badań, a pytania powinny być starannie i precyzyjnie sformułowane.
- Wykorzystaj odpowiednie metody doboru próby w celu wybrania uczestników badania
Aby uzyskać wiarygodne, możliwe do uogólnienia wyniki, jasno zdefiniuj badaną populację (np. osoby z określonego przedziału wiekowego, o określonym położeniu geograficznym lub zawodzie). Upewnij się, że masz wystarczającą liczbę uczestników i że są oni reprezentatywni dla tej populacji.
Zapewnienie wiarygodności
Reliability powinno być brane pod uwagę w całym procesie zbierania danych. Kiedy używasz narzędzia lub techniki do zbierania danych, ważne jest, aby wyniki były precyzyjne, stabilne i powtarzalne.
- Stosuj swoje metody konsekwentnie
Starannie zaplanuj swoją metodę, aby upewnić się, że wykonujesz te same kroki w ten sam sposób dla każdego pomiaru. Jest to szczególnie ważne, jeśli w badaniu bierze udział wielu badaczy.
Na przykład, jeśli prowadzisz wywiady lub obserwacje, jasno określ, w jaki sposób będą liczone konkretne zachowania lub odpowiedzi, i upewnij się, że pytania są za każdym razem tak samo sformułowane.
- Standaryzuj warunki badania
Gdy zbierasz dane, utrzymuj jak najbardziej spójne okoliczności, aby zmniejszyć wpływ czynników zewnętrznych, które mogą powodować zmienność wyników.
Na przykład, w przypadku eksperymentu, upewnij się, że wszyscy uczestnicy otrzymali te same informacje i byli badani w tych samych warunkach.
Gdzie pisać o rzetelności i trafności w pracy dyplomowej
Właściwe jest omawianie rzetelności i trafności w różnych częściach pracy dyplomowej. Pokazanie, że wziąłeś je pod uwagę przy planowaniu badań i interpretacji wyników, czyni Twoją pracę bardziej wiarygodną i godną zaufania.
| Sekcja | Dyskusja |
|---|---|
| Przegląd literatury | Co zrobili inni badacze, aby opracować i udoskonalić metody, które są wiarygodne i ważne? |
| Metodologia | Jak zaplanowali Państwo swoje badania, aby zapewnić rzetelność i ważność zastosowanych środków? Obejmuje to wybrany zestaw i wielkość próby, przygotowanie próby, warunki zewnętrzne i techniki pomiarowe. |
| Wyniki | Jeśli obliczyłeś rzetelność i ważność, podaj te wartości obok głównych wyników. |
| Dyskusja | To jest moment, aby porozmawiać o tym, jak rzetelne i ważne były Twoje wyniki. Czy były one spójne, i czy odzwierciedlały prawdziwe wartości? Jeśli nie, to dlaczego? |
| Wniosek | Jeśli wiarygodność i ważność były dużym problemem dla twoich wyników, pomocne może być wspomnienie o tym tutaj. |