Оценка ретестовой надежности теста

 

№ п/п	Первое тестирова-ние Х1	Второе тестирование Х2	R1	R2	R1 - R2	(R1 - R2)2
				10.5	-3.5	12.25
			10.5	7.5
				13.5	0.5	0.25
				13.5	2.5	6.25
			10.5	16.5	-6
			18.5	18.5
			20.5		0.5	0.25
				13.5	0.5	0.25
				7.5	-0.5	0.25
			10.5	7.5
			1.5		-1.5	2.25
				16.5	0.5	0.25
				13.5	0.5	0.25
				7.5	-0.5	0.25
			1.5		-1.5	2.25
			10.5	10.5
			20.5		-0.5	0.25
			18.5	18.5

 

По таблице найти критическое значение r_крит для a = 0,05 и п = 23 (см. Приложение 4). r_крит = 0,34.

Сравнить эмпирическое и критическое значения коэффициента корреляции:

0,96 > 0,34,

следовательно, гипотеза Н₀: r = 0 – отвергается, и принимается гипотеза Н₁: r ¹ 0.

Анализ результатов и выводы

Оценить уровень ретестовой надежности опросника.

Надежность считается: удовлетворительной, если ее показатель не ниже 0,7; достаточной, если 0,75< r <0,85; хорошей при 0,85< r <0,9; высокой при коэффициенте порядка 0,90 и более.

У проверяемого теста высокий уровень надежности (r = 0,96).

 

 

Лабораторная работа № 16

Ретестовая надежность отдельных пунктов теста

 

Вводные замечания. Чтобы повысить ретестовую (диахронную) надежность теста в целом, надо отобрать из исходного набора пунктов, такие пункты, на которые испытуемые дают устойчивые во времени ответы. Надежность-устойчивость дихотомических пунктов (типа “решил — не решил”, “да — нет”) оценивается коэффициентом j (фи), который удобно вычислять с помощью четырехклеточной матрицы сопряженности.

Цель: оценить надежность-устойчивость отдельных пунктов первичной формы опросника для измерения экстраверсии-интроверсии.

Материал: проверяемый тест, таблицы по математической статистике, калькулятор.

Ход работы:

1. Случайным образом составить выборку стандартизации.

2. Провести обследование испытуемых с помощью оцениваемого теста.

3. Через две недели провести повторное обследование тех же испытуемых.

4. Полученные результаты внести в таблицу для подсчета показателей надежности-устойчивости отдельных пунктов теста (см. табл. 27).

Таблица 27

Оценка надежности-устойчивости отдельных пунктов первичной формы опросника для измерения

Экстраверсии-интроверсии

№ п/п	Номера пунктов и ответов испытуемых
1т	2т	1т	2т	1т	2т	1т	2т	1т	2т	1т	2т	1т	2т	1т	2т	1т	2т
	+	+	-	-	+	+	+	-	-	-	-	+	-	+	+	+	+	+
	+	+	-	+	-	-	+	+	+	-	+	+	-	-	-	-	+	-
	-	-	-	-	+	+	+	-	+	+	+	+	+	+	-	-	-	-
	-	+	+	-	+	+	-	-	-	-	-	+	-	-	+	+	+	+
	+	+	-	-	+	+	+	-	+	+	+	+	-	+	+	+	-	+
	+	+	+	+	-	-	+	+	-	-	+	+	-	+	+	+	-	+
	+	+	+	+	-	-	+	-	+	-	+	+	-	+	+	+	-	+
	+	+	-	-	-	-	+	+	+	+	-	+	-	-	+	-	-	-
	-	+	-	+	+	+	+	-	-	+	+	+	-	-	+	-	-	-
	+	-	-	-	-	+	+	+	-	+	-	-	-	+	+	-	-	-
	+	+	-	-	-	+	+	-	-	+	-	+	-	+	+	+	-	-
	-	-	-	-	+	+	+	+	-	+	-	+	-	+	+	+	-	-
	+	-	-	-	-	+	+	+	+	+	+	+	-	+	-	+	+	+
	-	-	+	+	+	-	-	-	-	-	-	+	+	-	+	-	+	+
	-	+	+	+	+	-	+	+	+	+	+	+	+	-	-	-	+	+
	-	+	+	+	-	-	-	-	-	-	-	+	-	-	+	-	+	-
	+	+	+	-	+	+	+	+	+	-	+	+	-	+	+	+	-	+
	+	+	+	+	+	+	-	+	-	+	+	+	+	-	-	-	+	-
	+	-	+	+	-	+	+	-	-	+	-	-	+	+	-	+	-	+
	+	+	+	+	+	+	+	-	+	+	+	-	+	+	-	+	-	+
a
b
c
d
j	0.206	0.6	0.39	0.204	0.123	0.183	-0.13	0.113	0.105
c2	0.85	7.2	3.04	0.81	0.303	0.67	0.36	0.255	0.22

 

Обработка результатов

1. Для каждого пункта тестов подсчитать количество испытуемых, ответивших на данный пункт при первом и втором тесте «ДА». Результат занести в графу «а».

2. Для каждого пункта тестов подсчитать количество испытуемых, ответивших на данный пункт при первом тесте «НЕТ», при втором тесте «ДА». Результат занести в графу «b».

3. Для каждого пункта тестов подсчитать количество испытуемых, ответивших на данный пункт при первом тесте «ДА», при втором тесте «НЕТ». Результат занести в графу «с».

4. Для каждого пункта тестов подсчитать количество испытуемых, ответивших на данный пункт при первом и втором тесте «НЕТ». Результат занести в графу «d».

5. Для каждого пункта теста вычислить показатель надежности-устойчивости – коэффициент - j - по формуле:

.

Отсюда .

Аналогично получаем: j₂ = 0,6; j₃ = 0,39; j₄ = 0,201; j₅ = 0,123; j₆ = 0,183; j₇ = -0,134; j₈ = 0,113; j₉ = 0,105

 

Анализ результатов и выводы

Оценить статистическую значимость вычисленных значений коэффициента j:

а) выбирается уровень значимости a = 0,05;

б) для каждого пункта вычисляется эмпирическое значение критерия c² по формуле:

; где n – число испытуемых.

Вычисления дают следующие результаты: χ_эмп²=0,206; χ_эмп²=7,2; χ_эмп²=3,04; χ_эмп²=0,81; χ_эмп²=0,303; χ_эмп²=0,67; χ_эмп²=0,36; χ_эмп²=0,255; χ_эмп²=0,22.

По таблице (см. приложение 3) определить критическое значение c² при a = 0,05, n = 20, df = 1, (где df – число степеней свободы).

Если c²_эмп. < c²_кр., то принимается гипотеза Н ₀ о том, что j = 0. Если c²_эмп. > c²_кр., то принимается гипотеза Н ₁ (j ¹ 0).

Указать пригодные для использования в опроснике пункты. Анализу подвергаются только те пункты, для которых подтвердилась гипотеза Н₁ (j ¹ 0); если при этом j > 0,5, то соответствующий пункт считается пригодным для использования в тесте. Использованный нами коэффициент четырехклеточной корреляции j может принимать значения от 0 до 1. Если знак получаемого j отрицательный, то ключ соответствующего пункта меняется на противоположный знак.

В нашем случае пригодным оказался только пункт 2.

Лабораторная работа № 17