Проверка согласованности мнений экспертов с помощью статистических методов

Коэффициента вариации

Эксперты выражают свое мнение по одному и тому же вопросу.

Пример1.7 экспертов оцениваю x_i - тактику игры в защите волейболиста по трехбалльной системе: 5 –отлично, 4- хорошо, 3 –удовлетворительно. Каково их мнение о тактике игры испытуемого в защите? Мнения экспертов приведены в таблице

 

Таблица 1

эксперты	Баллы xi	xi-	(xi- )2
1	5	0,7	0,49
2	4	-0,3	0,09
3	4	-0,3	0,09
4	5	0,7	0,49
5	3	-1,3	1,69
6	4	-0,3	0,09
7	5	0,7	0,49
7	30		3,43

 

Среднее арифметическое ;

Дисперсия ;

Среднее квадратическое отклонение ;

 

Коэффициент вариации ;

Общее мнение экспертов об игре испытуемого 4,3. Тем не менее коэффициент корреляции 16,3% высок, мнения экспертов недостаточно согласованы.

Вообще говоря, не существует точного эталона для величины коэффициента корреляции, начиная с которого можно было бы заключить о высокой согласованности мнений экспертов. В каждой конкретной ситуации исследователь делает соответствующие выводы.

Эксперты выражают свое мнение по ряду явлений

Выражение ранговое

Пример 2. При выполнении специального теста 12 спортсменов оценены двумя экспертами х_і  и у_і  (см.табл.). d_x и d_y ранги статистических данных, т.е. места вариант в их ранжированной совокупности.

 

Таблица 2

спортсмены	Мнение Эксперта хі ранжированое dx	Мнение Эксперта уі ранжированое dy	dx-dy	(dx-dy)2
1	1	3	—2	4
2	2	2	0	0
3	3	1	2	4
4	4	5	—1	1
5	5	4	1	1
6	6	6	0	0
7	7	8	- 1	1
8	8	7	1	1
9	9	9	0	0
10	10	10	0	0
11	11	11	0	0
12	12	12	0	0
12				12

 

 

Для выяснения согласованности мнений экспертов находим коэффициент ранговой корреляции Спирмена.

Вывод: Мнения экспертов следует считать согласованными.

Эксперты ( m ) выражают свое мнение по ряду явлений ( n )

 

При двух экспертах степень согласованности оценивается по ранговой корреляции их ответов, при большем числе экспертов используют коэффициент конкордации:

 

    

 

Где  – ранг оцениваемого качества,  – средний ранг, рассчитывается по формуле (13), m – число экспертов, n – число оцениваемых качеств, причем 0≤W≤1

    

В зависимости от степени согласованности мнений экспертов W лежит в пределах от 0 (при отсутствии согласованности) до 1 (при полном единодушии экспертов).

Пример:

Проранжированы 5 спортсменов тремя кандидатами в эксперты. Определите степень согласованности экспертов.

Для решения задачи необходимо заполнить таблицу 9.

Таблица 9.

№ эксперта	№ спортсмена					Сумма
	1	2	3	4	5
1.	5	1	3	4	2
2.	5	3	2	4	1
3.	4	2	3	5	1
	14	6	8	13	4	45
	5	-3	-1	4	-5
	25	9	1	16	25	76

Где R_i – сумма присвоенных рангов каждому спортсмену, например: R₁=5+5+4=14; R₂=1+3+2=6… и т. д.

 – средний ранг:

Вывод: коэффициент конкордации равен 0,84. Следовательно, степень согласованности экспертов высокая.

 

Выполнение практического задания.

 

1. Разбившись на группы в 3-4 человека, проранжируйте по степени важности следующие пять качеств, необходимых в Вашей будущей профессиональной деятельности.

 

1) Спортивная квалификация

2) Теоретические знания

3) Педагогическое мастерство

4) Призвание

5) Добросовестность

 

2. Оцените по коэффициенту конкордации степень согласованности мнений в каждой группе. Для этого:

 

1) Каждый эксперт (студент в группе) ранжирует качества по своему усмотрению, не ориентируясь на мнения других экспертов, и выставляет полученные ранги в строку со своим номером в таблицу 10.

Таблица 10.

№ эксперта	№ качества					Сумма
	1	2	3	4	5
1.
2.
3.
…

2) Определите , суммируя полученные ранги по каждому качеству от каждого эксперта.

3) Рассчитайте ∑   и  по формуле 13, как показано в примере.

4) Для получения  необходимо вычесть из данных предыдущей строки .

5) При расчете  Предыдущая строка возводится в квадрат.

6) Получите ∑

7) Подставьте полученные значения в формулу 12 и получите значение коэффициента конкордации W.

3. Определите степень согласованности данной группы экспертов по величине коэффициента конкордации.

4. Запишите полученный вывод.

 

Практическое занятие №15

Для афк

Тема: ОЦЕНКА КАЧЕСТВА ИСПОЛНИТЕЛЬСКОГО МАСТЕРСТВА В СПОРТЕ (ХУДОЖЕСТВЕННАЯ ГИМНАСТИКА, АКРОБАТИКА, СПОРТИВНЫЕ ТАНЦЫ И ДР.)

Цель:  познакомиться с оценкой качества исполнительского мастерства в технико-эстетических видах спорта .

Рассматриваемые вопросы:

1. Основные подходы к изучению качества исполнительского мастерства.

2.  Качественные характеристики, определяющие уровень исполнительского мастерства в технико-эстетических видах спорта.

 

⇐ Предыдущая891011121314151617Следующая ⇒

Поделиться: