Аналіз результатів та висновки
Оцінити статистичну значущість обчислених значень коефіцієнта j:
а) вибирається рівень значущості a = 0,05;
б) для кожного пункту обчислюється емпіричне значення критерію з 2 за формулою:
; деn- число випробуваних.
Обчислення дають такі результати: χемп1 2 = 0,206; χемп2 2 = 7,2; χемп3 2 = 3,04; χемп4 2 = 0,81; χемп5 2 = 0,303; χемп6 2 = 0,67; χемп7 2 = 0,36; χемп8 2 = 0,255; χемп9 2 = 0,22.
За таблицею (див. додаток 3) визначити критичне значення c 2 при a = 0,05,n= 20,df= 1 (деdf– число степенів свободи).
Якщо c 2 емп 2 кр, приймається гіпотезаН0 про те, що j = 0. Якщо c 2 емп > c 2 кр, приймається гіпотезаН1 (j ¹ 0).
Вказати придатні для використання у опитувальнику пункти. Аналізу піддаються ті пункти, котрим підтвердилася гіпотезаН1 (j ¹ 0); якщо при цьому j & gt; 0,5, то відповідний пункт вважається придатним для використання у тесті. Використаний нами коефіцієнт чотириклітинної кореляції j може набувати значень від -1 до +1. Якщо знак j негативний, то ключ відповідного пункту змінюється на протилежний знак.
У нашому випадку придатним виявився лише пункт 2.
Лабораторна робота №17
Надійність-константність тесту
Вступні зауваження. Надійність– константністьтесту характеризує стійкість результатів тих самих випробуваних до впливу особистості тих, хто проводить психодіагностичне обстеження. Процедура перевірки цього виду надійності полягає у порівнянні результатів обстеження групи піддослідних різними психодіагностами. Як показник константності використовується коефіцієнткореляції, що показує тісноту зв'язку між результатами двох випробувань.
Мета: оцінити надійність– константність первинної форми опитувальника.
Матеріал: тест, що перевіряється, таблиці з математичної статистики, калькулятор.
Хід роботи
1. Скласти вибірку стандартизації шляхом випадкового вибору піддослідних із генеральної сукупності.
2. Першому експериментатору провести обстеження даної вибірки за допомогою опитувальника, що оцінюється. Отримані сумарні бали досліджуваних занести до графи «Сумарний бал Е1» таблиці 28.
3. Провести обстеження цієї ж вибірки за допомогою опитувальника, що оцінюється, але іншим експериментатором. Отримані сумарні бали досліджуваних занести до графи «Сумарний бал Е2» таблиці 28.
Розрахунок коефіцієнта константності
Обробка результатів
1. Проранжувати сумарні бали досліджуваних, отримані під час тестування першим експериментатором. Дані занести до графиR1 таблиці 28.
2. Проранжувати сумарні бали досліджуваних, отримані під час тестування другим експериментатором. Дані занести до графиR2 таблиці 28.
3. Знайти різницю рангів кожного випробуваногоR1 –R2 і занести у відповідний стовпець таблиці.
4. Обчислити квадрати різниць рангів (R1 -R2) 2 .
5. Обчислити суму квадратів різниць рангів S(R1 –R2) 2 .
6. Підставити отримане значення суми у формулу для обчислення коефіцієнта рангової кореляції Спірмена:
Аналіз результатів та висновки
Перевірити статистичну значущість отриманого коефіцієнта кореляціїr:
а) вибирається рівень значущості a = 0,05;
б) за таблицею (див. додаток 4) визначаєтьсякритичне значення коефіцієнта кореляції при a = 0,05 іn= 20.
Якщоr>rкритий, то гіпотезаН0 - не вірна, приймається гіпотезаН1 про те, щоr¹ 0.
Зробити висновок про константність тесту.
Тест має гарну константність, якщо отриманий коефіцієнт кореляції більше 0,80 [18].
ВАЛІДНІСТЬ ТЕСТА
За визначенням А. Анастазі: «Валідність тесту – поняття, що показує, що тест вимірює і наскільки добре він це делает»[19]. Валідність за своєю суттю – це комплексна характеристика вимірювальної процедури, що оцінює придатність методики для вимірювання того, для чого вона була створена, та її дієвість, ефективність. Перевірка валідності методики називається валідизацією. Вона полягає у зіставленні результатів, отриманих при застосуванні діагностичної методики до групи піддослідних, з даними тієї ж групи піддослідних, але отриманими за певним зовнішнім критерієм. Кількісним показником валідності є коефіцієнт валідності, який визначається шляхом обчислення коефіцієнта кореляції, що характеризує тісноту зв'язку між балами тесту і балами за зовнішнім критерієм. Залежно від характеру використовуваних вимірювальних шкал обчислюють коефіцієнт лінійної кореляції за Пірсоном (при використанні шкали інтервалів або шкали відносин), або коефіцієнт рангової кореляції за Спірменом (при використанні порядкової шкали). Тест вважається валідним, якщо коефіцієнт кореляції статистично значущий. У цьому низьким визнається коефіцієнт валідності порядку 0,20-0,30, середнім – 0,30-0,50 і високим – понад 0,60[20].
У психометриці виділяється низка видів валідності, зумовлених особливостями діагностичних методик, а також тимчасовим статусом зовнішнього критерію.
2. Емпірична валідність полягає у здатності тесту вимірювати деяке психічне явище, від наявності або вираженості якого залежать показники, що характеризують ефективність тієї чи іншої сфери практичної діяльності людей. Такими показниками є успішність, злочинність, захворюваність, аварійність, продуктивність праці тощо. буд. Їх прагнуть або підвищити, або знизити з допомогою засобів різних наук, зокрема психології. Тому виникає потреба у вимірі тих психологічних змінних, яких залежать ці показники. Зазначені показники використовуються як зовнішні критерії емпіричної валідності тесту, що вимірює відповідну психологічну змінну. Емпірична валідизація передбачає вимірювання кореляції між балами за тестом та показником практичної діяльності, обраним як зовнішній критерій валідності.
Залежно від тимчасового статусу зовнішнього критерію розрізняють три види валідності.
3. Поточна валідність (валідність «за одночасністю») визначається за допомогою зовнішнього критерію, за яким інформація збирається одночасно з вимірами за методикою, що перевіряється. Процедура поточної валідизації полягає в синхронному зборі даних за критерієм та тестом. Як такий критерій може використовуватися: успішність, продуктивність, плинність кадрів, захворюваність тощо.
4. Прогностична (передбачувана) валідність визначається за зовнішнім критерієм, інформація за яким збирається через деякий час після випробування. Зовнішнім критерієм може бути успішність виконання будь-якої діяльності, на початок виконання якої з допомогою валидизируемого тесту оцінювалася здатність людини до цієї діяльності. Цей спосіб валідизації найбільшвідповідає задачі діагностики - передбачення майбутньої успішності. Однак застосовувати його дуже важко, оскільки точність прогнозу залежить від тривалості часового проміжку між вимірюванням критерію і проведенням тесту. Чим більший цей період, тим більше факторів потрібно враховувати в оцінці прогностичної значущості методики.
5. Ретроспективна валідність визначається на основі критерію, стан якого оцінювалося в минулому – до проведення випробування за допомогою валідизованої методики. Процедура ретроспективної валідизації може бути використана для швидкого отримання відомостей про передбачувальні можливості методики. Наприклад, з метою оцінки можливості передбачення успішності за результатами тесту здібностей можна порівняти попередні оцінки успішності з результатами випробування їх здібностей нині.
6. Конвергентна та дискримінантна валідність. У тесті бажано мати тільки такі пункти, які однозначно інформували б тільки про один фактор, що підлягає виміру. Але пункти тесту практично детермінуються як релевантними, і іррелевантними чинниками. Для характеристики здатності тесту вимірювати релевантний фактор та протистояти дії іррелевантних факторів використовуються наступні два види валідності.
Конвергентна валідність полягає в здатності тесту інформувати про релевантний фактор, що виступає як предмет вимірювання. Вона забезпечується відповідністю пунктів фактору, що вимірюється.
Дискримінантна валідність–це здатність тесту компенсувати спотворювальну дію іррелевантних факторів на результати тесту. Вона досягається шляхом балансування пунктів щодо іррелевантних факторів. Пункти вважаються збалансованимищодо іррелевантних факторів, якщо на множині всіх пунктів тесту жоден іррелевантний фактор не зустрічається частіше за інших. Емпірично дискримінантна валідність виявляється у відсутності значної кореляції з тестом, що вимірює концептуально незалежну властивість.
7. Конструктна валідність - це ступінь репрезентації вимірюваного психологічного конструкту в результатах тесту. Вона характеризує ступінь представленості теоретичних положень про сутність та структуру вимірюваної психологічної змінної у завданнях тесту. За наявності валідизованого тесту, що вимірює даний конструкт, конструктна валідність визначається шляхом обчислення коефіцієнта кореляції між балами досліджуваних по тесту і старому тесту.
При наведенні даних про валідність розробленої методики необхідно вказати вид валідності, відомості про чисельність та особливості вибірки, яка використовувалася для проведення валідизації. Це дозволяє оцінити, наскільки придатною є дана методика для обстеження тієї чи іншої групи. Якщо обстежувана вибірка піддослідних істотно відрізняється від тієї, де проводилася перевірка валідності, необхідно заново провести процедуру валідизації.