Надійність і валідність психодіагностичних методик

Перш ніж псіходіагностіческіеметодікі можуть бути використані для практичних цілей, вони повинні пройти проверкупо ряду формальних критеріїв, які доводять їх високу якість і еффектівность.К числа основних критеріїв оцінки психодіагностичних методик відносяться надійність валідність.

Великий внесок у розробку цих понять внесли зарубіжні психологи (А. Анастази, Е. Гізеллі, Дж. Гілфорд, Л. Кронбах, Р. Торндайк, Е. Хаген і ін.). Ними були розроблені формально-логічний і математико-статистичний апарат ( перш за все кореляційний метод і фактичний аналіз) обґрунтування степенісоответствія методик зазначеним критеріям.

Втрадіціонной тестології термін «Надійність» означає относітельноепостоянство, стійкість, узгодженість результатів тесту при первинному іповторном його застосуванні на одних і тих же випробовуваних.

Надёжностьметодікі - це критерій, який говорить про точність псіхологіческіхізмереній, тобто дозволяє судити про те, наскільки вселяють довіру полученниерезультати.

Етосогласованность результатів тестування випробовуваних в різні моменти часу, при первинному і вторинному тестуванні і з використанням різних за еквівалентності, за змістом завдань. Надійність характеризує тести властивостей, але не станів.властивості:

1. Відтворюваність рез-тов дослідження.
2. Точність вимірювання.
3. Стійкість результатів.

Степеньнадёжності методик залежить від багатьох причин. серед негативних факторівнайбільш часто називаються такі:

1. нестабільність діагностується властивості;
2. недосконалість діагностичних методик (недбало складена інструкція, завдання за своїм характером різнорідні, нечітко сформульовані указаніяпо пред`явленню методики випробуваним і т.д.);
3. змінюється ситуація обстеження (різний час дня, коли проводятсяексперіменти, різна освітленість приміщення, наявність або відсутність посторонніхшумов і т.д.);
4. відмінності в манері поведінки експериментатора (від досвіду до досвіду по-разномупред`являет інструкції, по-різному стимулює виконання завдань і т.д.);
5. коливання в функціональному стані випробуваного (в одному експеріментеотмечается гарне самопочуття, в іншому - стомлення і т.д.);
6. елементи суб`єктивності в способах оцінки та інтерпретації результатів (коли ведеться протоколювання відповідей випробовуваних, оцінюють відповіді поступово повноти, оригінальності і т.д.).

Одніміз найважливіших засобів підвищення надійності методики є однаковість процедуриобследованія, його сувора регламентація: однакова обстановка, однотипний характерінструкцій, однакові для всіх тимчасові обмеження, способи і особенностіконтакта з випробуваними і так далі.

Нахарактерістіку надійності методик великий вплив робить досліджувана виборка.Она може, як знижувати, так і завищувати цей показник, наприклад, надійність, може бути штучно завищена, якщо у вибірці невеликий розкид результатів, тобто. якщо результати по своїм значенням близькі один до одного. Тому в руководствеобично робиться опис вибірки, на якому визначалася надійність методики.

Внастоящее час надійність все частіше визначається на найбільш однорідних вибірках, тобто. на вибірках, схожих за статтю, віком, рівнем освіти, профессіональнойподготовке і т.п.

Разновідностейнадёжності методик так само багато, як і умов, що впливають на результати діагностіческіхіспитаній. Так як всі види надійності відображають ступінь узгодженості двухнезавісімо отриманих рядів показників, то математико-статистичний прийом, за допомогою якого встановлюється надійність методики, - це кореляції (поПірсону або Спирмену). Надійність тим вище, чим більше отриманий коеффіціенткорреляціі наближається до одиниці, і навпаки.

К.М.Гуревіч запропонував тлумачити надійність як:

1. надійність самого вимірювального інструмента (коефіцієнт надійності);
2. стабільність досліджуваного ознаки (коефіцієнт стабільності);
3. константность, тобто відносну незалежність результатів від Лічностіексперіментатора (коефіцієнт константності).

Показник, що характеризує вимірювальний інструмент, пропонується називати коеффіціентомнадёжності- показник, що характеризує стабільність вимірюваного властивості, коефіцієнт стабільності- а показник оцінки впливу Особистості експеріментатора- коефіцієнтом константності. Саме в такому порядку рекомендується осуществлятьпроверку методики: доцільно спочатку перевірити інструмент вимірювання. Есліполученние дані задовільні, то можна переходити до встановлення меристабільності вимірюваного властивості, а вже після цього при необхідності занятьсякрітеріем константності. (Надійність: ретестовой, паралельних форм, частейтела, по внутрішньої узгодженості, факторно-дисперсійна).

Определеніенадежності вимірювального інструмента. Від того як складена методика, наскільки правильно підібрані завдання, наскільки вона однорідна залежить точність, об`єктивність вимірювання.

Дляпроверкі надійності вимірювального інструмента, говорить про його однорідності (гомогенності) використовують метод розщеплення. Завдання ділять на парні і непарні (необхідне виконання всіх завдань), а потім результати корелюються междусобой. Якщо методика однорідна, то великої різниці в успішності за цими половінамне буде, коефіцієнт буде високим. Можна порівнювати по частинах, але краще почесним і непарних, тому що цей спосіб не залежить від тренування, стомлення і т.д.

Методіканадежна, якщо коефіцієнт не нижче 0,75 - 0,85, краще 0,90і вище.

Определеніестабільності досліджуваного ознаки. Також необхідно встановити насколькоустойчів, стабільний ознака, який дослідник має намір вимірювати. Прізнаксо часом може змінюватися, але коливання його не повинні мати непредсказуемийхарактер.

Дляпроверкі використовується прийом, який називається тест-ретест. Він заключаетсяв повторному обстеженні випробовуваних за допомогою цієї ж методики. Про стабільностісудят за коефіцієнтом кореляції між результатами першого та другого обследованія.Он буде свідчити про збереження або не збереження кожним іспитуемимсвоего порядкового номера в вибірці.

Настепень стійкості впливає різноманітність фактора. Необхідно дотримуватися едінообразіепроцедури обстеження.

Привизначенні стабільності ознаки велике значення має проміжок временімежду 1 і 2 обстеженнями. Чим коротший цей проміжок, тим більше шансів, чтоетот ознака зберігає рівень першого випробування. Доцільно проводити повторноетестірованіе через короткий термін після тестування. Експериментатор сам устанавліваететот термін, але частіше в психологічній літературі вказують на інтервал від несколькіхмесяцев (але не більше півроку). Питання про стабільність вимірюваного властивості решаетсяне завжди одноманітно. Рішення залежить від сутності діагностується ознаки.

Есліізмеряемое властивість вже сформовано, то коефіцієнт повинен бути не нижче 0,80.

Определеніеконстантності, тобто відносна незалежність результатів від Лічностіексперіментатора. Так як методика розробляється для подальшого использованияи іншими псіходіагностамі, необхідно визначити в якій мірі її результатиподдаются впливу особистості експериментатора. Коефіцієнт константності определяетсяпутем кореляції результатів двох дослідів, проведених на одній і тій же вибірці, але різнимиекспериментаторами. Коефіцієнт кореляції не повинен бути нижче 0,80.

Вопросо валідності вирішується після того, як встановлена надійність, так як ненадежнаяметодіка не може бути валидной.

валідністьтесту - поняття, яке вказує нам, що тест вимірює і наскільки хорошоон це робить (А. Анастазі). валідність за своєю суттю - це комплекснаяхарактерістіка, що включає, з одного боку, відомості про те, чи придатна методікадля вимірювання того, для чого вона була створена, а з іншого боку, яка еёдейственность, ефективність, практична корисність.

Тому причин не існує якогось єдиного універсального підходу до определеніювалідності. Залежно від того, яку сторону валідності хоче рассмотретьісследователь, використовуються і різні способи доказу. Іншими словами, поняття валідності включає в себе різні її види, які мають свій особливий смисл.Проверка валідності методики називається валидизация.

Валідность- відповідність конкретного дослідження прийнятим стандартам (безупречномуексперіменту).

Валідностьв першому її розумінні має відношення до самої методикою, тобто це валідностьізмерітельного інструменту. Така про-верка називається теоретичної валідізаціей.Валідность в другому її розумінні вже відноситься не стільки до методики, сколькок мети її використання. Це прагматична валидизация.

Прітеоретіческой валидизации дослідника цікавить саме властивість, ізмеряемоеметодікой.

Таккак для визначення теоретичної валідизації важко знайти який-небудь незавісімийкрітерій, що лежить поза методики, і тому раніше приймалися на віру голословниеутвержденія про валідності цієї методики. Так як теоретична валидизация направленана доказ того, що методика вимірює саме властивість, яке вона должнаізмеріть. Для теоретичної валідизації кардинальною проблемою є отношеніемежду психологічними явищами і їх показниками, за коштами якої етіпсіхологіческіе явища намагаються пізнати. Вона показує, що задум АВТОРАЙ результати методики збігаються.

Нестоль складно здійснити теоретичну валідизацію нової методики, якщо длявимірювання даного властивості вже є методика з відомою, доведеною валідностью.Налічіе кореляції між новою і аналогічної старої методиками вказує нато, що розроблена методика вимірює той же психологічний якість, щоі еталонна.

Дляпроверкі теоретичної валідності важливо, з одного боку, встановити степеньсвязі зі спорідненою методикою (конвергентна валідність), а з іншого -відсутність зв`язку з цим з методиками, що мають інше теоретичної підставу (дискримінантний валідність).

Важнуюроль для розуміння того, що методика вимірює, грає зіставлення її показателейс практичними формами Діяльності. Важливо щоб методика була проработанав теоретичному плані.

Прагматіческаявалідізація

Проверяетсяпрактіческая ефективність, значущість, корисність методики, так як методікойможно користуватися тільки тоді, коли доведено, що вимірюється властивість проявляетсяв певних видах Діяльності.

Дляпроверкі прагматичної валідності використовується незалежний зовнішній критерій показник прояву досліджуваного властивості у повсякденному житті. У качестветакого критерію можуть виступати успішність (для тестів здібностей до навчання, тестів досягнень, тестів інтелекту), виробничі досягнення (для методікпрофессіональной спрямованості), ефективність реальної Діяльності -рісованія, моделювання і так далі (для тестів спеціальних здібностей), суб`єктивні оцінки (для тестів особистості).

Амеріканскіеісследователі Тіффін і Маккормік виділили 4-е типу зовнішнього критерію:

1. Критерій виконання (кількість виконуваної роботи, успішність, час, темп зростання кваліфікації).
2. Суб`єктивні критерії (включають різні види відповідей, які отражаютотношеніе людини до чого-небудь, його думки, погляди).
3. Фізіологічний критерій (використовується при вивченні впливу зовнішнього середовища, що впливає на організм і психіку).
4. Критерій випадковості (наприклад, коли мета стосується проблеми відбору дляроботи таких осіб, які менш схильні до нещасних випадків).

Внешнійкрітерій повинен володіти 3 основними вимогами:

1. Повинен бути релевантним, тобто повинна бути впевненість, що в крітеріізадействовани саме ті особливості індивідуальної психіки, які ізмеряетдіагностіческая методика. Зовнішній критерій і діагностична модель должнинаходіться у внутрішньому смисловому відповідно.
2. Повинен бути вільним від перешкод (контамінації). Слід відбирати для ісследованіятакіе групи людей, які знаходяться в більш-менш однакових умовах.
3. Повинен бути надійний. Сталість і стійкість досліджуваної функції.

Оценкавалідності методики може носити колічественнийі якісний характер.

Длявичісленія кількісного показника (коефіцієнта валідності) сопоставляютсярезультати, отримані при застосуванні діагностичних методик, з даними техже осіб, отримані за зовнішнім критерієм. Використовуються різні види лінійної кореляції (по Спирмену, по Пірсену).

Качественноеопісаніе суті вимірюваного властивості. Тут не використовують статистичну обробку.

Существуютнесколько видів валідності, обумовлених особливостями діагностіческойметодікі, а також тимчасовим статусом зовнішнього критерію:

1. Валідність «за змістом» (використовується в тестах досягнення): 3 - 4 питання з великої теми можуть показати справжні знання ученіка.Для цього результати діагностики порівнюють з експертними оцінками вчителя.
2. Валідність «по одночасності» або поточна валідність -збирає дані, що відносяться до теперішнього часу: успішність, продуктивність тощо З ними корелюють результати успішності по тесту.
3. «Пророкує» валідність ( «прогностична»). Визначається по надійного критерію, але інформація по ньому собіраетсянекоторое час після випробування. Точність прогнозу знаходиться в обратнойзавісімості від часу, заданого для такого прогнозування.
4. «Ретроспективна» валідність. Визначається на основі критерію, що відображає події або стан якості в минулому. Може бути іспользованадля швидкого отримання відомостей про Предсказательная можливості методики.

Увага, тільки СЬОГОДНІ!