Аналіз принципів побудови стандартних методик експертної оцінки

В електротехніці при проектуванні звуковідтворювальних систем на останньому етапі розробки проводиться суб`єктивна експертиза готової конструкції. Сутність випробування полягає в тому, що експерти за допомогою випробовуваної апаратури прослуховують ряд музичних програм і за результатами прослуховування кожної програми оцінюють якість звучання апаратури за 10-бальною шкалою.

В рамках психологічного практикуму був поставлений експеримент, одним із завдань якого було визначення впливу змісту прослуховується програми на оцінки якості звучання (КЗ). Експерти оцінювали КЗ двох звуковідтворювальних пристроїв: програвача грамплатівок і магнітофона. Апаратура була підібрана таким чином, щоб можна було аксіоматизована значну перевагу КЗ пластинки над КЗ магнітофона.

Для прослуховування використовувалися дві програми проста, побудована на позитивних і "ліричних" емоціях, і складна, з переважанням похмурих тонів. Після кожного прослуховування експерти оцінювали КЗ і загальне враження (ОВ) за 10-бальною шкалою.

При цьому виявилася сильна залежність оцінок КЗ від змісту програми, дуже великий розкид в оцінках (похибка 30-50%), низька повторюваність результатів. Оцінки в генеральної сукупності розподіляються таким чином, що можна припустити, що експерти уникають крайніх оцінок. Отже, шкалу можна вважати равноінтервальной, і вона годиться для оцінок КЗ тільки за рангом.

Введення шкали "ОВ" дозволило виявити ефект "розігріву" експертів. У міру "розігріву" зменшується розкид оцінок ОВ, посилюється кореляція між оцінками ОВ і КЗ і збільшується розкид оцінок КЗ, тобто експерти уточнюють свою думку про КЗ (причому кожен по-своєму). Це призводить до збільшення варіативності оцінок КЗ і говорить про те, що, користуючись цією методикою, точну оцінку КЗ отримати взагалі неможливо, оскільки у міру уточнення оцінки КЗ все сильніше проявляється індивідуальність кожного експерта.

При переході від простої програми до складної статистичні дані, що описують звуковідтворювальний пристрій, змінюються так, як якщо б погіршився КЗ: чим складніше зміст музичного твору, тим вище вимоги до якості апаратури.

Існує стандарт AES (audio engineering society), згідно з яким КЗ оцінюється не по одній, а по декількох (чистота звучання, тембральная однорідність та ін.) Шкалами. Однак очевидно, що введення декількох шкал принципового вирішення проблеми не дає. Потрібна зміна принципів оцінки КЗ, більш поглиблена психологічна опрацювання проблеми.

Меклер А.А.

Увага, тільки СЬОГОДНІ!