Педагогічна експертиза учбової книги
При експертній оцінці якості учбової книги основні операції виконуються в чотири етапи: підготовчий етап, етап робочої групи, етап експертної групи, завершальний етап.
I. На підготовчому етапі проводиться відбір учбових книг для експертної оцінки керівниками Міністерства просвіти СРСР, АПН СРСР, НДІ СиМО і т. п., формулюють ця цілі експертизи. Керівниками відповідних відомств видається наказ про створення експертної комісії, призначаються організатор експертизи і технічні працівники. Організатор експертизи формує склад робочої групи, складає програму експертизи, організовує експертні групи і комісії і руководить їх діяльністю. Окрім виконання звичних функцій по ГОСТ 23554.0–79, він розподіляє роботу технічних робітників. Робоча група включає, окрім організатора експертизи і технічних працівників, групу ведучих експертів консультантів, мають досвід роботи в експертних комісіях.
II. На етапі робочої групи визначаються методи, способи і процедури, які слід застосувати при рішенні задач експертною групою. При цьому робоча група виходить з особливостей учбової книги, термінів і умов проведення експертизи, допустимий трудомісткості. Робоча група з числа кандидатів в експерти формує експертну групу, визначаючи її структуру, професійний склад, кількість експертів.
Однією з важливих проблем експертизи є проблема, як визначити до початку опиту необхідне і достатнє число експертів. Деякі розрахункові формули для визначення необхідної і достатньої чисельності експертної групи приведені в роботі Р.Г. Азгальдова. Оскільки чисельність експертів залежить від багатьох чинників, таких, як допустимі витрати праці, кваліфікація експертів, погрішність колективної оцінки і т. п., то привести єдину формулу, що дозволяє визначати чисельність експертної групи, нам представляється неможливим. Ми приведемо тут деякі загальні міркування щодо шляхів рішення цього питання.
Виходячи з поставленої задачі, робоча група визначає верхню і нижню межі можливої кількості експертів. Ці межі ми позначимо відповідно Nmax і Nmin. Виходячи з цього, утворюється група кандидатів в експерти. Якщо Nке – число кандидатів в експерти, то ясно, що Nmax ≥ Nке. Рішення про включення того або іншого фахівця в групу кандидатів в експерти приймає організатор експертизи і консультант після бесіди, що дозволяє проаналізувати ступінь відповідності фахівця вимогам, що пред'являються.
Уточнюючи параметри поставленої задачі, робоча група приводить формулу знаходження N. Найпростіша з них:
. (1)
Нижче ми приведемо і інші формули для розрахунку чисельності експертної групи.
Для відбору експертів з числа кандидатів в експерти можна користуватися відомими методами: взаємних рекомендацій, документальних оцінок, самооцінки або різними комбінаціями цих методів. Повна характеристика якості експерта може бути одержана шляхом обчислення комбінованої оцінки j-го кандидата в експерти:
де α, β, γ, – коефіцієнти ваговитості анкет взаємних рекомендацій анкетних даних, самооцінки, відповідно;
– відповідні коефіцієнти, одержані кандидатом в експерти при аналізі вище перелічених анкет.
Як ілюстрацію приведемо можливі розрахункові формули чисельності експертної групи для оцінки якості учбової книги по даній анкеті.
Хай k – кількість основних пунктів анкети, qеі – значення колективної експертної оцінки і-гo пункту (l≥i≥k), qісі – істинне значення оцінюваного пункту, Δ qі = | qеі – qісі| – абсолютная погрішність qеі, γі – довірча вірогідність (надійність), з якою визначено qеі, dі = dітах – dітіп – розмах оцінок i-гo пункту, δi = di/Δqі, аі – коефіцієнт ваговитості і-го пункту анкети .
Відомо, що визначення qісі часто утруднено по ряду «принципових» міркувань, але можна вказати верхню і нижню межі допустимих значень Δ qеі: [aqі, bqі]. ............