Название и содержание данной статьи находятся в заметном противоречии с реальной российской практикой создания систем контроля знаний. В официальных документах по созданию таких систем настоящие тесты и педагогические измерения не упоминаются. Там есть так называемые контрольно-измерительные материалы (КИМы), неизвестные в мировой практике педагогических измерений. Надо понимать, что это не  тесты, и не средства педагогических измерений, хотя их производит специально созданный институт педагогических измерений (ФИПИ). Такой странный, но, в общем, знакомый случай подмены нужного метода примитивной и ненужной подделкой.

Тестирование - наукоёмкая сфера общественно-профессиональной деятельности. В этой сфере без развития культуры и теоретического фундамента педагогических измерений все практические системы контроля знаний обречены быть затратными, некачественными, нежизнеспособными и очень вредными для дела образования. Этот известный в науке вывод подтверждается неудачным опытом внедрения в России двух практических систем - централизованного тестирования (ЦТ) и единого государственного экзамена (ЕГЭ). Другая важная причина непригодности ЦТ и ЕГЭ - бюрократическое управление этими системами, их необеспеченность научными проектами и общественной поддержкой.

Идея перехода от ЦТ и ЕГЭ к системе педагогических измерений, развиваемая в данной статье, возникла как результат исследования вопросов методологии и теории педагогических измерений, научного анализа существующей образовательной политики и практики.

Ключевые слова: система, педагогические измерения, оценка, экзамены, тест, тестирование, ЕГЭ

Введение

Цель настоящей статьи - поставить и раскрыть проблему становления научной системы объективных педагогических измерений. В России эта система оказалась практически не существующей. Это произошло из-за укоренившейся практики подмены педагогических измерений элементарными словесными или цифровыми оценками, централизованным тестированием, некачественным и затратным единым государственным экзаменом.
Для полноценного становления российской системы педагогических измерений необходимо рассмотреть перечень ключевых вопросов: выставление оценок, возможности тестового метода, опыт ЦТ и ЕГЭ. Этот опыт был построен на ошибочной идее возможности получения качественной оценки испытуемых сразу двух различающихся контингентов - выпускников школ и абитуриентов вузов - единым набором заданий.

Автор этой статьи неоднократно отмечал, что в массовом процессе аттестация выпускников школ - это, в основном, вопрос проверки усвоения образовательного минимума, а приём в вузы - это совсем другая проблема - профессионального отбора, требующего качественных тестов с высокой различающей способностью, на интересующих интервалах континуума подготовленности. А потому единого (универсального) метода для использования в системах оценки выпускников школ и отбора абитуриентов вузов различной профессиональной направленности нет. И быть не может. Надо понимать, что это глупость. Содержание теста для отбора в вузы зависит от требований профессии к способностям испытуемых, а трудность теста - от квоты приёма.

Но чиновники считают иначе. А потому в централизованном тестировании и в ЕГЭ ими упорно проводилась в жизнь политически привлекательная, но метрически ошибочная линия на создание единого метода аттестации выпускников и приёма абитуриентов всех вузов. В едином государственном экзамене в роли такого универсального метода стали использоваться КИМы, качество которых оказалось ниже всякой критики.

Кто виноват и что делать? - вот вопросы, на которые пришлось искать ответы в настоящей статье.

Три системы оценки знаний

На сегодняшний день сложились три основные системы оценивания уровня подготовленности учащихся и студентов. Слово "оценивание" здесь употреблено как аналог английского понятия "evaluation". При использовании этого понятия полезно иметь в виду два аспекта его употребления: первый - в смысле полученного результата, словесной или цифровой оценки, и второй аспект - в смысле процесса формирования получаемой оценки. В науке понятие "оценка" имеет тоже два основных смысла - как суждение о ценности (или значимости) и как приблизительная характеристика некоторой величины.

Первая система оценивания знаний - это традиционная словесная градация успешности в обучении, а затем и пришедшая ей на замену более удобная пятибалльная цифровая шкала. Обе используются практически неограниченно во всех образовательных учреждениях России. Пятибалльная шкала применяется для проведения текущего и итогового контроля, имеет своим главным преимуществом простоту и привычность. Это объясняет её широкую и длительную, по времени, распространенность. Но пятибалльная шкала имеет и существенный недостаток - субъективность, или иначе, они зависимы от того, кто оценивает и кого оценивают.

Вторая система, апробированная в России - это централизованное тестирование (ЦТ). Там итоговая оценка возникала как результат процесса тестирования. Она была внешне похожа на западную систему объективного тестирования, независимого от государства. Но только внешне. Потому что тестирование оказалось государственным по сути, а качество тестов, технология их разработки, степень научного обоснования до западного уровня явно не дотягивали.

Централизованное тестирование начиналось в России как кооперативная коммерческая деятельность. Коммерческим было, соответственно, и понимание этой деятельности. Самое интересное в этом деле - ЦТ поначалу не было ни централизованным, ни тестированием, а лишь одной из форм платной массовой проверки знаний.

Постепенно тестирование стало развиваться, обычные вопросы начали заменяться высказываниями, улучшились тестовые формы, стали применяться и публиковаться статистические методы анализа результатов. Автор этой статьи в меру сил способствовал развитию ЦТ, особенно в кризисный период. Но помехи и вмешательство со стороны чиновников Министерства образования делали работу в ЦТ практически невозможной. Они требовали представить им задания заранее, под предлогом необходимости рецензирования, а это означало утечку заданий и ответов.  В России не было и нет независимого тестового процесса.

Тестовый процесс представляет единство теории педагогических измерений с практикой разработки и применения тестов. Существенное место в этом единстве занимают тестовые задания. В новых образовательных технологиях ключевую роль начинают занимать задания в тестовой форме. Тестовый процесс является частью второго процесса - педагогических измерений[1]. Существенные характеристики тестового процесса - направленность на развитие личности и общества, на улучшение образовательной деятельности, на гуманизм и культурность.

С окончательным утверждением ЕГЭ в качестве единого метода оценивания уровня подготовленности выпускников школ и абитуриентов, работа центра тестирования в качестве самостоятельного субъекта деятельности была фактически приостановлена. Он стал технологическим придатком министерского ЕГЭ. Главной причиной считаются политика расширения территории ЕГЭ и выступление директора ЦТ на радио "Свобода" с критикой этого государственного экзамена [2].

Третья система массового оценивания - единый государственный экзамен. Подлинное авторство бездарной схемы ЕГЭ не установлено, и желающих признаться в этом нет. По одной версии ввести ЕГЭ предложило Министерство образования РФ[3], по другой - идея ЕГЭ прорабатывалась в центре стратегических исследований, по третьей версии - в администрации Президента, и оттуда усилиями тайных лоббистов она попала в Правительство РФ. Эта маленькая тайна будет, возможна, раскрыта по истечении большого времени.

В распоряжении Правительства Российской Федерации 10 июля 2001 года N910-р объявлялось, что ЕГЭ вводится с целью обеспечения объективности, унификации итоговой аттестации и вступительных испытаний системы профессионального образования[4]. Идея объективности выглядела привлекательно, но в связке с ошибочной идеей унификации метода сразу же теряла в доверии.

Документально удалось установить, что истоки ЕГЭ просматриваются в планах ввести дифференцированную плату за высшее образование. Планом действий Правительства Российской Федерации на Министерство образования была возложена обязанность организации, в 2001-2003 годах, эксперимента по переходу на нормативно-подушевое финансирование учреждений высшего профессионального образования, с использованием государственных именных финансовых обязательств (ГИФО)[6], на основе результатов вводимого для этой цели единого государственного экзамена. Вузы и местная власть быстро осознали - чем выше оценки испытуемых по ЕГЭ, тем больше денег они получат из бюджета на образовательные нужды. Началось повальное завышение оценок. Однако в Министерстве финансов быстро разобрались в этом дефекте ЕГЭ и отказались выделять дополнительные суммы. В результате ГИФО отменили.

Но ЕГЭ остался живым и невредимым. Этот экзамен определённо не тест, и не тестирование, как это поначалу преподносилось педагогическому обществу[7]. Но это и не экзамен в обычном понимании этого слова. В ЕГЭ применяются КИМы неизвестного качества. В первой и второй части КИМов используются тестоподобные задания, а в третьей части содержатся текстовые задачи завышенной трудности, за выполнение которых экзаменаторы выставляют повышенные баллы.

По данным автора этой статьи, по многим территориям РФ эти баллы коррелируют отрицательно с баллами по первой и второй части. Интерпретировать этот факт можно по-всякому. Но очевидно, что при такой структуре метода складывать баллы первых двух частей с баллами третьей части КИМов неразумно. Сумма баллов испытуемых при таком сложении становится похожей на среднюю температуру по больнице.

В ЕГЭ была поставлена политически привлекательная, но метрически ошибочная задача - создать один универсальный набор вопросов и задач (КИМ), пригодный для государственного отбора на все специальности, всех вузов и для аттестации всех выпускников школ. Министерство образования и науки знает об этой ошибке, но её устранением заниматься не хочет или не может, поскольку это граничило бы с невыполнением политической воли, проявленной свыше.

Проведение в России единого государственного экзамена и государственной аккредитации вузов дало мощное начало росту нового витка коррупции в сфере образования. В итоге Россия оказалась отброшенной уже на 143 место по уровню некоррупционности[8]. По данным ООН, в России ежегодная общая сумма взяток за поступление в ВУЗы составляет 520 миллионов долларов[9].

ОСОКО

Сейчас уже можно говорить ещё об одной, четвёртой системе оценивания, которая пока не внедрена, но уже широко обсуждается на различных совещаниях. Она называется общероссийской системой оценки качества образования (ОСОКО) и мыслится её создателями как не имеющая аналогов в мире. Фактически ОСОКО призвана установить не только полный контроль уровня подготовленности уровня подготовленности всех учащихся и студентов, но и тотальный чиновно-административный контроль за работой всех образовательных учреждений России, во всех краях, областях и даже в автономных республиках.

"Предлагаемая нами схема такова - сообщает А.А.Фурсенко[10] относительно ОСОКО:

- для всех выпускников школ обязательна сдача ЕГЭ по установленным предметам, один из которых, безусловно, русский язык;

- экзамены по другим предметам могут сдаваться в форме ЕГЭ или традиционно;

- для поступления в вуз необходима сдача ЕГЭ по тем предметам, по которым установлены вступительные испытания в выбранный выпускником вуз.

А.А.Фурсенко добавил, что в перспективе целесообразно, в рамках развития общероссийской системы оценки качества образования, вести также разработку и апробацию независимых и объективных процедур оценки образовательных достижений учащихся по завершении обучения на ступенях начального и основного общего образования (после 4-го и 9-го кл.)"[11].

Эти слова министра можно понимать так: сейчас опять будет введён ЕГЭ, а в перспективе целесообразно разрабатывать другие, независимые методы, но обязательно в рамках новой тотальной государственной системы ОСОКО. Тогда возникает вопрос: - какие методы и независимые от кого собирается ввести министерство образования и науки?

Любопытны упоминания об "объективных процедурах оценки". В русском языке понятие "процедура" ассоциируется с оформлением какого-либо дела, или с лечебным мероприятием [12]. Оценивание - это отображение уровня развития свойства личности числами или словами. И это процесс, который бывает объективным только тогда, когда оценки испытуемых не зависят от набора заданий теста, а оценки параметров заданий не зависят от уровня подготовленности испытуемых[13]. Достижение такого рода идеала объективности возможно только в хорошо организованном тестовом процессе. Зная реальное отношение министерства к настоящему независимому тестированию, легко понять, что массовый процесс объективных педагогических измерений в Россию придёт не скоро.

Круговорот понятий

Культурное исследование проблем педагогических измерений немыслимо без создания системы научных понятий. Потому что любое измерение в общественных науках начинается с концептуализации, с поиска признаков, образующих то или иное понятие, попадающего в фокус измерения. На русском языке такой системы научных понятий педагогических измерений сейчас нет, хотя отдельные попытки её создания уже предпринимались, в том числе и автором этой статьи[14]. Здесь предстоит серьёзная расчистка понятийного поля, сильно засорённого плохими переводами английской лексики случайными людьми в этой специфической области знаний.

Анализ использованных во всех трёх системах понятий показывает удивительный результат. Если в них отставить, на время, в сторону все поясняющие определения в таких словосочетаниях, как "пятибалльная оценка", "централизованное тестирование", "единый государственный экзамен" и "система оценки качества образования", то останутся такие ключевые слова: оценка, тестирование, экзамен и ещё раз оценка. Используемое два раза ключевое слово "оценка", в начале и в конце, указывает на своего рода понятийный круг или круговорот понятий.

Оппоненты могут возразить, что нельзя отрывать ключевые понятия от определяющих их слов. Согласимся с ними, объединим понятия и определяющие слова, упорядочим и сопроводим их кратким комментарием. Получится примерно такой текст: в России на смену ранее существовавшей субъективной пятибалльной оценке пришло объективированное централизованное тестирование. Затем тестирование, как более прогрессивный метод педагогических измерений, министерские работники заменили баллами псевдонаучного единого государственного экзамена, неизвестного качества. Теперь на смену некачественным оценкам ЕГЭ может придти ещё более некачественная оценка в общероссийской системе оценки качества образования.

Пятибалльная шкала оценивания

В середине тридцатых годов XIX века была осознана неадекватность системы оценки знаний задачам, поставленным перед советской школой. В Постановлении Совета Народных Комиссаров и ЦК ВКП(б) от 3 сентября 1935 г. утверждалось, что установленная Наркомпроссами система оценки успеваемости не дает представления о фактических знаниях учащихся и ведет, на практике, к понижению уровня учебы. А потому учебному отделу ЦК ВКП(б) поручалось "разработать, обязательно для всех школ СССР, нормы оценки успеваемости учащихся, с тем, чтобы один и тот же уровень знаний одинаково оценивался во всех школах".

Ввиду неспособности учебного отдела ЦК партии решить эту задачу, поручение так и осталось невыполненным. Не решили её и все последующие поколения руководящих деятелей союзного, а позже и российского образования. На этом, собственно, партийные опыты по улучшению качества оценок учащихся закончились. Если не считать введение цифровой пятибалльной оценки, или иначе, цифровых отметок, как числовых эквивалентов оценок качества подготовленности учащихся.

Цифровая пятибалльная оценка была введена в советскую школу как начальный этап улучшения дел. Это было сделано Постановлением Совета Народных Комиссаров РСФСР от 10 января 1944 года. Постановление было принято, как там писалось, "в целях более четкой и точной оценки успеваемости" и замены "словесной системы" оценки успеваемости - отлично, хорошо, посредственно, плохо и очень плохо - соответствующей цифровой пятибалльной системой 5, 4, 3, 2 и 1. Интересна деталь - постановлением предписывалось ввести цифровую пятибалльную систему отметок немедленно, со следующего дня - 11 января 1944 г., от момента публикации.

В других странах сложилась традиция отмечать единицей отличные знания, а пятеркой - плохие. Из этого видно, что одинаковым оценкам можно ставить в соответствие различные цифры-отметки. Интересны суждения об отметках известного педагога Ш. А. Амонашвили: "в отметках мало педагогики...в них больше власти. Отметки - это костыли хромой педагогики"[15].

Основной недостаток пятибалльной шкалы оценок касается ее слабой дифференцирующей способности. Она позволяет провести грубую упорядоченную классификацию только на четыре группы - отличников и тех, кто учится хорошо, удовлетворительно и неудовлетворительно. Более тонкое различение, особенно нужное на приемных и выпускных экзаменах, в экспериментальной работе и для целей эффективного управления качеством обучения пятибалльная шкала не даёт, и дать не может. Отсюда понятна актуальность вопроса совершенствования педагогических оценок на основе измерений.

Пятибалльная шкала оставляет мало простора для вариации оценок. Последнее обстоятельство затрудняет внедрение статистических методов обоснования преимущества новых подходов в обучении и воспитании, препятствует качественной проверке учебников, учебных пособий, а также экспериментальной проверке эффективности организационных и воспитательных мероприятий.

Для выставления итоговых оценок по пятибалльной шкале применялась, и всё ещё продолжает применяться в России, экзаменационная форма проверки знаний. Проведение экзаменов имеет длительную историю, превышающую четыре тысячи лет[16]. Труды по истории экзаменов представлены у ряда авторов[17].

Экзамен - это традиционная и нетехнологичная форма педагогического контроля уровня подготовленности, в процессе которой делаются попытки оценить у испытуемого, в основном, знания, умения и навыки. Экзамен характеризуется высокими затратами времени, субъективизмом, нетехнологичностью. В массовых процессах экзамены стараются применять меньше по причине экономической неэффективности. Экзамены обычно содержат вопросы и задачи. Там тестов не бывает. Тестирование и экзамен - это сильно различающиеся методы.

Экзамены применяются в России, в программах международного исследования PISA, на Тайване[i] и в других стран Юго-Восточной Азии. Преимущества этого метода - возможность оценить речевые способности учащихся, провести углубленную проверку знаний по избранным темам, в небольших учебных группах. В условиях малых групп лучше обеспечивается связь между содержанием обучения и содержанием экзамена. Но для массового процесса измерения уровня подготовленности испытуемых экзамены не годятся.

При использовании экзаменов для приёма в вуз они сами нередко становятся инструментом коррупции. Это вторая причина, по которой экзамены принципиально не применяются в странах, имеющих развитые системы образования.

Третьим недостатком экзаменов является несравнимость оценок, полученных студентами разных институтов, по одной и той же дисциплине, и отсюда - принципиальная невозможность корректно установить - в каком вузе процесс обучения поставлен лучше? Ответ на этот вопрос можно дать только в случае использования стандартной тестовой программы посредством применения тестов и технических средств контроля. Поэтому с управленческой точки зрения полезность тестовых оценок заметно выше экзаменационных.

Можно вывести, что в наше время эффективное измерение подготовленности больших масс испытуемых посредством экзаменов экономически неэффективно. Этот вывод относится и к единому государственному экзамену, представляющему эклектическую смесь тестоподобных заданий и конкурсных, предельно трудных задач. Для получения качественных измерений используют настоящие тесты.

Тестирование

Самым распространённым в мире массовым методом оценки знаний является тестирование. Оно применяется в США, странах Латинской Америки, Европы, Казахстане, Азии и в странах Юго-Восточной Азии. По сравнению с научно-обоснованными тестами, все другие методы оценки знаний оказываются менее эффективными, менее точными, более субъективными и более подверженными коррупции. Не случайно президенты Казахстана и Украины, по примеру многих государств, не разрешают в своих странах использование иных методов массового контроля знаний, кроме тестов.

Необходимо отметить, что не всякий тест лучше экзамена, а только тот, который разрабатывается и применяется на основе теорий педагогических измерений. Тест лучше применять при массовой проверке знаний по той или иной учебной дисциплине в школе, у абитуриентов, на отдельных студенческих потоках, факультетах и в институтах. С целью повышения эффективности таких масштабных проверок рекомендуется использование технических средств контроля, стандартных бланков и использование ЭВМ, что позволяет в короткий срок собрать информацию, обработать ее и выдать результаты.

Тестовый метод имеет и некоторые отрицательные последствия с точки зрения цели и содержания учебного процесса. Если целью является сдать учебный предмет, то учащиеся обычно учат только тот материал, который включён в итоговый тест. А это содержание примерно тридцати заданий, рассчитанных на 30-40 минут. Тестирование имеет также социально-психологические издержки, особенно в случаях, если тестовая оценка становится решающей для формирования жизненной и профессиональной траектории развития молодёжи[18].

Централизованное тестирование

В последние двадцать лет для контроля знаний стали использоваться компьютерные технологии. Они получили широкое распространение на Западе и должны были каким-то образом внедриться в России. Формой внедрения оказалось централизованное тестирование (ЦТ).

Централизованное тестирование определялось ранее как добровольный, платный процесс оценки уровня достижений выпускников школ[19]. По итогам такого тестирования испытуемым выдавался сертификат. В сертификате указывалось количество баллов, полученных испытуемым по каждой учебной дисциплине. Результаты тестирования засчитывались многими школами в качестве выпускных экзаменов в школах и ВУЗами, в качестве результатов вступительных испытаний. В некоторых вузах сертификаты Централизованного тестирования принимались во внимание при поступлении только на платную форму.

В приказах Министерства образования утверждалось, что создан Всероссийский Центр тестирования, имеющий свои региональные представительства и выдающий, за плату, государственные сертификаты поступающим в вузы. Слово "государственный" из приказов затем исчезло, а "негосударственный" так и не появилось, что создавало впечатление неопределенности фактического статуса центра тестирования.

Попытка определения ЦТ как образовательной услуги порождала цепочку вопросов. Первый из них - юридический статус ЦТ. На конференции 1999 года автор этой статьи отметил спорный статус ЦТ: оно продолжало оставаться ни государственным, ни частным[20]. Буквально на следующий день после публикации тезисов докладов ЦТ, прямо на конференции, был объявлен государственным учреждением, в соответствии с только что подписанным приказом. Вместе с тем, приказами Минобразования государственное ЦТ выдавало 10% своих "государственных" сертификатов частной фирме "Телетестинг". На вопросы - почему 10%, и на какой юридической, лицензионной, методической, договорной или иной основе это делалось - ответов не было.

Важный вопрос - качество тестов. Оно не соответствовало требованиям, предъявляемым к тесту как системе параллельных заданий равномерно возрастающей трудности, позволяющей оценить структуру и уровень подготовленности испытуемых[1]. Настоящий тест эффективно применим в массовых процессах, ввиду кратковременности и экономической эффективности. Хорошо, если время педагогического тестирования не превышает сорок минут.

Если рассматривать ЦТ как деятельность государственного органа по регулированию вопросов отбора абитуриентов в вузы, то данное истолкование входит в противоречие с Конвенцией по борьбе с дискриминацией в области образования (Париж, 14 декабря 1960 г.). В соответствии с этой Конвенцией Россия обязана не воздвигать барьеры перед своими гражданами на пути получения образования, не закрывать никому доступ к образованию любой ступени или типа; не ограничивать образование какого-либо лица

Низкое качество тестов - главная нерешённая проблема в работе центров тестирования в России и других странах бывшего СССР. Основная причина производства и применения некачественных тестов - монополизация тестовой деятельности министерствами образования, отсутствие мотивов и возможности приглашения учёных работать в центрах тестирования. Не случайно в большинстве центров тестирования стран СНГ в условиях бюрократического управления практическим тестированием учёным-педагогам места не оказалось. В службе ETS в США и в Европе это не так. Там есть ученые, но это исключение, подтверждающее общее состояние практического тестирования в странах СНГ.

Хорошо подготовленный и этично применяемый тест исключает возможности возникновения коррупции. Этими, а также двумя другими критериями - объективности и справедливости - объясняется широкое применение тестов в развитых странах, имеющих, одновременно, самые низкие уровни коррупции.

ЕГЭ & КИМы

Система ЦТ продержалась до 2007 года. После чего её полностью заменила система единого государственного экзамена.

В теории педагогических измерений утверждается: качество измерения тем выше, чем лучше уровень подготовленности испытуемого соответствует уровню трудности заданий. Объективность педагогических измерений возникает как следствие интеграции методов обоснования надежности и валидности тестовых результатов. Поскольку в ЕГЭ нет ни тестов, ни других методов педагогических измерений, то объективность там должна была появиться, вероятно, из воздуха или из благих пожеланий работников бывшего министерства образования.

С выбором ЕГЭ Правительство РФ допустило в 2000 году управленческую ошибку, но критику в свой адрес слушать не хотело. Теперь эта ошибка дополнена другой ошибкой. В п.27 постановления Правительства РФ N71 от 14 февраля 2008 г. написано, что приём в государственные и муниципальные вузы по программам бакалавриата и подготовки специалистов будет теперь осуществляться на конкурсной основе, по результатам единого государственного экзамена (ЕГЭ).

Одно из следствий этого постановления - отказ в приёме в вуз тех лиц, кто закончил школу в прошлые годы и не имеют сертификат ЕГЭ. Таковых может набраться по стране порядка трёх-четырёх сотен тысяч человек. Фактически эти граждане теперь принуждаются сдавать ЕГЭ. Не случайно проведение ЕГЭ сопровождается ежегодными расследованиями массовых завышений результатов и множества ухищрений, допускаемых испытуемыми, членами комиссий и организаторами проведения ЕГЭ. Результаты ЕГЭ фабрикуются в массовом порядке и систематически, особенно на некоторых территориях[21].

Автор этой статьи уже называл ряд причин, почему ЕГЭ опасен для страны[22] Полезно их повторить:

- разгул коррупции вокруг ЕГЭ;

- превращение ЕГЭ в средство обогащения чиновников и бизнесменов за счёт бюджета, абитуриентов и их родителей;

- высокая погрешность оценок в КИМах ЕГЭ. Такая погрешность КИМов ЕГЭ исключает принятие каких-либо осмысленных управленческих решений на основе получаемых баллов. И по сей день Министерство образования и науки не решается обнародовать рейтинг областей, краёв и территорий по качеству образования, на основе имеющихся данных.

- редукция учебной работы по всем учебным дисциплинам только к проверяемому содержанию ЕГЭ;

Далее можно говорить о потери учащимися способности писать, читать, развивать речь и мышление в случае, если ЕГЭ станет, как предусмотрено законом, основным методом итоговой аттестации.

Более семи лет автор этой статьи пишет о некачественности КИМов и нелегитимности ЕГЭ[23]. Наконец, прислушались ко второму тезису, но упорно игнорировали первый. В итоге Госдума узаконила этот экзамен как ключевой метод реформирования образования. Но теперь каждый двоечник может пытаться опротестовать в суде свои баллы, потому что погрешность оценивания в ЕГЭ невообразимо высокая из-за его ошибочной конструкции. В результате граждане и государство попали в опасный для страны капкан некачественных результатов.

Не случайно ЕГЭ отвергается большинством населения страны. Согласно опросу Всероссийского центра изучения общественного мнения в 2007 году популярность ЕГЭ среди россиян резко снизилась. Если в июне 2006 г. 31% респондентов предпочли бы, чтобы их дети или внуки сдавали выпускные экзамены в виде ЕГЭ, то в июне 2007 г. - только 22%. Уменьшилась доля тех, кто видит в ЕГЭ те или иные положительные стороны[24].

Первым среди высших руководителей страны ошибочность ЕГЭ признал Председатель Совета Федерации С.М.Миронов[25]. Недостатки ЕГЭ стал признавать и В.В.Путин, хотя он ещё верит, что ЕГЭ обеспечивает равный доступ граждан к качественному образованию и помогает борьбе с коррупцией[26].

"Что касается ЕГЭ - заявил В.В.Путин недавно на большой пресс-конференции в Кремле, - то здесь есть минусы, мы об этом уже несколько лет говорим, но есть и плюсы, которые заключаются в борьбе с той же самой коррупцией. И количество молодых людей, которые поступают в лучшие вузы страны за счет сдачи ЕГЭ, кратно увеличилось"[27]. При этом он добавил, что понимает озабоченности руководителей ведущих вузов страны, которые говорят о том, что этим вузам должно быть предоставлено право индивидуального выбора среди абитуриентов. На мой взгляд, решение этого вопроса может быть найдено, и мы находимся в диалоге с преподавательским корпусом и будем дальше совершенствовать эту систему - заверил президент[28].

Своеобразную "научную" основу для утверждения в России ЕГЭ дала Н Г. Ковалева своей критикой тестов. В статье "Не впереди планеты всей" было написано: не следует забывать, что от чистого тестирования, т.е. тестов, в которые включены только задания с выбором ответа, отказываются все страны мира. И очень жаль, что Республиканский Центр тестирования и другие используют только традиционную форму контроля, навязывая стране старые методики. Причем в свои тесты они включают, как правило, задания на проверку знаний фактологического характера или расчетные задачи" [29].

Выходило, что созданные ею КИМы ЕГЭ - это новые методики, которые двинут страну и мир вперёд. Что из этого получилось, мы уже знаем. Был придуман экзамен, в котором первая и вторую часть представляли задания с устаревшей тестовой формой. К этому добавили конкурсные задачи сверхвысокого уровня трудности для третьей части. Получился многоцелевой, невиданный в мире, гибрид трёх форм - тестовой, вопросной и задачной. Научно-обоснованный метод из-за отмеченной эклектики форм и чрезмерных разрывов в уровне трудности заданий и задач не получился.

КИМы можно понимать как метафорическое название самобытного метода, придуманного в бывшем Министерстве образования для проведения ЕГЭ. Мировой Банк выделил большие деньги, а потому в этом Министерстве начали искать способ "творческого" их освоения. Это они умеют.

Поначалу странный гибрид дал повод руководителям бывшего Министерства образования утверждать об оригинальности избранного ими пути. После жестокой критики утверждения такого рода затихли, а информация о качестве гибридных материалов оказалось совершенно секретной. Ответственность за нарушение Закона о засекречивании результатов некачественного метода ещё никто не понёс.

По имеющимся фрагментарным данным, качество секретных "материалов" ниже всякой критики. И в этом вопросе все эксперты единодушны. Кроме Правительства РФ, которое много лет терпеливо тратило народные деньги в надежде на чудесное превращение КИМов в научно-обоснованный метод. Но чуда не будет. Возможно, что именно этим объясняется отсутствие внятных научных публикаций о качестве КИМов. В появляющихся "отчётах" пишется о количестве опрошенных, выставленных пятибалльных оценках, количестве двоечников по каждому предмету и т.п. Качественного статистического анализа характеристик заданий (их параллельных вариантов, если таковые есть) и теста в целом в опубликованных отчётах нет.

И самая главная тайна - это недопустимая погрешность измерения, общая и дифференцированная. Потому что главный метрический недостаток КИМов - это попытка оценить уровень подготовленности ординарных выпускников школ, и одновременно, уровень подготовленности абитуриентов престижных вузов одним и тем же набором вопросов и задач. Теоретически ясно, что точность измерения одним и тем же методом уровня подготовленности столь различных контингентов может быть только нетерпимо низкой.

С принятием новой версии закона "Об Образовании" этот недостаток закреплён теперь законодательно. Там сейчас написано: "Единый государственный экзамен представляет собой форму объективной оценки качества подготовки лиц, освоивших образовательные программы среднего (полного) общего образования, с использованием заданий стандартизированной формы (контрольных измерительных материалов), выполнение которых позволяет установить уровень освоения ими федерального компонента государственного образовательного стандарта среднего (полного) общего образования[30]".

Если бы объективность КИМов ЕГЭ сверялась по Закону, принятому нынешним составом Госдумы, то жить бы стало лучше и веселее. Но объективность метода порождается не ошибочным законом, а объективными свойствами метода. Объективность КИМов ЕГЭ может быть удостоверена только вследствие научного анализа матриц реальных результатов, достижения уже упомянутой независимости параметров испытуемых от параметров заданий, опоры на научные критерии надёжности и валидности результатов. А как раз этого в ЕГЭ как не было, так и нет!

А потому упомянутый фрагмент Закона РФ об "объективности" метода ЕГЭ представляет собой казус, который на века войдёт в мировую юридическую науку как несомненное свидетельство избыточного вторжения государства в научно-методическую деятельность по оцениванию личности.

ЦТ было лучше ЕГЭ[31]

ЦТ можно определить как форму деятельности государственного органа по эффективной и технологической оценке подготовленности выпускников школ и абитуриентов вузов. В других странах тестированием занимается не государство, а независимые общественно-профессиональные корпорации типа ETS[32].

Несколько лет технологию ЦТ пытались приспособить к нетехнологичному ЕГЭ. Но сравните: для тестов обязательны публикация меры надежности и валидности результатов, научно-теоретическая обоснованность, требования логики и тестовой формы[33], публикация отчетов о подлинных данных, открытый научный анализ каждого задания и его параллельных вариантов, детальные отчеты о доходах и расходах, выполнение кодекса тестологов[34]. В КИМах ЕГЭ ничего из перечисленного нет. Да и можно ли сравнить, по научному потенциалу, известные теории педагогических измерений с псевдонаучными КИМами ЕГЭ?

ЦТ лучше ЕГЭ также в финансовом и в правовом отношениях. ЦТ было прибыльно, ЕГЭ оказался очень затратным. ЦТ было добровольно, ЕГЭ стало принудительным.

С юридической точки зрения ЕГЭ нарушает автономию вузов, установленную Законом. "Государству следует всегда помнить, - писал В.Гумбольдт, - что оно не может и не должно подменять университеты в их деятельности; каждый раз вмешиваясь, оно создаёт препятствия".

Утверждают, что ЕГЭ улучшит образование в школе. Но вот мнение разработчика первого поколения государственных образовательных стандартов В.Фирсова: никаких проблем школы ЕГЭ не решит[35]. Утверждают также, что ЕГЭ улучшит высшее образование. На самом деле, все наоборот: введение ЕГЭ в его нынешнем системно-конфликтном варианте разорвёт устоявшиеся комплексы "школы-вузы", подорвет и без того ухудшающееся качество образования.

Считается также, что ЕГЭ одолеет коррупцию. Много говорят и о противниках ЕГЭ, а это, главным образом, дети и их родители, миллионы граждан. Разве допустимо рассматривать их как противников ошибочной министерской схемы? Главный противник ЕГЭ - это он сам, с присущей ему совокупностью признаков:

1) фактическая нелегитимность эксперимента по коммерциализации образования посредством эксперимента ЕГЭ-ГИФО;

2) отсутствие гипотез и системы критериев успешности (не успешности);

3) претензия на принудительную тотальность, стремление оценить одним "КИМом" всех выпускников и абитуриентов различных вузов и специальностей;

4) нетехнологичность; субъективность на всех этапах оценивания;

5) системная конфронтационность;

6) фактическая засекреченность (недоступность) реальных результатов, что сделано вопреки Закону.

Не случайно ЕГЭ отвергается большинством населения страны. Согласно опросу Всероссийского центра изучения общественного мнения, в 2007 году популярность ЕГЭ среди россиян резко снизилась. Если в июне 2006 г. 31% респондентов предпочли бы, чтобы их дети или внуки сдавали выпускные экзамены в виде ЕГЭ, то в июне 2007 г. - только 22%. Уменьшилась и доля тех, кто видит в ЕГЭ те или иные положительные стороны.

Поэтому переход от ЦТ к ЕГЭ - это отступление из прошлого века в позапрошлый век.

Тесты или ЕГЭ?

В России в качества средства достижения обеих целей был выбран метод, предложенный бывшим министерством образования - единый государственный экзамен (ЕГЭ). Выбор обеспечивался целенаправленной подменой понятия тест понятием "экзамен".

Вот пример обоснования того, почему в России вместо тестов надо использовать "механизмы" экзамена.

Цитата: "Особое значение при создании национальной системы экзаменов имеет разработка требований к обеспечению качества при организации и проведении экзаменов, разработке контрольных измерительных материалов, на этапе обработки и шкалирования результатов и их использования, а также создание механизмов обеспечения качества системы. В США идет активная разработка механизмов обеспечения качества экзаменов. С этой целью разрабатываются и внедряются стандарты по различным аспектам тестирования. Наиболее признанными считаются "Стандарты для педагогического и психологического тестирования" (Standards for Educational and Psychological Testing), принятые совместно тремя организациями: Американской Ассоциацией исследователей в области образования (American Educational Research Association), Американской Ассоциацией Психологов (American Psychological Association) и Национальным комитетом по Измерениям в Образовании (National Council on Measurement in Education), а также "Стандарты качества и справедливости ETS", разработанные специалистами Службы образовательного тестирования США (ETS)[36].

Получается так: в США - тестирование, но оно является "механизмом экзамена".

В результате такой и похожей на это словесной эквилибристики вместо качественного тестирования в России уже восьмой год проводится некачественный и дорогостоящий единый государственный экзамен. Сколько теперь может ещё продолжаться этот "экзамен-механизм" - зависит от решений нового Президента РФ и нового Председателя Правительства РФ.

Президент Казахстана Н.Назарбаев поставил очень привлекательную задачу вхождения его страны в число 50-ти самых развитых стран мира. Многое сделано для выполнения этой задачи исторической значимости, но тормозят отстающие образовательная система и здравоохранение. В стране создано и функционирует Единое Национальное Тестирование (ЕНТ), способное выдать итоговые результаты в день проведения тестирования, причём по 3 - 5 коротким тестам сразу. Все зарубежные консультанты, в числе которых на протяжении многих лет и неоднократно выступал и автор этих строк, советовали Правительству Казахстана применять исключительно тестовый метод. В результате Н.Назарбаев утвердил тесты как главный метод массовой оценки знаний.

Успеху ЕНТ способствуют, в частности, приобретение высокоскоростных оптосканов, разработанных в ETS - тестовой службе США. У казахстанских коллег, как и в других странах СНГ, нуждается в существенном улучшении качество тестов, а база тестовых заданий вообще требует принципиального обновления, если не полной замены. Это необходимо сделать из-за появления организованных групп профессиональных репетиторов, внимательно отслеживающих содержание заданий каждый год[37].

И на Украине был сделан стратегический выбор в пользу создания Национальной независимой (внешней) системы тестирования. И это был правильный выбор. Правда, там ещё далеко до настоящих тестов. Целью становления Национальной системы тестирования ставится борьба с коррупцией. На сегодня по уровню коррупции сфера образования уступает лишь милиции и таможне, и стоит на уровне налоговой службы и судов. А потому предстоит обеспечить проведение в 2008 году всеобъемлющего внешнего независимого тестирования. "Это одна из ключевых программ в 2008 году, - подчеркнул Президент Украины. Мы должны обеспечить стопроцентное тестирование во всех учебных заведениях". Украина сейчас на пути к этой цели: в 2006 году тестирования прошли 44 тысячи абитуриентов, в 2007 - 116 тысяч[38].

Важно подчеркнуть, что на Украине появилось то, чего нет в России - благоприятные политические условия для становления именно системы тестирования. Наблюдаемые там попытки подмены тестирования различными экзаменами оцениваются в Правительстве как противоречащие ясно высказанной политической воле Президента Украины.

Статус тестирования в различных странах

В США, Казахстане и Украине, а также во многих других странах принят статус Национальной системы тестирования. В западном истолковании понятие "Национальное", означает, что тестирование является общественным. Оно создаётся из потребностей развития общества, и развивается под контролем общественных организаций. В определении статуса Национального тестирования важно понять соотношение роли государства и общества. Первое и главное место принадлежит обществу. Цивилизованному государству не следует заниматься тестированием каждого ребёнка или студента. Тем более, это не следует делать принудительно. В документах министерства образования любят использовать словосочетание государственно-общественное управление, где государственное управление мыслится главным, а общественное управление - декоративным.

Как известно, в США центральное правительство не имеет права проводить тестирование в том или ином штате. И это правильно, потому что удерживает государственные органы от соблазна расширения властных полномочий и от коррупции. Но государство там стоит на страже в случае нарушения прав гражданина в виде необъективно выставленной оценки, полученной на основе некачественного метода.

Вот почему в настоящем Национальном тестировании есть и вторая важная составляющая. Это профессионализм тех, кого общество привлекает к проведению Национального тестирования. Именно профессионализм обеспечил существенный успех общественно ориентированной, негосударственной службы тестирования в США. Полное название этой успешно управляемой службы - Educational Testing Service (ETS). В США наряду с системой тестирования есть и Национальный Совет по измерениям в сфере образования - National Council on Measurement in Education.

В Белоруссии, Украине и других странах СНГ неоднократно проявлялась тяга к внедрению аналога российского ЕГЭ, но в последнее время там стали лучше понимать ошибочность замены полноценного тестирования единым принудительным государственным экзаменом. Многие и по сей день полагают, что экзамен и тест - это одно и то же, и что форма оценивания не принципиальна.

На самом деле, пришло время уяснить, что экзамен - это традиционная форма контроля знаний, а тест - это метод проведения качественного педагогического измерения. В сложившихся условиях жонглирования понятиями путать их теперь уже больше нельзя. Именно на это автору данной статьи пришлось обращать внимание участников недавней международной конференции в Харькове[39].

Система педагогических измерений

Педагогические измерения - это научная теория, сформировавшаяся на стыке педагогики, психологии, статистики, математики, логики и философии. Это наука о разработке тестов, других методов и показателей эффективности образовательной деятельности вообще. Педагогические измерения можно также определить как процесс отображения числами уровней проявления интересующего латентного качества личности.

Предмет педагогических измерений - не только разработка тестов, но и шкалирование тестовых результатов испытуемых (Measures of achievement), проведение рейтинга и мониторинга (в части разработки показателей текущих и итоговых учебных достижений). И кроме того, построение системы качественных показателей образовательной деятельности[40].

Большое значение в педагогических измерениях имеют также и методы определения качества заданий, шкалирования заданий по уровню трудности и различающей способности - то, что на английском языке называется Item Calibration. Измерением учебных достижений (person measures) и шкалированием заданий (item calibration) на интервальной шкале практическое тестирование почти не занимается, поскольку это научная работа, требующая целенаправленной метрической и программно-вычислительной подготовки.

Становлению системы педагогических измерений фактически препятствуют идеи проведения единого государственного экзамена. Без чётких разграничений понятий - экзамены, тестирование и педагогические измерения - различие систем может показаться неясным.

В наше время существенный признак педагогических измерений - это педагогически обоснованный отбор содержания заданий теста, точный подбор форм заданий, подходящих для того или иного содержания, система основных педагогических понятий этой теории[41], получение данных об испытуемых и заданиях на интервальной шкале. Это достигается использованием соответствующих алгоритмов трансформации исходных результатов практического тестирования посредством компьютерных программ типа RUMM 2020, Winsteps и др.

Многолетнее отставание педагогических измерений от потребностей практики тестирования и систематическое отсутствие учёных в штате большинства центров тестирования на пространстве СНГ превращает практику тестирования в зону постоянного риска получения ненадёжных и невалидных результатов. Этот вывод легко подтверждается экспертизой работы любого центра тестирования. Вывести тестирование из зоны перманентного риска получения ошибочных оценок личности может только стабильная опора на науку - теорию педагогических измерений. Но для этого нужны научные подразделения в центрах тестирования, которых практически нет.

Проблему осложняет положение самой теории педагогических измерений. Все известные в этой теории методы обоснования качества тестовых результатов неизменно оказывались статистическими и математическими. О том, что мы имеем дело именно со статистическими теориями психологических и педагогических измерений, было чётко сказано в другой классической работе[42] конца шестидесятых годов прошлого века. Так сложилось исторически, таким был идеал научности тестовых результатов. Однако попытки построения собственно педагогической теории педагогических измерений, других идеалов научности не прекращались ни в прошлом, ни в наше время. Известны попытки создания педагогической теории педагогических измерений в США[43].

В России проблемой создания педагогической теории педагогических измерений занимался автор данного доклада. Идея необходимости перехода от тестирования к системе педагогических измерений возникла как результат сравнительного исследования вопросов методологии педагогических измерений и тестирования[44], научного анализа практики централизованного тестирования[45], введения российского Единого государственного экзамена (ЕГЭ)[46] и личного опыта взаимодействия с практиками-работниками центров тестирования. Последние чаще стремятся выполнять указания сверху, нежели рекомендации учёных. К тому же многие остепенённые практики считают себя учёными не в меньшей степени, чем те, кто работают в науке. Такого рода менталитет характерен и для небольшого числа чиновников многих министерств.

В качестве педагогической основы теории педагогических измерений автором этой статьи предлагаются:

- концепция пяти этапов тестового педагогического процесса[47] и система основных понятий педагогических измерений[48];

- формулировки целей педагогических измерений[49];

результаты исследования содержания[50], форм[51] и принципов композиции тестовых заданий[52];

- математические модели[53] и аксиоматика теории педагогических измерений[54].

Система педагогических измерений включает в себя всю научную составляющую разработки и применения тестов для получения качественных тестовых результатов и последующего шкалирования, проведение рейтинга, мониторинга и качественных показателей образовательной деятельности. Основной предмет педагогической теории измерений - разработка качественных тестов для измерения уровня и структуры подготовленности учащихся и студентов. Такие тесты используются почти во всех современных образовательных технологиях.

Для того, чтобы педагогические измерения рассматривались как основа формирования объективной системы оценивания образовательной сферы наиболее эффективные средства противодействия коррупции. Но они сами должны отвечать некоторым требованиям:

Во-первых, они не должны быть государственными. В РФ и в государствах Средней Азии тестирование и ЕГЭ de facto является государственными. Это достаточное условие для того, чтобы контроль знаний постоянно подвергался риску искажений.

Во-вторых, измерения не должны быть средством коммерциализация образования. В условиях интенсивного расслоения населения это ведёт к фактическому ограничению доступа к качественному образованию, и далее - к усилению невежества молодежи, к конфронтации и политической нестабильности - и всё это в стране, имеющей большую армию, ещё большую своевольную и заметно коррумпированную милицию, ядерное оружие и ракеты.

В-третьих, педагогические измерения могут быть объективными только тогда, когда правильно определен их научный предмет. В России, Казахстане и в Узбекистане - это уровень учебно-дисциплинарных знаний, в США и Израиле - способности к овладению программами высшего образования. В Киргизстане намечен переход к оценке способностей посредством адаптированного американского варианта SAT-2[55]. Но школа остается всё ещё ориентированной на знания. Возникает вопрос - будут ли результаты тестирования честными для тех школьников, родители которых не в состоянии нанять репетитора для нового теста?

Выводы

1. Для стабильного и качественного развития независимой российской общественно-профессиональной системы педагогических измерений надо осуществить перевод всех имеющихся в стране центров тестирования в статус независимых центров системы педагогических измерений. И не по названию. А по сути. Это создаст психологические и организационные предпосылки усилить научный потенциал центров, заметно повысить качество педагогических измерений, заменить менее качественное тестирование более качественными педагогическими измерениями.

2. ЕГЭ надо скорее закрыть, и навсегда. Вместо ЕГЭ в стране надо организовать настоящее добровольное независимое педагогическое тестирование уровней подготовленности школьников и абитуриентов. Для этого понадобится сеть новых центров тестирования, опирающихся на научные основы педагогических измерений.

3. Для становления национальной системы педагогических измерений требуется взаимодействие граждан, педагогической общественности, научных и технических специалистов. Государство должно помогать такому взаимодействию.

4. Нужно принять юридические акты, обеспечивающие ответственность за разглашение правильных ответов к заданиям и индивидуальных результатов без согласия граждан, прозрачность организации тестирования, открытость и доступность, для исследователей и независимых экспертов, матриц тестовых результатов (без указания фамилий), по всем учебным дисциплинам и регионам, за все годы. Обязательна также публикация отчетов по разработке тестов по итогам финансовой деятельности центров.

5. Вместо задуманного перехода от ЦТ к ЕГЭ и далее к ОСОКО, лучше приступить к созданию в России независимой системы педагогических измерений.

[1] Подробнее о процессе и содержании педагогических измерений см. в работах автора, опубликованных в журнале "Педагогические измерения". А также на сайте автора: http://testolog.narod.ru

[2] Дырявые экзамены. Федеральный центр тестирования обнародовал информацию о результатах Единого государственного экзамена в регионах. http://www.svoboda.org/programs/edu/2005/edu.071305.asp; Результаты Единого государственного экзамена в России за 2005 год. Радио "Свобода" от 29-06-05.

[3] http://www.r-komitet.ru/obraz/EGE.htm

[4] http://www.r-komitet.ru/obraz/EGE.htm

[5] О ГИФО см. в статьях сайта http://testolog.narod.ru

[6] http://www.r-komitet.ru/obraz/EGE.htm

[7] Аванесов В.С. И не тест, и не экзаменен // Университет и школа. N 1-2, май, 2002 г. С.26-27. См. также http://testolog.narod.ru

[8] Аванесов В.С. Комплексный подход к противодействию коррупции в образовательной сфере//Государственная политика противодействия коррупции и теневой экономике в России. Материалы научной конференции. М. Центр проблемного анализа и государственно-управленческого проектирования. М.: http://testolog.narod.ru/Obrazov16.html

[9] Научный эксперт, 2007. С. 717-723. http://www.epochtimes.ru/content/view/10999/2/

[10] Тезисы к выступлению А.Фурсенко на заседании Государственного совета РФ 24 марта 2006 года http://www.school.edu.ru/dok_min.asp?ob_no=29402

[11] Там же

[12] Словарь русского языка. Т.3., М.: АНСССР, 1959. с.730..

[13] Wright B. Sample-free test calibration and person measurement. ETS Invitational Conference on Testing Problems. MESA Research Memorandum. http://www.rasch.org/memo1.htm

[14] Аванесов В.С. Тест как педагогическая система // Педагогические Измерения, N1 2007г.

[15] Амонашвили Ш.А. Педагогическая симфония. Ч.3. Екатеринбург, Изд-во Уральского Ун-та, 1993.- 216с.

[16] DuBois P.H. A History of Psychological Testing. P.3. Boston. Allyn and Bacon Inc., 1970. -152p; .Аванесов В.С. Из глубины веков. http://testolog.narod.ru

[17] См. напр. Кадневский В.М. Генезис тестовых методов и тестов в мировом

цивилизационном процессе. ПИ, N1, 2008г.

[18] Это т.н. high-stake tests. Подробнее смотрите, например: Аванесов В.С. Единый государственный экзамен в фокусе научного исследования// Педагогические Измерения N 1, 2006, стр. 3-31. См. также на сайте автора http://testolog.narod/ru

[19] http://www.kai.ru/info/admission/files/FAQ/faq4_ege_ere_ct.htm

[20] Аванесов В.С. Тест как педагогическая система//ПИ, N1, 2007, стр. 33-55;. см. также сайт http://testolog.narod.ru

[21] Факты расследования массовых фальсификаций и коррупции, представлены в публикации Е. Мельник и О. Герасименко: "ЕГЭ получил хорошие расценки". http://www.gazeta.ru/2007/04/05/oa_235842.shtml, 5 апреля 2007г.

[22] Аванесов В.С. Доживёт ли единый государственный экзамен до 2009 года? http://testolog.narod.ru

[23] Первая критическая статья на эту тему: Аванесов В.С. "Единый Государственный экзамен, или эта вещь будет посильнее Фауста Гёте" // Учительская Газета, N49, 28 ноября 2000 года. Результаты оказались намного разрушительнее, чем можно было тогда себе представить.

[24] www.regnum.ru/news/885466.html 14:44 15.09.2007.

[25] ЕГЭ как широкомасштабная ошибка: Обзор СМИ Приамурья. www.regnum.ru/news/772724.html 04:01 27.01.2007

[26] В. Путин: система ЕГЭ будет совершенствоваться. Правительство РФ будет совершенствовать систему единого госэкзамена (ЕГЭ), заявил президент РФ В. Путин. http://www.eduhelp.ru/page.php?pageid=1043 www.rian.ru , 15.02.08

[27] Там же

[28] Там же

[29] Народное образование, N 5, 1998, с.11.

[30] http://www.akdi.ru/gd/proekt/099384GD.SHTM

[31] Аванесов В.С. Централизованное тестирование лучше единого государственного экзамена. Тез. докл. Всер. Научно-методической конференции "Развитие тестовых технологий в России". /Под ред. Л.С. Гребнева.- М.: Центр тестирования Министерства образования РФ. 2002". М.: 21-22 ноября 2002г. с.71-73. http://testolog.narod.ru/Education27.html .

[32] Educational Testing Service. Prinston, N-J.

[33] Аванесов В.С. Композиция тестовых заданий. Издания 1996, 1998 и 2002 гг.

[34] Code of Fair Testing Practices in Education. (1988) Washington, D.C.: Joint Committee on Testing Practices. (Mailing Address: Joint Committee on Testing Practices, American Psychological Association, 1200 17th Street, NW, Washington, D.C. 20036.).

[35] Учительская газета, 17 сентября 2002 г.

[36] Развитие национальной системы экзаменов: опыт РОССИИ, СНГ И США. Материалы и тезисы докладов Международной конференции, 19 - 24 апреля 2003 года, Москва 2003. - С.6.

[37] В Казахстане необходимо ежегодно обновлять базу данных ЕНТ http://www.gazeta.kz/art.asp?aid=100270

[38] В. Ющенко обеспокоен коррупцией в сфере образования// http://glavred.info/archive/2007/08/30/084009-6.html

[39] Аванесов В.С. Проблема становления Национальной системы педагогических измерений. Харьков, 13-14 декабря, 2007г. http://testolog.narod.ru/Education19.html

[40] Аванесов В.С. Основы теории педагогических измерений//ПИ, N1, 2004г.

[41] Аванесов В.С. Научные проблемы тестового контроля знаний. М.: Иссл. Центр, 1994. - 135с.

[42] Lord, F.M., Novick, M. Statistical Theories of Mental Test Scores. N-Y, 1968.

[43] Например, в работе Ebel, R.L. Measuring Educational Achievement. Prentice-Hall, Inc. Englewood Cliffs, New Jersey, 1965. - 481pp.

[44] Аванесов В.С. Вопросы методологии педагогических измерений// Педагогические Измерения, N1, 2005г. С. 3 27. http://testolog.narod.ru/Theory34.html

[45] Аванесов В.С. Централизованное тестирование лучше Единого Государственного Экзамена// "Развитие тестовых технологий в России. Тезисы докладов Всероссийской научно-методической конференции / Под ред. Л.С. Гребнева.- М.:Центр тестирования Министерства образования РФ. 2002. http://testolog.narod.ru

[46] Аванесов В.С. Единый Государственный Экзамен в фокусе научного исследования// Педагогические Измерения, N1, 2006г. С.3-31. http://testolog.narod.ru/Education39.html

[47] Аванесов В.С. Пять этапов педагогических измерений. http://testolog.narod.ru/Theory58.html

[48] Аванесов В.С. Определение исходных понятий. 3 редакция, 7 апреля 2007. http://testolog.narod.ru/Theory46.html ; Аванесов В.С. Понятийный аппарат теории педагогических измерений// http://testolog.narod.ru/Theory26.html

[49] Аванесов В.С. Основы педагогической теории измерений// N1, 2004 г. С.15-21.

[50] Аванесов В.С. Форма тестовых заданий. М.: Центр тестирования, 2006.

[51] Аванесов В.С. Форма тестовых заданий. М. Центр тестирования, 2006. - 137 стр.

[52] Аванесов В.С. Теоретические основы разработки заданий в тестовой форме. Уч. пособие для профессорско-преподавательского состава высшей школы. М. МГТА, 1995. -95с. Аванесов В.С. Композиция тестовых заданий. М.Центр тестирования. 2003. 217 стр.

[53] Аванесов В.С. Математические модели педагогического измерения. Научное издание. М.: Иссл. центр проблем качества подготовки специалистов, 1994. - 26с.;

[54] Аванесов В.С. Педагогическое измерение латентных качеств //Педагогическая диагностика, N4, 2003г.

[55] Scholastic Aptitude Test

testolog@mail.ru

Док. 435316
Перв. публик.: 31.03.06
Последн. ред.: 23.10.11
Число обращений: 613