Математические модели и комплексы программ для автоматизированной оценки результатов обучения с использованием латентных переменных тема диссертации и автореферата по ВАК РФ 05.13.18, кандидат наук Елисеев, Иван Николаевич
- Специальность ВАК РФ05.13.18
- Количество страниц 371
Оглавление диссертации кандидат наук Елисеев, Иван Николаевич
Оглавление
Введение
1 Теоретическое обоснование выбора математических моделей для оценки результатов обучения и постановка задач исследования
1.1 Краткий обзор состояния диагностики результатов обучения
в профессиональном образовании
1.2 Анализ основных подходов к оценке результатов обучения
1.3 Критерии и показатели качества диагностических средств
1.3.1 Надёжность гомогенного теста
1.3.2 Валидность теста
1.3.3 Разрешающая способность теста
1.4 Расчёт параметров, характеризующих результаты обучения, на основе классической теории тестирования
1.5 Теоретические обоснование возможности использования дихотомической модели Раша для оценки результатов обучения
1.6 Свойства дихотомической модели Раша
1.7 Теоретическое обоснование возможности использования моделей Раша
для политомической индикаторной переменной
1.8 Представление и интерпретация данных обработки
1.8.1 Интерпретация на основе классической теории тестирования
1.8.2 Интерпретация данных на основе теории латентных переменных
1.8.3 Оценка адекватности результатов тестирования дихотомической модели Раша
1.8.4 Построение гистограмм и информационных функций заданий
Выводы к главе 1
2 Разработка алгоритмов и комплексов программ для расчета параметров, характеризующих результаты обучения и качество диагностических средств
2.1 Математическое обоснование алгоритма расчета латентных параметров на основе дихотомической индикаторной переменной
2.1.1 Решение нелинейных уравнений методом секущих
2.1.2 Решение нелинейных уравнений методом Ньютона
2.2 Алгоритмы расчета оценок максимального правдоподобия латентных параметров основной модели Раша
2.3 Математическое обоснование расчета латентных параметров политомической модели Раша для рейтинговой шкалы
2.3.1 Получение итерационных выражений на основе метода секущих
2.3.2 Итерационные процедуры на основе использования метода Ньютона
2.4 Алгоритмы расчета оценок максимального правдоподобия латентных параметров модели рейтинговой шкалы
2.5 Математическое обоснование расчета латентных параметров политомической модели частичного доверия
2.5.1 Итерационные процедуры на основе метода секущих
2.5.2 Получение итерационных выражений с помощью метода Ньютона
2.6 Алгоритмы расчета оценок максимального правдоподобия латентных параметров модели частичного доверия
2.7 Программный комплекс RILP-1M
2.8 Программный комплекс RILP-2
2.9 Оценка достоверности результатов расчета латентных параметров программным комплексом RILP -1М
2.10 Оценка достоверности результатов расчета латентных параметров программным комплексом RILP-2
2.10.1 Оценка достоверности данных, полученных с использованием модели Раша для рейтинговой шкалы
2.10.2 Оценка достоверности данных, полученных на основе алгоритма для модели частичного доверия
Выводы к главе 2
3 Теоретическое исследование свойств оценок латентных параметров дихотомической модели Раша
3.1 Исследование существования и единственности оценок максимального правдоподобия латентных параметров дихотомической модели Раша
3.1.1 Постановка задачи
3.1.2 Допустимая дихотомическая матрица результатов тестирования
3.1.3 Теоретическое обоснование существования и единственности оценок латентных параметров дихотомической модели Раша
3.2 Расчет доли допустимых дихотомических матриц результатов тестирования
3.3 Результаты вычислительного экперимента по расчёту доли допустимых дихотомических матриц результатов тестирования
3.4 Исследование состоятельности оценок латентных параметров основной
модели Раша при ограниченном числе заданий теста
3.5 Экспериментальное подтверждение состоятельности оценок трудности задание теста при их фиксированном количестве
3.6 Исследование поведения оценок латентных параметров модели Раша при неограниченном увеличении объёма выборки и числа заданий теста
3.7 Экспериментальные исследования состоятельности оценок латентных параметров при неограниченном увеличении числа заданий теста
3.8 Сходимость итерационных оценок, рассчитанных методом Ньютона
3.9 Распределение значений латентных параметров дихотомической модели Раша 162 Выводы к главе 3
4 Расчёт оценок латентных параметров модели Раша на основе моделирования дихотомических матриц ответов
4.1 Краткий обзор современных методов обработки выборок ограниченного объема
4.2 Метод складного ножа и его использование для калибровки тестовых заданий
4.3 Бутстреп-метод и его применение для калибровки заданий теста
4.4 Теоретический анализ значений бутстреп-оценок
4.5 Теоретический анализ значений оценок, рассчитанных с использованием метода складного ножа
4.6 Результаты экспериментальных исследований оценок, рассчитанных методами бутстреп и складного ножа
4.7 Модель генеральной дихотомической матрицы результатов
тестирования
4.7.1 Актуальность создания модели генеральной дихотомической матрицы ответов
4.7.2 Методика формирования модели генеральной дихотомической матрицы результатов тестирования
4.7.3 Проведение вычислительного эксперимента по формированию квазигенеральной дихотомической матрицы ответов
4.8 Алгоритм формирования модели дихотомической матрицы ответов
4.9 Исследование погрешности калибровки тестовых заданий на основе моделирования нормативных дихотомических матриц ответов
4.9.1 Методика формирования моделей нормативных дихотомических
матриц ответов разных размеров
4.9.2 Проведение вычислительного эксперимента и анализ результатов исследования погрешностей калибровки тестовых заданий
Выводы к главе 4
5 Разработка инструментария и моделей мониторинга результатов обучения и
оценки качества диагностических средств
5.1 Метод оценки уровня сформированности компетенций обучаемого
5.2 Метод калибровки заданий теста на основе моделирования нормативных дихотомических матриц ответов
5.3 Метод расчета квазигенеральных оценок латентных параметров на основе моделирования нормативных дихотомических матриц ответов
5.4 Оценка эффективности методов калибровки заданий и расчёта квазигенеральных оценок латентных параметров при эмпирическом законе распределения
5.5 Методика экспертизы качества педагогического теста
5.6 Основные положения методологии оценки результатов компетентностно-ориентированного обучения
5.7 Модель мониторинга уровня подготовки обучаемых и оценки качества диагностических средств
5.8 Модель автоматизированной системы оценки уровня подготовки выпускников образовательных учреждений
Выводы к главе 5
6 Применение результатов диссертационного исследования для независимой
оценки результатов обучения
6.1 Оценка качества диагностических средств и уровня сформированности когнитивного компонента компетенции
6.2 Оценка уровня сформированности личностного компонента компетенции с помощью опросника Т. Лири
6.2.1 Исследование качества опросника Т. Лири для оценки межличностных отношений
6.2.2 Оценка компетенций студентов с помощью опросника Т. Лири
6.3 Оценки уровня сформированности личностного компонента компетенции с помощью опросника Л. П. Калининского
6.3.1 Исследование качества опросника Л. П. Калининского «Профиль личностных свойств»
6.3.2 Оценка личностных качеств обучаемых с помощью опросника Л. П. Калининского
6.4 Оценка качества выпускной квалификационной работы и интегративно-деятельностного компонента компетенции
Выводы к главе 6
Заключение
Список литературы
Приложение А — Руководство пользователя для работы с программным
комплексом ЫЬР- 1М
Приложение Б - Руководство пользователя для работы с программным
комплексом ЫЬР-2с1о1НЕТ
Приложение В - Блок-схемы алгоритмов проверки дихотомических матриц
результатов тестирования на соответствие условиям допустимости
Приложение Г — Руководство пользователя для работы с программным комплексом
ШЬР-МиШ
Приложение Д - Таблицы данных и алгоритм формирования моделей
дихотомических матриц ответов
Приложение Е- Параметры индикаторов опросников Т. Лири и Л.П. Калининского 346 Приложение Ж — Акт внедрения результатов научно-исследовательских, опытно-
конструкторских и технологических работ в ГБУ РО РОЦСО
Приложение И - Акт о внедрении результатов докторской диссертационной работы
Елисеева Ивана Николаевича в ФГБОУ ВПО «ДГТУ»
Приложение К - Акт о внедрении результатов докторской диссертационной
работы Елисеева Ивана Николаевича в ФГБОУ ВПО «РГСУ»
Приложение Л - Документы, подтверждающие внедрение результатов докторской
диссертационной работы Елисеева И.Н. в ФГБОУ ВПО «ЮРГУЭС»
Приложение М - Справка о внедрении результатов исследования
Приложение Н - Отзыв
Рекомендованный список диссертаций по специальности «Математическое моделирование, численные методы и комплексы программ», 05.13.18 шифр ВАК
Разработка системы измерения латентных переменных на основе модели Раша для контроля уровня знаний обучаемых2003 год, кандидат технических наук Осипов, Сергей Александрович
Разработка моделей, методов и программного обеспечения для оценки компетенций учащихся ВУЗов2016 год, кандидат наук Родионов Алексей Владимирович
Разработка и программная реализация методов анализа результатов массового тестирования2011 год, кандидат технических наук Карданов, Руслан Суфьянович
Процессно-ориентированная концепция управления кадровым потенциалом в системе переподготовки персонала предприятий промышленности и транспортного комплекса2013 год, доктор технических наук Ягудаев, Геннадий Григорьевич
Теория и методы оценки эффективности систем обучения коллективного пользования2006 год, доктор физико-математических наук Хлебников, Владимир Алексеевич
Введение диссертации (часть автореферата) на тему «Математические модели и комплексы программ для автоматизированной оценки результатов обучения с использованием латентных переменных»
Введение
В современных условиях быстрого обновления техники и технологий, увеличения риска возникновения техногенных катастроф возросла роль человеческого фактора во многих сферах деятельности, и как следствие, возросли требования к надёжности оценивания уровня профессиональной подготовки кадров. Особенно это касается оборонных предприятий и взрывоопасных производств, железнодорожного, водного и воздушного транспорта, учреждений и подразделений Министерства по чрезвычайным ситуациям, Министерств обороны и внутренних дел. Уровень профессиональной подготовки специалистов и персонала служб можно оценить, прежде всего, на основе результатов их обучения в системе непрерывного образования: в ссузе, вузе, по программам повышения квалификации и переподготовки, в учебных центрах различных министерств и ведомств. Неадекватная оценка профессиональной подготовки специалиста может приводить к ошибкам в управлении персоналом, при принятии управленческих решений, большим материальным убыткам и даже к человеческим жертвам. В связи с этим особую актуальность приобретает решение проблем снижения погрешности автоматизированной оценки результатов обучения, которая обеспечивается автоматизированной системой независимой оценки (АСНО).
Эффективная работа АСНО невозможна без использования математического моделирования и надёжных инструментальных средств диагностики результатов обучения. Их состав и предъявляемые требования во многом определяются используемыми подходами к оценке качества подготовки обучаемых. Специалистам и персоналу различных служб часто приходится работать в условиях быстро изменяющейся обстановки, требующей умения оперативно менять способы действия в незнакомой ситуации и находить наилучший. Поэтому для обучения и переподготовки кадров преимущественно используется компетентностный подход, согласно которому о результатах обучения судят по наличию у обучаемых компетенций, соответствующих их профессиональной деятельности. В связи с этим актуальным становится решение проблемы формализации процедуры оценивания
уровня сформированности компетенций слушателей и студентов, теоретического обоснования и реализации используемых для этого моделей и инструментария, разработки программно-алгоритмических средств обработки результатов диагностики обучения (входных данных (ВД)), а также оценки качества диагностических средств (ДС) и текущего уровня подготовки обучаемых. Современные подходы к оценке учебных достижений слушателей и студентов базируются на использовании классической теории тестирования и теории латентных переменных, математический аппарат и основы которых были созданы известными зарубежными и отечественными учёными. Под термином «Латентная переменная (параметр)» принято понимать теоретический конструкт, который характеризует некое скрытое свойство или качество (например, уровень подготовки обучаемого, трудность тестового задания), которые непосредственно измерены быть не могут. Достоинствами классической теории тестирования являются обеспечение получения информации о показателях качества ДС, наглядность выполняемых расчётов и простая интерпретация данных обработки. Основной недостаток - зависимость результатов оценивания параметров обучаемых от трудности заданий ДС. Применение теории латентных переменных, базирующейся на моделях Раша, обеспечивает возможность независимости оценки вычисляемых значений латентного параметра «уровень подготовки» обучаемых в, от значений «трудности заданий» ß} ДС. Это
способствует повышению объективности получаемых оценок уровня подготовки обучаемых. По этой причине в диссертационной работе сделан акцент на применение именно теории латентных переменных.
Создание математического аппарата классической теории тестирования и теории латентных переменных обеспечило разработку программно-алгоритмических средств обработки результатов диагностики, оценки качества ДС и уровня подготовки обучаемых. Зарубежными учёными E.B. Andersen, D. Andrich, A. Birnbaum, L.L.Guttman, J. M. Linacre, F.M. Lord, G.N. Masters, B.D. Wright и учёными России (B.C. Аванесов, A.A. Маслак, В.Г. Наводнов, М.Б. Че-лышкова и др.) были созданы программные средства, реализующие возможности и теории латентных переменных, и классической теории тестирования. С их по-
мощью можно решить многие задачи, связанные с оценкой результатов обучения. Вместе с тем, практика работы с существующим программным обеспечением (ПО) показала, что ему присущи достаточно серьёзные недостатки, связанные с наличием нерешённых проблем в самой теории латентных переменных. В частности, не обоснованы условия существования и единственности получаемых оценок латентных параметров моделей Раша, их сходимость и качество, например, состоятельность. Без решения этих проблем нельзя считать оценки латентных параметров надёжными, а полученные с их помощью оценки результатов обучения объективными.
Одной из важных для отечественного образования и не решённых в рамках теории латентных переменных задач является моделирование и параметризация диагностических тестов, в частности калибровка (определение трудности) тестовых заданий по выборкам ограниченного объёма (40-50 человек). Из-за малого объёма выборки погрешности и интервалы оценивания латентного параметра «трудность задания», рассчитываемые на основе стандартных методик параметрической статистики, могут в несколько раз превышать значения самих оценок. Одним из возможных способов решения задачи является применение методов имитационного моделирования. Однако реализация данного подхода затруднена из-за отсутствия теоретико-методологических основ создания моделей нормативных дихотомических матриц ответов заданного размера, позволяющих снизить влияние случайных факторов на параметризацию диагностических средств. Второй возможный способ решения задачи заключается в использовании непараметрических методов математической статистики, но их применение требует теоретического обоснования и экспериментальной проверки.
К перечню нерешённых задач в области разработки теоретико-методологической базы вычисления оценок латентных параметров модели Раша следует отнести и проблему математического обоснования их вычислительных процедур, хотя сами итерационные выражения для расчёта оценок в литературных источниках приводятся. Алгоритмы нахождения оценок латентных параметров на основе упомянутых процедур являются, как правило, коммерческой тай-
ной и недоступны. По этой причине разработка отечественных программных средств невозможна без построения итерационных вычислительных алгоритмов, позволяющих создать программное обеспечение, которое обеспечивает обработку новых результатов обучения и не уступает по своим функциональным возможностям лучшим зарубежным аналогам.
В соответствии с изложенным проблема исследования определяется необходимостью устранения противоречий между требованиями(ем):
1. Автоматизации, независимости и низкой погрешности оценивания уровня подготовки обучаемых по выборкам ограниченного объёма и отсутствием теоретических основ создания необходимых для этого математических моделей, программно-алгоритмических и методических средств. Оценивания уровня сформированное™ общекультурных и профессиональных компетенций (ОК и ПК) обучаемых и отсутствием теоретической и методологической базы для построения моделей АСНО новых результатов обучения - компетенций;
2. Наличия качественных средств диагностики уровня сформированности компетенций и отсутствием теоретической и методической базы, обеспечивающей повышение точности расчёта характеристик и показателей качества диагностических средств по выборкам ограниченного объёма.
Актуальность диссертационного исследования обусловлена сформулированными неотложными потребностями обучения и отсутствием реальных возможностей их обеспечения.
Работа выполнена в рамках гранта по аналитической ведомственной целевой программе (АВЦП) «Развитие научного потенциала высшей школы (20092011 г.г.)» (РН 3.4.1/3224 и 3.4.1/10601) Минобрнауки РФ; утверждённых научных направлений «Научно-методическое обеспечение инновационного развития высшей школы» ФГБОУ ВПО «ЮРГТУ (НПИ)» и «Методы, технические и программные средства измерения латентных переменных в области образования, социальных и экономических системах» ФГБОУ ВПО «ЮРГУЭС»; ЕЗН Минобрнауки РФ «Разработка методов и программных средств для расчёта латентных переменных по экспериментальным выборкам малого объёма» (ЮРГУЭС-4.08Ф,
№ГР 01.200.802798).
Целью диссертационной работы является обеспечение автоматизированной независимой оценки результатов компетентностно-ориентированного обучения на основе развития теории латентных переменных, разработки и обоснования математических моделей, создания программно-инструментальных средств.
Для достижения указанной цели были поставлены следующие задачи исследования:
- теоретически обосновать процедуры расчёта латентных параметров обучаемых и средств диагностики, а также разработать необходимые для этого алгоритмы и комплексы программ;
- обосновать условия существования и единственности оценок латентных параметров обучаемых и средств диагностики, исследовать состоятельность оценок, рассчитанных по дихотомической матрице ответов ограниченного размера;
- разработать методы, обеспечивающие снижение погрешности расчёта оценок латентных параметров обучаемых и средств диагностики на основе компьютерного моделирования матрицы ответов ограниченного размера;
- экспериментально и теоретически исследовать применимость непараметрических методов математической статистики для повышения точности калибровки заданий диагностических средств по дихотомическим матрицам ответов ограниченного размера; разработать необходимые для этого алгоритмы и программное обеспечение;
- разработать модель дихотомической матрицы ответов, применение которой позволит снизить влияние искажающих факторов на результаты исследования латентных параметров и характеристик диагностических средств;
- разработать методологические основы оценки уровня сформированности компетенций обучаемых и модель мониторинга, позволяющую объективно отслеживать результаты обучения и показатели качества диагностических средств;
- разработать модель системы оценки уровня подготовки выпускников учреждений по обучению, повышению квалификации и переподготовке кадров,
и
обеспечивающую объективную оценку их профессиональной подготовки и соответствие её требованиям стандарта;
- провести вычислительные эксперименты, подтверждающие эффективность новых вычислительных алгоритмов и справедливость полученных теоретических результатов.
Объектом исследования является процесс независимой оценки результатов обучения при подготовке, повышении квалификации и переподготовке кадров в учреждениях различных министерств и ведомств.
Предмет исследования: теоретические основы, математические модели, вычислительные алгоритмы, комплексы программ систем автоматизированной оценки результатов обучения.
Методы исследования. Теоретическую основу исследования составляют: теория латентных переменных, теория вероятностей и математической статистики. Для решения поставленных задач применялись методы: вычислительной математики, имитационного моделирования, математического анализа, теории множеств и матричной алгебры, теоретического и экспериментального исследования.
На защиту выносятся:
- обоснование условий существования и единственности оценок максимального правдоподобия латентных параметров основной модели Раша и разработанный на их основе алгоритм проверки дихотомической матрицы ответов на соответствие этим условиям;
- теоретическое и экспериментальное обоснование состоятельности оценок максимального правдоподобия латентных параметров основной модели Раша, рассчитанных по допустимым квазинормативным дихотомическим матрицам ответов ограниченного размера;
- метод расчета квазигенеральных оценок латентных параметров «уровень подготовки» обучаемого и «трудность задания» ДС путём моделирования допустимой нормативной дихотомической матрицы ответов с ограниченным числом строк и столбцов нормативными матрицами с их существенно большим количеством;
- метод калибровки заданий теста путём моделирования допустимой квазинормативной дихотомической матрицы ответов ограниченного размера аналогичными матрицами с существенно большим количеством строк и с равными значениями столбцовых сумм, позволяющий получить квазигенеральные оценки трудности заданий;
- модель нормативной дихотомической матрицы ответов, методика и алгоритм её формирования;
- модель мониторинга уровня компетенций обучаемых и оценки качества средств диагностики;
- модель системы независимой оценки уровня подготовки выпускников учреждений, осуществляющих обучение, повышение квалификации и переподготовку кадров, по уровню сформированности их компетенций.
- алгоритмы и комплексы программ для расчёта параметров и характеристик обучаемых и средств диагностики.
Научная новизна исследования:
1. Впервые получены условия допустимости, которым должны удовлетворять дихотомические матрицы результатов тестирования, используемые для расчёта оценок максимального правдоподобия латентных параметров основной модели Раша, выполнение которых обеспечивает существование и единственность оценок. Предложены алгоритм проверки дихотомической матрицы ответов на соответствие её условиям допустимости и алгоритм расчёта доли таких матриц ответов заданного размера. Показано, что доля допустимых дихотомических матриц ответов зависит от соотношения числа их строк и столбцов;
2. Впервые показано, что оценки максимального правдоподобия латентных параметров основной модели Раша, рассчитанные по квазинормативным допустимым матрицам ответов ограниченного размера (N,¿>50) являются состоятельными. Установлено, что при одновременном увеличении числа и строк, и столбцов матрицы ответов обеспечивается состоятельность оценок параметров и «уровень подготовки» обучаемого, и «уровень трудности» задания. Если увеличивается только число строк матрицы, а количество столбцов фиксировано и все
столбцовые суммы одинаковы, состоятельны только оценки параметра «уровень трудности» задания, а оценки параметра «уровень подготовки» обучаемого, стремятся по вероятности к первоначальным значениям. Установлены минимально достаточные размеры нормативной допустимой матрицы ответов, по которой могут быть рассчитаны генеральные оценки латентных параметров в, и Р};
3. Предложены новая модель нормативной дихотомической матрицы ответов, методика и алгоритм её формирования по заданным законам распределения латентных параметров <9, , , отличающаяся от экспериментальных матриц ответов высокой адекватностью модели Раша и высокими показателями качества соответствующего ей виртуального диагностического средства. Предложена методика экспертизы качества диагностических средств по нормативным дихотомическим матрицам ответов ограниченного размера, отличающаяся от известных меньшей погрешностью калибровки заданий этих средств;
4. Теоретически и экспериментально обоснован новый метод калибровки заданий теста путём моделирования допустимой квазинормативной дихотомической матрицы ответов ограниченного размера NнхЬн аналогичными матрицами с существенно большим числом строк и с одинаковыми значениями столбцовых сумм, позволяющий получить квазигенеральные оценки трудности заданий;
5. Предложен новый метод расчета квазигенеральных оценок латентных параметров <9,о и путём моделирования допустимой нормативной дихотомической матрицы ответов ограниченного размера МнхЬн нормативными матрицами с существенно большим числом строк и столбцов;
6. На основе предложенной методологии оценки сформированности компетенции по значениям его личностного, когнитивного и интегративно-деятельностного компонентов впервые разработана модель мониторинга, позволяющая объективно отслеживать уровень сформированности компетенций обучаемых и проводить экспертизу качества диагностических средств. Разработана новая модель АСНО уровня подготовки выпускников учреждений по обучению,
повышению квалификации и переподготовке кадров, обеспечивающая объективную оценку соответствия его требованиям соответствующих стандартов;
7. Предложены новые вычислительные алгоритмы для обработки результатов диагностики обучения и проверки их качества, отличающиеся от известных надёжной сходимостью итерационных оценок к оцениваемому параметру и позволяющие создать ПО для объективной формализованной оценки параметров и характеристик обучаемых и средств диагностики.
Теоретическая значимость:
- полученные в диссертационной работе научные результаты по исследованию существования и единственности оценок максимального правдоподобия латентных параметров основной модели Раша, состоятельности этих оценок, рассчитанных по допустимой квазинормативной матрице ответов ограниченного размера, вносят вклад в дальнейшее развитие теории латентных переменных;
- получили своё дальнейшее развитие и совершенствование теория построения программно-алгоритмических средств обработки результатов диагностики обучения (входных данных) и оценки качества диагностических средств за счёт математического обоснования и реализации новых алгоритмов расчёта оценок латентных параметров моделей Раша, разработки компьютерных моделей нормативных дихотомических матриц ответов, методики и алгоритма их формирования, создания новых компьютерных алгоритмов и программного обеспечения, реализованных в программных комплексах ЮЬР-1М, ШЬР-2, ЮЬР-тиШ;
- созданы теоретико-методологические основы мониторинга результатов компетентностно-ориентированного обучения и оценки качества диагностических средств по матрицам ответов ограниченного размера, моделирования автоматизированных систем независимой оценки уровня подготовки выпускников учреждений, осуществляющих обучение, повышение квалификации и переподготовку кадров в рамках реализации компетентностного подхода.
Практическая значимость результатов работы:
1. Разработаны программные комплексы ШЬР-1М и ШЬР-2 который обеспечивает обработку результатов диагностики обучения, представленных квазинор-
мативной матрицей ответов, надёжную оценку качества диагностических материалов и получение независимых оценок уровня подготовки обучаемых;
2. Использование методов калибровки тестовых заданий и расчёта квазигенеральных оценок латентных параметров путём моделирования допустимой квазинормативной матрицы ответов ограниченного размера позволяет с доверительной вероятностью 0,95 существенно снизить погрешности расчёта параметров (не менее чем в 2 раза при выборочной дисперсии уровня подготовки обучаемых, не превышающей 0,58 логит2);
3. Замена реальной допустимой нормативной дихотомической матрицы ответов её моделью с высокими показателями качества при параметризации средств диагностики обучения обеспечивает снижение влияния искажающих факторов на результаты параметризации, за счёт чего достигается повышение точности оценивания результатов обучения. С помощью моделирования нормативных дихотомических матриц ответов установлено, что погрешность калибровки тестовых заданий трудностью | > ОД 8 логит не превышает 6 % при объёме выборки N=200 и
3 % при N=300;
4. Методологические основы оценки уровня сформированности компетенций обучаемых и методика экспертизы качества диагностических средств обеспечивают надёжное количественное оценивание результатов компетентностно-ориентированного обучения и эффективное управление его процессом;
5. Модель мониторинга уровня сформированности компетенций обучаемых позволяет объективно отслеживать уровень их подготовки в процессе обучения и получать информацию о качестве диагностических средств. Использование модели обеспечит создание в короткие сроки качественных средств диагностики, пригодных для проведения итоговой государственной аттестации выпускников;
6. Модель системы оценки уровня подготовки выпускников учреждений по обучению, повышению квалификации и переподготовке кадров, базирующаяся на методологии оценки компетенций обучаемых, позволяет получить объективную информацию о владении выпускников компетенциями и о соответствии их уровня требованиям соответствующих стандартов.
Все перечисленные в п.п. 1-6 результаты позволят обеспечить высокую надёжность независимой оценки уровня подготовки обучаемых.
Достоверность и обоснованность полученных научных результатов подтверждена соответствием фундаментальным положениям математического анализа, теории вероятностей и математической статистики; корректностью применения математического аппарата; строгим доказательством сформулированных утверждений; их обоснованной математической трактовкой и непротиворечивостью известным (опубликованным) данным; соответствием (с точностью до 2 %) ожидаемых данных эмпирическим; результатами вычислительных экспериментов; устойчивой повторяемостью результатов; представительным количеством использованных источников информации; сочетанием количественного и качественного анализа; положительной оценкой на международных и всероссийских конференциях, полученной в результате критического обсуждения. Выводы, полученные с помощью разработанных моделей и методов, находятся в логическом соответствии с основными положениями теории латентных переменных.
Реализация результатов работы. Результаты диссертационной работы внедрены и используются в следующих организациях:
- Государственное бюджетное учреждение Ростовской области «Ростовский областной центр обработки информации в сфере образования» - программный продукт RILP-1M, методика обработки результатов диагностики и расчёта характеристик и латентных параметров обучаемых и средств диагностики;
- ФГБОУ ВПО «Донской государственный технический университет» - программный комплекс RILP-1M, теоретическая модель мониторинга сформированное™ компетенций обучаемых и оценки качества диагностических средств, метод расчета уровня сформированности компетенций обучаемого и методология их независимой оценки, методика экспертизы качества диагностических средств;
- ФГБОУ ВПО «Ростовский государственный строительный университет» -метод и методология независимой оценки уровня сформированности общекультурных компетенций студентов, модель мониторинга сформированности компе-
тенций обучаемых и оценки качества диагностических средств, программный комплекс ШЬР-1М;
- ФГБОУ ВПО «Южно-Российский государственный университет экономики и сервиса» - программные комплексы ШЬР-1М, ШЬР- шиШ, программы для построения психограмм и моделирования дихотомических матриц ответов, методы и методики расчёта характеристик и параметров обучаемых и средств диагностики процесса обучения, методология оценки уровня сформированности компетенций и модель его мониторинга;
- ОАО «Системный оператор единой энергетической системы» - программный комплекс ЮЫММ, теоретическая модель мониторинга независимой оценки уровня сформированности компетенций обучаемых, методика экспертизы качества диагностических средств по дихотомическим матрицам ответов ограниченного размера;
- ФГОУ «Академия дополнительного профессионального образования «Учебный центр подготовки руководителей»» - методология оценки уровня сформированности компетенций студентов (использована в докладе автора диссертации на семинаре проректоров по учебной работе вузов России и положительно оценена участниками семинара (отзыв от 29.10.2011)).
Внедрение результатов работы подтверждено соответствующими актами.
Результаты диссертационного исследования использованы в учебных пособиях с грифом УМО «Методологические основы разработки и оценки качества педагогических измерительных материалов (на примере дисциплины «Основы теории цепей»)» и «Теория линейных электрических цепей в тестах» для обучения студентов ВПО направления подготовки 210300 «Радиотехника» по указанной дисциплине.
Основные результаты исследования получены при выполнении НИР «Разработка оценочных и диагностических средств для независимой оценки качества образования в многоуровневых университетских комплексах» в рамках АВЦП «Развитие научного потенциала высшей школы (2009-2011 г.г.)» (РН 3.4.1/3224 и 3.4.1/10601) Минобрнауки РФ и НИР «Разработка методов и программных
средств для расчёта латентных переменных по экспериментальным выборкам малого объёма» по ЕЗН Минобрнауки РФ (ЮРГУЭС-4.08Ф, № ГР 01.200.802798). НИР выполнены в ФГБОУ ВПО «ЮРГУЭС» под научным руководством автора настоящего диссертационного исследования.
Программное обеспечение для ЭВМ, реализующее новые методы и алгоритмы расчёта характеристик ДС и параметров обучаемых, зарегистрированы в Федеральной службе по интеллектуальной собственности, патентам и товарным знакам (РОСПАТЕНТ).
Похожие диссертационные работы по специальности «Математическое моделирование, численные методы и комплексы программ», 05.13.18 шифр ВАК
Управление в системах электронного обучения на базе формального аппарата семиотики и теории систем2013 год, кандидат наук Зверева, Нина Николаевна
Метод и алгоритмы измерения латентных переменных при управлении в образовательных системах2009 год, кандидат технических наук Поздняков, Станислав Александрович
Математическое моделирование и идентификация параметров адаптивного тестирования с учетом временной динамики выполнения заданий2018 год, кандидат наук Думин, Павел Николаевич
Разработка и исследование модели для оценки эффективности банков тестовых заданий в компьютерных системах обучения2007 год, кандидат технических наук Бойченко, Михаил Михайлович
Разработка моделей и методов принятия решений в задачах тестирования знаний2012 год, кандидат технических наук Шестова, Елена Александровна
Список литературы диссертационного исследования кандидат наук Елисеев, Иван Николаевич, 2013 год
Список литературы
1. Аванесов, B.C. Основы научной организации педагогического контроля в высшей школе / B.C. Аванесов. - М.: Исслед. центр по проблемам управления качеством подготовки специалистов при МИСиС, 1989. - 68 с.
2. Аванесов, B.C. Композиции тестовых заданий / B.C. Аванесов. - М.: Центр тестирования МО РФ, 2002. - 240 с.
3. Аванесов, B.C. Методологические и теоретические основы тестового педагогического контроля: дис. на соискание уч. степени доктора педагогических наук: 13.00.01 / Аванесов Вадим Сергеевич. - Санкт-Петерб. гос. ун-т. Санкт-Петербург, 1994.-339с.
4.Аванесов, B.C. Тесты в социологическом исследовании / B.C. Аванесов. - М.: Наука, 1982. - 199с.
5. Аванесов, B.C. Item Response Theory: основные понятия и положения / B.C. Аванесов // Педагогические измерения. 2007. - № 2. - С. 3-28.
6. Аванесов B.C. Основы педагогической теории измерений / B.C. Аванесов. // Педагогические Измерения. - 2004. - №1. - С. 15-21.
7. Аванесов, B.C. Истоки и основные понятия математической теории измерений (Item Response Theory) // Педагогические Измерения. - 2007. - №3. -С. 3-37.
8. Аванесов, B.C. Современные методы обучения и контроля знаний: учеб. пособие для преподавателей вузов, техникумов и училищ, учителей школ, гимназий и лицеев, для студентов и аспирантов педагогических вузов / B.C. Аванесов. - М.: Кидди (Kiddy), 1998. - 103 с.
9. Анисимова, Т.С. Измерение латентных переменных в образовании / Т.С. Ани-симова. - М.: Исследовательский центр проблем качества подготовки специалистов, 2004. - 148 с.
10. Анисимова, Т.С. Исследование точности измерения латентной переменной в зависимости от числа градаций индикаторных переменных / Т.С. Анисимова, A.A. Маслак, С.А. Осипов, С.А. Поздняков // Теория и практика измерения латентных переменных в образовании: материалы седьмой всероссийской (с международным
участием) научно-практической конференции. - Славянск-на-Кубани: Издательский центр СГПИ. 2005. - С. 12 - 22.
11. Анисимова, Т.С. Исследование точности измерения латентной переменной в зависимости от числа дихотомических индикаторных переменных / Т.С. Анисимова, A.A. Маслак, С.А. Осипов, В.В. Евдокимова, Е.В. Улитенко // Вестник СГПИ. - 2005. - №1 (1). - С. 136 - 144.
12. Анисимова, Т.С. Исследование точности оценивания параметров модели Раша на основе алгоритма PROX / Т.С. Анисимова, A.A. Маслак, С.А. Осипов, И.А. Хмара // Педагогические измерения. - 2005. - №2. - С. 80 - 100.
13. Анисимова, Т.С. Сравнительный анализ модели Rasch и классической модели по точности оценивания / Т.С. Анисимова, A.A. Маслак, С.А. Осипов // Анализ качества образования и тестирование: материалы конференции. - М.: Изд-во МЭСИ, 2001.-С. 38-42.
14. Анисимова, Т.С. Статистические аспекты оценки качества тестов / Т.С. Анисимова, A.A. Маслак // Развитие методов и средств компьютерного тестирования (Москва, 20-21 апреля 2005 г): материалы 3-ей Всероссийской научно-методической конференции. - М.: МГУП, 2005. - С. 7 -9.
15. Ахмеджанов, Э.Р. Психологические тесты / Э.Р. Ахмеджанов. - М.: Лист, 1997. - 320 с.
16. Ахмеров, P.P. Методы оптимизации гладких функций: курс лекций / [Электронный ресурс] / P.P. Ахмеров// Новосибирский госуниверситет. - Режим доступа: http://www.sbras.ru/rus/textbooks/akhmerov/mo unicode/4.html (Дата обращения 20.03.2013).
17. Березин, Н.В. Оценки уровня подготовленности в моделях Раша / Н.В. Березин // Развитие системы тестирования в Росси: тезисы докладов второй всероссийской конференции, Москва, 2000. 4.4. - С 61-63.
18. Бермус, А.Г. Проблемы и перспективы реализации компетентностного подхода в образовании [Электронный ресурс] / А.Г. Бермус // Интернет-журнал «Эй-дос». 2005.- Режим доступа: http://www.eidos.ru/iournal/2005/0910-12.htm (дата обращения 10 09.2010).
19. Большая энциклопедия педагогических тестов / под ред. А. Карелина. - М.: Эксмо, 2006.-416 с.
20. Болыпев, J1.H. Таблицы математической статистики / J1.H. Большее, Н.В. Смирнов. - М.: Наука, главная редакция физико-математической литературы, 1983.-416 с.
21. Боровков A.A. Математическая статистика / A.A. Боровков. - М.: Наука. Главная редакция физико-математической литературы, 1984. - 472 с.
22. Бусленко, Н.П. Метод статистических испытаний. Метод Монте-Карло / Н.П. Бусленко, Д.И. Голенко, И.М. Соболь, В.Г. Срагович, Ю.А. Шрейдер. - М.: Физ-матгиз, 1962. - 332 с.
23. Бячков, А.П. Программный комплекс для компьютерной генерации тестов / А.Б. Бячков, И.В. Геранова, A.A. Иванов, А.П. Иванов // Развитие системы тестирования в России: тезисы докладов II всероссийской конференции. — М.: ЦТ МО России, 2000. Ч. 4. - С. 78-79.
24. Виноградов, Б.В. Измерение на линейно шкале качества выпускной квалификационной работы по истории / Б.В. Виноградов, A.A. Маслак, С.А. Поздняков, О.В. Гайворонская // Теория и практика измерения латентных переменных в образовании (Славянск-на-Кубани, 21-23 июня 2007 г.): материалы IX всероссийской научно-практической конференции. - Славянск-на-Кубани: Издательский центр СГПИ, 2007. - С. 26-42.
25. Возможности IBM- версий статистического пакета программ SPSS: IBM SPSS Statistics Editions [Электронный ресурс] // руководство пользователя, 2012. - Режим доступа:
http://public.cme.ibm.com/common/ssi/ecm/en/yts03009usen/YTS03009USEN.pdf. (Дата обращения 29.08.2012).
26. Гмурман, В.Е. Теория вероятностей и математическая статистика: учебное пособие / В.Е. Гмурман. - М. Высшее образование, 2008. - 480 с.
27. Гончарова, H.JI. Категории «компетентность» и «компетенция» в современной образовательной парадигме / H.J1. Гончарова // Гуманитарные науки. - 2007. -
№ 5. - С. 53-56.
28. Гузаиров, М.Б. Защищенная автоматизированная система тестирования / М.Б. Гузаиров, Р.З. Ахметсафина, Т.Э. Нарыев, P.P. Валиуллин // Развитие системы тестирования в России: тезисы докладов II всероссийской конференции. - М., 2000. 4.4. -С. 74-75.
29. Данилюк, А.Я. Теория интеграции образования / А .Я. Данилюк. - Ростов н/Д.: Изд-во РГПУ, 2000. -440 с.
30. Елисеев, И.Н. Алгоритмы итерационных процедур вычисления оценок уровня подготовки студентов / И.Н. Елисеев // Известия высших учебных заведений. Электромеханика». - 2013. № 3. С. 83-90.
31. Елисеев, И.Н. Алгоритм расчёта уровня подготовки студентов с использованием латентных переменных / И.Н. Елисеев // Современный учебно-воспитательный процесс: теория и практика: материалы V всероссийской (с международным участием) заочной научно-практической конференции. - Красноярск, СГТУ, 2013. Ч. 2. - С. 212-219.
32. Елисеев, И.Н. Алгоритм проверки дихотомической матрицы результатов тестирования на соответствие условиям допустимости / И.Н. Елисеев, A.B. Фисунов // Перспективы развития гуманитарных и технических систем» (Перспекти-вы_ГТС_11): материалы всероссийской научной конференции. - Таганрог, 2011. -С. 22-25.
33. Елисеев, И.Н. Анализ параметров заданий теста централизованного тестирования по математике / И.Н. Елисеев, И.И. Елисеев, Н.Ф. Ефремова, А.Г. Клово // Развитие системы тестирования в России: тезисы докладов всероссийской конференции. - Москва, 1999. 4.2. - С 113-115.
34. Елисеев, И.Н. Диагностика индивидуальных свойств личности в студенческой среде на основе модели Раша / И.Н. Елисеев // Стандарты и мониторинг в образовании. - 2009. - № 3. - С. 35-38.
35. Елисеев, И.Н. Диагностика коммуникативных компетенций студентов на основе политомической модели Раша / И.Н. Елисеев, Т.Н. Ларина, Л.Ю. Литвиненко // Современное образование: содержание, технологии, качество: материалы XVII
международной научно-методической конференции. - Санкт-Петербург, СПбГЭ-ТУ «ЛЭТИ», 2011. Т. 2. - С. 7-9.
36. Елисеев, И.Н. Диагностика социально-личностных компетенций выпускника с использованием методов теории латентных переменных / И.Н. Елисеев, Л.Б. Ред-козубова // Профессиональная ориентация молодёжи в современных социально-экономических условиях: состояние, проблемы, перспективы (Славянск-на-Кубани, апрель 2009 г.): сб. статей III Всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани, СГПИ, 2009. -
С. 166-169.
37. Елисеев, И.Н. Диагностика уровня сформированности представлений о здоровом образе жизни / И. Н. Елисеев, Л. Ю. Литвиненко // Современные исследовательские и образовательные технологии (СИОТ-Ю) (Таганрог, октябрь 2010 г.): материалы всероссийской научной конференции. Таганрог, ТТИ ЮФУ, октябрь, 2010.-С.19-24.
38. Елисеев, И.Н. Диагностика формально-динамических свойств личности на основе политомической модели Раша / И.Н. Елисеев, Л.Ю. Литвиненко // Информационное общество: идеи, технологии, системы: материалы международной научной конференции. Таганрог, ТТИ ЮФУ, 2010. Ч. 2 - С. 30-38.
39. Елисеев, И.Н. Доказательство несостоятельности стандартных оценок латентных параметров дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Известия высших учебных заведений. Электромеханика. - 2012. - №1. -С. 86-96.
40. Елисеев, И.Н. Измерение качества квалификационных работ выпускников колледжа на основе модели Раша / И.Н. Елисеев, Л.Н. Скорева, Ю.С. Пономарева // Системы и модели в информационном мире» (СМИ-2009) (Таганрог, март 2009г.): сб. статей международной научной конференции. - Таганрог, ТТИ ЮФУ, 2009.Ч. 1. - С. 33-39.
41. Елисеев, И. Н. Измерение качества образовательных услуг на основе модели Раша / И. Н. Елисеев, Л.Н. Скорева, Н.П. Воронова // Методы и алгоритмы принятия эффективных решений» (МАПР-09) (Таганрог, октябрь 2009 г.): материалы международной научной конференции. - Таганрог, ТТИ ЮФУ, 2009. Ч. 1. - С. 35-41.
42. Елисеев, И.Н. Измеритель латентных переменных RILP-1 / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Автоматизированные системы управления учебным процессом в образовании: опыт, проблемы, возможности: материалы VII всероссийского научно-практического семинара. - Шахты, ЮРГУЭС, 2008. - С.23-27.
43. Елисеев, И.Н. Интеграция образовательных программ среднего и высшего профессионального образования в рамках многоуровневого университетского комплекса / И. Н. Елисеев, JI.H. Скорева // Инновации. - 2010. - №4 (138). - С.88-90.
44. Елисеев, И.Н. Использование модели Раша для диагностики социально-личностных компетенций / И.Н. Елисеев // Современное образование: содержание, технологии, качество: материалы международного форума. - Санкт-Петербург, СПбГЭТУ «ЛЭТИ», 2010. Т.2. - С. 239-241.
45. Елисеев, И.Н. Использование модели Раша для диагностики межличностных отношений в студенческой среде / И.Н. Елисеев, A.B. Фисунов // Информация, сигналы, системы: вопросы методологии, анализа и синтеза (ИСС-2008): сб. статей международной научной конференции. - Таганрог, 2008. 4.1. - С. 33 - 40.
46. Елисеев, И.Н. Исследование погрешности расчёта трудности заданий теста на основе моделирования дихотомической матрицы ответов / И.Н. Елисеев // Педагогическая информатика. - 2011. - № 4. - С. 92-101.
47. Елисеев, И.Н. Исследование погрешности калибровки заданий теста на модели дихотомической матрицы ответов / И.Н. Елисеев, A.B. Фисунов, A.C. Папян // Актуальные вопросы исследования общественных и технических систем (АВИОТС-2011): материалы всероссийской научной конференции- Таганрог, ТТИ ЮФУ, 2011. Ч. 1.-С. 36-42.
48. Елисеев, И. Н. Исследование предельных оценок латентных переменных по выборкам малого объёма / И.Н. Елисеев // Методы и алгоритмы принятия эффективных решений (МАПР - 09) (Таганрог, октябрь 2009): материалы международной научной конференции. - Таганрог, ТТИ ЮФУ, 2009. Ч. 2. С. 29-35.
49. Елисеев, И.Н. Исследование существования и единственности оценок максимального правдоподобия параметров латентных переменных однопараметриче-
ской дихотомической модели Раша / И.Н. Елисеев, И. С Шрайфель // Информатизация образования и науки. - 2011. - № 3 (11). - С. 117-129.
50. Елисеев, И.Н. Исследование темперамента личности на основе однопарамет-рической модели Раша / И.Н. Елисеев, Л.Ю Литвиненко // Современный учебно-воспитательный процесс: теория и практика: материалы II всероссийской (с международным участием) заочной научно-практической конференции. - Красноярск, СГТУ, 2010.-С. 338-344.
51. Елисеев, И.Н. Исследование темперамента личности на основе методов теории латентных переменных / И.Н. Елисеев, Л.Ю Литвиненко // Системы и модели в информационном мире (СМИ-2009) (Таганрог, март 2009 г.): сб. статей межд. научной конференции. - Таганрог, ТТИ ЮФУ, 2009. Ч. 1. -С. 27-33.
52. Елисеев, И.Н. Исследование темперамента личности с использованием логистической модели. / И.Н. Елисеев, Л.Ю Литвиненко // Профессиональная ориентация молодёжи в современных социально-экономических условиях: состояние, проблемы, перспективы (Славянск-на-Кубани, апрель 2009 г. ): сб. статей III Всероссийской (с международным участием) научно-практической конференции. Славянск-на-Кубани, СГПИ, 2009. - С. 162-165.
53. Елисеев, И.Н. Калибровка заданий теста с использованием бутстреп-метода /И.Н. Елисеев // Программные продукты и системы. - 2010. - № 2. - С 96-99.
54. Елисеев, И.Н. Комплекс программных средств для обеспечения процедуры тестирования и оценки качества тестовых материалов / И.Н. Елисеев, И.И. Елисеев, И.М. Мальцев, А.Н Гладилин // Пути совершенствования подготовки специалистов для текстильной промышленности: тезисы доклада на международной научно-методической конференции. - М.: МГТУ им. А.Н. Косыгина, 2002. - С. 50-51.
55. Елисеев, И.Н. Латентные переменные в психодиагностике / И.Н. Елисеев, Л.Б. Редкозубова, Д.А. Сизенко // Психология образования: современное состояние и перспективы: сб. ст. II Всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани, СГПИ, 2008. - С. 330-333.
56. Елисеев, И.Н. Методы, алгоритмы и программные комплексы для расчёта характеристик диагностических средств независимой оценки качества образования: монография / И.Н. Елисеев. -2 изд., перераб. и доп. -Новочеркасск: Лик, 2013. -285 с.
57. Елисеев, И. Н. Метод чистки теста путём последовательного удаления неадекватных респондентов и заданий / И.Н. Елисеев // Тестирование в сфере образования: проблемы и перспективы развития: материалы III Всероссийской (с международным участием) научно-практической конференции. - Красноярск, СГТУ, 2010. -С. 27-31.
58. Елисеев, И.Н. Методика оценки индивидуальных свойств личности в студенческом коллективе методом измерения латентных переменных / И.Н. Елисеев, Л.Б. Редкозубова, Д.А. Сизенко // Организация внеучебной и воспитательной работы вуза: Сб. статей по проблемам высшей школы. - Новочеркасск: ЮРГТУ (НПИ), 2008. - С. 73-76.
59. Елисеев, И.Н. Методологические основы разработки и оценки качества педагогических измерительных материалов (на примере дисциплины «Основы теории цепей»): учеб. пособие с грифом УМО учебных заведений РФ по образованию в области сервиса и туризма Минобрнауки России для студентов высших учебных заведений / И.Н. Елисеев. - Новочеркасск, Колорит, 2010. - 166с.
60. Елисеев, И.Н. Методология оценки уровня компетенций студента / И.Н. Елисеев // Информатика и образование. - 2012. - №4. - С. 80-85.
61. Елисеев, И.Н. Методологические основы оценки уровня сформированности компетенций выпускника бакалавриата (магистратуры) / И.Н. Елисеев // Современное образование: содержание, технологии, качество: материалы XVIII Международной научно-методической конференции. - Санкт-Петербург, СПбГЭТУ «ЛЭТИ», 2012. Т. 2. - С. 139-141.
62. Елисеев, И.Н. Метод оценки уровня сформированности компетенций и качества подготовки выпускника / И.Н. Елисеев // Современное образование: содержание, технологии, качество: материалы XIX Международной научно-методической конференции. - Санкт-Петербург, СПбГЭТУ «ЛЭТИ», 2013. Т. 1. -С. 83-84.
63. Елисеев, И.Н. Модель дихотомической матрицы результатов тестирования / И.Н. Елисеев // Программные продукты и системы. - 2011. - № 3. - С. 80-86.
64. Елисеев, И.Н. Модель мониторинга уровня компетенций студентов и оценки качества диагностических средств / И.Н. Елисеев // Известия высших учебных заведений. Сев.-Кавк. регион. Технические науки. - 2012. - №3. - С. 126-132.
65. Елисеев, И.Н. Модель оценивания латентных параметров дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Известия высших учебных заведений. Сев.-Кавк. регион. Технические науки». - 2011. - № 6. -С. 37-46.
66. Елисеев, И.Н. Модель системы оценки качества подготовки выпускников бакалавриата и магистратуры / И.Н. Елисеев // Информатизация образования и науки. - 2012. - №3(15). - С.106-115.
67. Елисеев, И.Н. Непараметрический подход к расчёту уточнённых значений латентных переменных. / И.Н. Елисеев // Тестирование в сфере образования: проблемы и перспективы развития (Красноярск, май 2009 г.): сб. статей II Всероссийской научно-практической конференции. - Красноярск, СГТУ, 2009.-С.46-51.
68. Елисеев, И.Н. Обработка результатов тестирования, представленных полито-мической переменной / И.Н. Елисеев, И.И. Елисеев // Пути совершенствования подготовки специалистов для текстильной промышленности: материалы международной научно-методической конференции. М., МГТУ им. А.Н. Косыгина, 2002. - С. 64-66.
69. Елисеев, И.Н. Обработка результатов тестирования с использованием бутст-реп-процедур / И.Н. Елисеев // Современное образование: содержание, технологии, качество: материалы международного форума. - Санкт-Петербург, СПбГЭТУ «ЛЭТИ», 2010. Т.2. - С. 30-32.
70. Елисеев, И.Н. О несостоятельности стандартных оценок латентных параметров дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Приоритетные направления развития науки и технологий: доклады X всероссийской научн.-техн. конф.; под общ. ред. В.М. Панарина. - Тула: Изд-во «Инновационные технологии», 2011 (276 е.). - С. 142-144.
71. Елисеев И.Н. Опыт работы колледжа в рамках многоуровневого университетского комплекса / И.Н. Елисеев, А.Г. Сапронов, JI.H. Скорева / Высшее образование в России. - 2009. - №3/09. - С. 68-72.
72. Елисеев, И.Н. О состоятельности дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Известия высших учебных заведений. Северо-Кавказский регион. Технические науки. - 2012. - №5. - С. 127-136.
73. Елисеев, И. Н Отбраковка заданий предтеста с использованием бутстреп-процедур / И.Н. Елисеев / Современные исследовательские и образовательные технологии (СИОТ-Ю) (Таганрог, октябрь 2010 г.): материалы всероссийской научной конференции. - Таганрог, ТТИ ЮФУ, 2010. - С. 12-18.
74. Елисеев, И. Н. Оценка качества опросника «Уровень сформированности гражданственности и патриотизма» для измерения латентной переменной «Гражданственность и патриотизм» / И.Н. Елисеев, JI.B. Литвиненко, A.C. Папян // Методы и алгоритмы принятия эффективных решений» (МАПР - 09) (Таганрог, октябрь 2009 г.): материалы международной научной конференции. - Таганрог, ТТИ ЮФУ, 2009. Ч. 1.-С. 31-35.
75. Елисеев, И.Н. Оценка общекультурных компетенций с помощью теста-опросника Лири / И.Н. Елисеев, Т.Н. Ларина, Л.В. Носкова // Перспективы развития гуманитарных и технических систем (Перспективы_ГТС_11): материалы всероссийской научной конференции. - Таганрог, ТТИ ЮФУ, 2011. - С. 16-21.
76. Елисеев, И.Н. Оценка уровня подготовленности выпускников колледжа на основе измерения качества квалификационных работ / И.Н. Елисеев // Стандарты и мониторинг в образовании. - 2010. - № 1. - С. 47-49.
77. Елисеев, И.Н. Программный комплекс RILP-1 / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Программные продукты и системы. - 2009. - № 2. - С. 178-181.
78. Елисеев, И.Н. Программный комплекс RILP-1 для измерения латентных переменных / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Инновации в обществе, технике и культуре: материалы международной научной конференции. - Таганрог, ТТИ ЮФУ, 2008. 4.2. - С. 22-28.
79. Елисеев, И.Н. Программный комплекс для обработки результатов тестирования. / И.Н. Елисеев, И.И. Елисеев, А.И. Шерстобитов // Тестирование в сфере образования: проблемы и перспективы развития: материалы III Всероссийской (с международным участием) научно-практической конференции. - Красноярск, СГТУ, 2010.-С. 165-169.
80. Елисеев, И.Н. Программный комплекс RILP-MULTI для расчета предельных оценок латентных переменных / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Методы и алгоритмы принятия эффективных решений (МАПР-09): материалы межд. научной конференции. - Таганрог, ТТИ ЮФУ, 2009. Ч. 2. - С. 35-38.
81. Елисеев, И.Н. Программный модуль ANALISATOR для расчёта параметров тестовых заданий с несколькими верными ответами / И.Н. Елисеев, И.И. Елисеев, А.Н. Гладилин // Развитие системы тестирования в России: тезисы докладов IV Всероссийской научно-методической конференции. - М., Центр тестирования Минобразования РФ, 2002. - С. 233-234.
82. Елисеев, И.Н. Программное обеспечение компьютерного тестирования и оценки качества тестовых материалов / И.Н. Елисеев, А.Н. Гладилин, И.И. Елисеев // Развитие тестовых технологий в России: тезисы докладов V Всероссийской конференции. - М., ЦТ МО РФ, 2003. - С. 256-257.
83. Елисеев, И.Н. Расчёт латентных параметров диагностических материалов на основе дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Физико-математическое моделирование систем: материалы VII Междунар. семинара. -Воронеж: ГОУ ВПО «Воронежский государственный технический университет», 2011. Ч. З.-С. 80-85.
84. Елисеев, И.Н. Расчёт параметров опросника для измерения качества образовательных услуг в вузе / И.Н. Елисеев, Н.П. Воронова, A.C. Папян // Современное образование: содержание, технологии, качество: материалы XVII Международной научно-методической конференции. - Санкт-Петербург, СПбГЭТУ «ЛЭТИ», 2011. Т. 1.-С. 54-55.
85. Елисеев, И.Н. Расчёт параметров опросника для исследования уровня сформированное™ представлений учащихся и студентов о здоровом образе жизни» / И.Н.
Елисеев, Л.Ю. Литвиненко, С.Т. Игнатова // Актуальные вопросы исследования общественных и технических систем (АВИОТС-2011): материалы всероссийской научной конференции. - Таганрог, ТТИ ЮФУ, 2011. 4.1. - С. 30-36.
86. Елисеев, И.Н. Расчёт параметров опросника Русалова для исследования формально-динамических качеств индивидуальности / И.Н. Елисеев, Л.Ю. Литвиненко // Информатизация образования-2011: материалы международной научно-практической конференции. - Елец, Елецкий государственный университет им. И.А. Бунина, 2011. Т. 2. - С. 107-114.
87. Елисеев, И.Н. Расчёт параметров тестовых заданий при представлении результатов тестирования в виде политомической переменной / И.Н. Елисеев, И.И. Елисеев // Известия вузов. Северо-Кавказский регион. Технические науки. - 2002. -№3. - С. 123-125.
88. Елисеев, И.Н. Расчёт латентных параметров индикаторов психодиагностического теста-опросника Лири / И.Н. Елисеев, И.И. Елисеев // Теория и практика измерения латентных переменных в образовании и других социально-экономических системах: сб. статей X всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани: СГПИ, 2008. -
С. 126-130.
89. Елисеев, И.Н. RILP-Multi для расчета предельных оценок параметров индикаторов бутстреп-методом / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Программные продукты и системы. - 2011. - №2. - С. 114-117.
90. Елисеев, И.Н. Современные методы и программные средства экспертизы педагогических тестов. / И.Н. Елисеев, И.И. Елисеев, И.М. Мальцев // Новые информационные технологии в преподавании электротехнических дисциплин: материалы четвёртой международной научно-методической конференции. - Астрахань, 1998. - С. 74-75.
91. Елисеев, И.Н. Существование и единственность оценок максимального правдоподобия латентных параметров дихотомической модели Раша / И.Н. Елисеев, И.С. Шрайфель // Известия высших учебных заведений. Электромеханика. - 2011. - №1. - С. 78-85.
92. Елисеев, И.Н. Теоретические основы алгоритма расчёта латентных переменных программным комплексом ЮЫММ / И.Н. Елисеев // Программные продукты и системы. - 2011. - №2. - С. 67-71.
93. Елисеев, И.Н. Теоретические основы алгоритма расчёта латентных переменных программным комплексом ШЬР-2 / И.Н. Елисеев // Известия высших учебных заведений. Сев.-Кавк. регион. Технические науки. - 2011. - №3. - С. 3-8.
94. Елисеев, И.Н. Теоретическое обоснование алгоритма расчёта латентных переменных программным комплексом ВДЬР-2 на основе модели рейтинговой шкалы / И.Н. Елисеев, И.И. Елисеев // Известия высших учебных заведений. СевероКавказский регион. Технические науки. - 2011. - №4. - С. 14-19.
95. Елисеев, И.Н. Теоретические основы расчёта доли допустимых дихотомических матриц ответов / И.Н. Елисеев, И.С. Шрайфель // Информатизация образования и науки. - 2011, - № 4. - С. 60-74.
96. Елисеев, И.Н. Технология создания педагогического теста с помощью программных средств «К.-Ьа1еп1;» / И.Н. Елисеев, И.И. Елисеев // Развитие системы тестирования в России: тезисы доклада II Всероссийской конференции. - М., 2000. 4.5.-С. 31-32.
97. Елисеев, И.Н. Уточнённый расчёт параметров латентных переменных по выборкам малого объёма / И.Н. Елисеев, И.И. Елисеев // Развитие тестовых технологий в России: тезисы доклада на IX Всероссийской научно-методической конференции. - М., 2007. -С. 117-118.
98. Елисеев, И.Н. Чистка теста с использованием специализированных программных средств для расчёта латентных переменных / И.Н. Елисеев, И.И. Елисеев, Т.Н. Ларина // Теория и практика измерения латентных переменных в образовании и других социально-экономических системах: сб. ст. IX Всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани, 2007. - С.66-69.
99. Елисеев, И.Н. Чистка теста с использованием бутстреп-процедур / И.Н. Елисеев // Теория и практика измерения компетенций и других латентных переменных
в образовании: материалы всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани, СГПИ, 2010. - С. 139-142.
100. Елисеев, И.Н. Экспериментальное подтверждение состоятельности оценок трудности заданий теста / И.Н. Елисеев // Программные продукты и системы. -2012.-№2. - С. 153-156.
101. Елисеев, И.Н. Экспериментальные исследования состоятельности оценок латентных параметров модели Раша / И.Н. Елисеев // Программные продукты и системы. - 2012. - №3. - С. 166-171.
102. Елисеев, И.Н. Экспертиза качества тестов по электротехническим дисциплинам / И.Н. Елисеев // Известия высших учебных заведений. Электромеханика. -2011.-№2.-С. 75-80.
103. Елисеев, И.Н. Программный комплекс RILP-1 для обработки результатов тестирования и оценки качества контрольно-измерительных материалов / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов // Опыт построения систем оценки качества образования: сб. ст. межрегиональной научно- практической конференции. — Ростов н/Д: ДГТУ, 2008. - С. 80-84.
104. Ермолаев, Ю.Д. Программный комплекс для тестирования абитуриентов / Ю.Д. Ермолаев // Развитие системы тестирования в России: тезисы докладов всероссийской конференции. - М., 1999. Ч. 3. - С. 14.
105. Ерофеев, А.К. Опыт психологического тестирования в системе «Норт» / А.К. Ерофеев // Развитие системы тестирования в России: тезисы докладов III Всероссийской конференции. - М., ЦТ МО России, 2001. Ч. 1. - С. 230.
106. Ефремова, Н.Ф. Проблемы формирования фондов оценочных средств вузов / Н.Ф. Ефремова // Высшее образование сегодня. - 2011. - №3. - С 17-21.
107. Ефремова, Н.Ф. Тестовый контроль в образовании: учеб. пособие / Ефремова Н.Ф. - М.: Логос, 2007. - 368 с.
108. Ефремова, Н.Ф. Тестовый контроль качества учебных достижений в образовании: дис. на соискание уч. степени доктора педагогических наук: 13.00.01 / Ефремова Надежда Фёдоровна. - Ростовский гос. пед. ун-т. Ростов-на-Дону, 2001. -458с.
109. Ефремова, Н.Ф. Формирование и оценивание компетенций в образовании: монография / Ефремова Н.Ф. - Ростов-на-Дону, «Аркол», 2010. - 408 с.
110. Жуков, Д.О. пакет программ «КОБРА» - инструмент создания компьютерных комплексов тестирования знаний / Д.О. Жуков // Развитие тестовых технологий в России: тезисы докладов всероссийской конференции. - М., ЦТ МО РФ, 2002. -С. 273-274.
111. Звонников, В.И. Контроль качества обучения при аттестации: компетентно-стный подход / В.И. Звонников, М.Б. Челышкова - М.: Университетская книга; Логос, 2009. - 272 с.
112. Звонников, В.И. Измерения и шкалирование в образовании / В.И. Звонников. -М.: Логос, 2006.- 134 с.
113. Зимняя, И.А. Ключевые компетенции - новая парадигма результата образования / И.А. Зимняя // Высшее образование сегодня. -2003. -№ 5. -С.34 - 42.
114. Зимняя, И.А. Ключевые компетенции - новая парадигма результата современного образования / И.А. Зимняя. - М.: 2008. - 250 с.
115. Ильин, В.А. Основы математического анализа: в 2-х ч. Часть I: учеб. для вузов. 7-е изд. / В.А. Ильин, Э.Г. Позняк. - М.: ФИЗМАТЛИТ, 2005. - 648 с.
116. Карданова, Е.Ю. Возможности пакета SPSS для статистической обработки результатов педагогического тестирования / Е.Ю. Карданова, Т.Ю. Карпова // Развитие системы тестирования в России: тезисы докладов III Всероссийской конференции. - М., ЦТ МО России, 2001. Ч. 2. - С. 63-64.
117. Карданова, Е.Ю. Основные модели современной теории тестирования / Е.Ю. Карданова, Ю.М. Нейман // Вопросы тестирования в образовании. - 2003. - №7. -С. 12-37.
118. Карданова, Е.Ю. О применимости политомической модели Г. Раша к тестовым заданиям, различных форм, оцениваемых политомически / Е.Ю. Карданова // Вопросы тестирования в образовании. - 2005. - №4 (16). - С. 44-56.
119. Карданова, Е.Ю. Анализ КИМ ЕГЭ по английскому языку и рекомендации по шкалированию результатов тестирования / Е.Ю. Карданова, Ю.М. Нейман // Вопросы тестирования в образовании. - 2005. - №15. - С 16-43.
120. Кравец, О.Я. Адаптивное управление индивидуализацией обучения информатике: модели, алгоритмы, педагогическая технология: монография / О.Я. Кравец. - Воронеж: Научная книга, 2012. - 243 с.
121. Карданова, Е.Ю. Математические модели многофасетного анализа / Е.Ю. Карданова // Вопросы тестирования в образовании. - 2004. - №11. - С. 11-27.
122. Карданова, Е.Ю. Преимущества современной теории тестирования по сравнению с классической теорией тестирования / Е.Ю. Карданова // Вопросы тестирования в образовании. - 2004. - №10. - С. 7-34.
123. Карданова, Е.Ю. Исследование совместного функционирования заданий различных типов (на примере КИМ ЕГЭ по английскому языку) / Е.Ю. Карданова // Вопросы тестирования в образовании. - 2005. - №14. - С. 39-61.
124. Карданова, Е.Ю. Анализ заданий типа «В» КИМ ЕГЭ, оцениваемых полито-мически / Е.Ю. Карданова // Вопросы тестирования в образовании. - 2004. - №14. -С. 30-47.
125. Киселёва, В.П. Оценка качества подготовки студентов по результатам интернет-экзамена в сфере профессионального образования / В.П. Киселёва, А.С. Масленников, Г.П. Тикина // Развитие тестовых технологий в России: тезисы докладов IX Всероссийской научно-методической конференции. - М.: ФГУ «Федеральный центр тестирования», 2007. - С. 61-63.
126. Клайн, П. Введение в психометрическое программирование: Справочное руководство по конструированию тестов / П. Клайн. - Киев, 1994. - 184 с.
127. Колмогоров, А. Н. Теория вероятностей и математическая статистика / А.Н. Колмогоров // Об эмпирическом определении закона распределения. - М.: Наука, 1986.-С. 134-141.
128. Компетентностный подход в высшем профессиональном образовании: теория, методология, технологии (Москва, 11-12 ноября, 2008 г.): материалы между-нар. конф. Москва, НОУ ВПО «СФГА», 2008. - 416 с.
129. Корн, Г. Справочник по математике для научных работников и инженеров: определения, теоремы, формулы / Г. Корн, Т. Корн. - М.: Наука, 1973. - 831 с.
130. Королёв, A.A. Устройство тестирования «Тестер знаний» / A.A. Королёв, С.К. Стафеев, В.А. Хлебников // Развитие системы тестирования в России: тезисы докладов II Всероссийской конференции. - М., 2000. Ч. 2. -С. 42-43.
131. Королюк, B.C. Справочник по теории вероятностей и математической статистике / B.C. Королюк, Н.И. Портенко, A.B. Скороход, А.Ф. Турбин. - М.: Наука, 1985. - 640 с.
132. Кошевник, Ю.А. Асимптотические свойства бутстреп-оценок / Ю.А. Кошев-ник // Заводская лаборатория. - 1987. Т.53. - №10. - С. 77-81.
133. Кремер, Н.Ш. Теория вероятностей и математическая статистика: учебник для студентов вузов / Н.Ш. Кремер - 3-е изд., перераб. и доп. -М.: ЮНИТИ, 2007. -551 с.
134. Кузнецов, Д.Ю. Статистические методы анализа результатов психолого-педагогического тестирования [Электронный ресурс] / Д.Ю. Кузнецов. Режим доступа:- http://vestnik.yspu.org/releases/uchenue_praktikam/ll_4/ (05.04.07). (Дата обращения 16 марта 2013 г.)
135. Кузовлева, К.Т. Программа для обработки тестовых результатов в рамках классической теории тестов и Item Response Theory (IRT) / К.Т Кузовлева., C.B. Яхонтов, B.B. Сиськов // Развитие системы тестирования в России: тезисы докладов всероссийской конференции. - М., 1999. Ч. 3. - С. 66-67.
136. Ларина, Т.Н. Оценка уровня компетенций студента на основе модели Раша [Электронный ресурс] / Т.Н. Ларина, И.Н. Елисеев // Инженерный вестник Дона: электрон, науч. журн. - 2012. - № 4. 4.1. - С. 6. Режим доступа: http://www.ivdon.ru/magazine/latest/ (дата обращения 26.10.2012)
137. Майоров, А.Н. Теория и практика создания тестов для системы образования / А.Н. Майоров. - М.: Народное образование, 2000. - 352с.
138. Маслак, A.A. Анализ качества тестов по математике, используемых для проведения ЕГЭ в 2004-2005гг. // Вестник СГПИ. - 2006. 1(2). С. 136 - 150.
139. Маслак, A.A. Измерение латентных переменных в социально-экономических системах: монография / A.A. Маслак. - Славянск-на-Кубани: СГПИ, 2006. - 334 с.
140. Маслак, A.A. Измерение уровня развития инфраструктуры сферы образования в субъектах РФ» / A.A. Маслак, С.А. Поздняков, A.A. Данилов // Высшее образование в России. - 2008. - № 2. - С. 102-108.
141. Маслак, A.A. Исследование влияния числа дистракторов на точность оценивания уровня знаний / A.A. Маслак, Е.А. Бобрышев, Т.С. Анисимова, Н.П. Пу-шечкин // Развитие системы тестирования в России: тезисы докладов III Всероссийской научно-методической конференции / под ред. JI.C. Гребнева. - М.: Центр тестирования Министерства образования РФ, 2001. - С. 204.
142. Маслак, A.A. Критерии оценки качества тестов / A.A. Маслак // Формирование контингента инженерно-технического вуза: мировой опыт и основные тенденции совершенствования. Труды международного симпозиума. - Томск: Изд-во ТПУ, 2004.-С. 58-60.
143. Маслак, A.A. Методика измерения и мониторинга уровня жизни населения в субъектах Южного федерального округа Российской Федерации / A.A. Маслак, С.А. Поздняков // Вестник Воронежского государственного технического университета. - 2008. Т. 4. - № 10.-С. 159-171.
144. Маслак, A.A. Модель Раша для проверки качества измерения толерантности / A.A. Маслак, С.А. Поздняков // Социология: методология, методы, математическое моделирование. - М.: Институт социологии РАН, 2008. - № 26. - С. 87-105.
145. Маслак, A.A. Оценка качества опросника для измерения латентной переменной «толерантность» / A.A. Маслак, Т.С. Анисимова, С.А. Осипов, А.И. Давлетова // Оценка эффективности образовательных инноваций и технологий: материалы VI Всероссийской научно-практической конференции. - Славянск-на-Кубани: Издательский центр СГПИ, 2004. - С. 25 - 35.
146. Маслак A.A. Измерение латентных переменных в социальных системах:: монография / АА Маслак. - Славянск-на-Кубани Издательский центр КубГУ, 2012.-432 с.
147. Маслак, A.A. Разработка измерительного инструмента для оценки качества выпускной квалификационной работы / A.A. Маслак // Современные информационные технологии в образовании. ЮФО: материалы научно-методической конференции. - Ростов н/Д.: ЮГИНФО РГУ, 2006. - С. 172 - 176.
148. Масленников, A.C. О технологии анализа результатов аттестационных измерений «Камертон» / A.C. Масленников, Д.И. Петров, М.В. Петропавловский // Развитие системы тестирования в России: тезисы докладов всероссийской конференции. - М., 1999. Ч. 3. - С. 52-54.
149. Михайлычев, Е.А. Дидактическая тестология / Е.А. Михайлычев. - М.: Народное образование, 2001. - 432 с.
150. Наводнов, В.Г. Математические модели САПР ПИМ / В.Г. Наводнов. - Научно-информационный центр государственной аккредитации.-Йошкар-Ола, 1997.-72с.
151. Наводнов, В.Г. Об интернет-экзамене в сфере профессионального образования / В.Г. Наводнов, A.C. Масленников // Высшее образование в России. - 2006. -№4. - С. 15-19.
152. Наводнов, В.Г. Расширение возможностей технологии КАМЕРТОН средствами IRT-анализа: материалы всероссийского семинара по вопросам аттестации образовательных учреждений / В.Г. Наводнов, В.Ж. Куклин, М.В. Петропавловский. - Санкт-Петербург: ЦПИ, 1998. - С.37-38.
153. Нардюжев, В.И. Комплексная технология компьютерного тестирования по русскому языку как иностранному / В.И. Нардюжев, И.В. Нардюжев // Развитие системы тестирования в России: тезисы докладов II всероссийской конференции. - М., ЦТ МО России, 2000. Ч. 2. - С. 14-15.
154. Нардюжев, В.И. Модели и алгоритмы информационно-вычислительной системы компьютерного тестирования: монография / В.И. Нардюжев, И.В. Нардюжев. - М.: Прометей, 2000. - 148 с.
155. Нардюжев, В.И. Программа подготовки банка тестовых заданий для компьютерного адаптированного тестирования / В.И. Нардюжев, И.В. Нардюжев // Развитие системы тестирования в России: тезисы докладов II Всероссийской конференции. М., ЦТ МО России, 2000. Ч. 4. - С. 79-81.
156. Нейман, Ю.М. Введение в теорию моделирования и параметризации педагогических тестов / Ю.М. Нейман, В.А. Хлебников. - М.: Прометей, 2000. -169 с.
157. Нейман, Ю. М. Как измерить учебные достижения? / Ю.М. Нейман // Вопросы тестирования в образовании. - 2001. - №1. - С. 40-57.
158. Нейман, Ю.М. Педагогическое тестирование как измерение: учеб пособие / Ю.М. Нейман, В.А. Хлебников.- М.: Центр тестирования МО РФ, 2002. Ч. 1. - 67с.
159. Нейман, Ю.М. Характеристическая функция теста / Ю.М. Нейман, В.В. Овчинников, В.А. Хлебников. // Вопросы тестирования в образовании. - 2003. - №7. -С. 38-54.
160. Нестерова, О.Н. Стохастическая теория тестов [Электронный ресурс] / О.Н. Нестерова, В.H Дружинин. - Режим доступа:: http://nesterova.on.ufanet.ru/druiinin/0059.htm (дата обращения 01.02.2013).
161. Нестерова, О.Н. Психологическое измерение [Электронный ресурс] / О.Н. Нестерова, В.H Дружинин. - Режим доступа: http://nesterova.on.ufanet.ru/druiinin/0048.htm (дата обращения 01.02.2013).
162. Новицкий, П.В. Оценка погрешностей результатов измерений / П.В.Новицкий, И.А. Зограф. - Ленинград: Энергоатомиздат, 1985. - 248 с.
163. Педагогические тесты, термины и определения // Отраслевой стандарт Министерства образования РФ. М., 2001. - 23с.
164. Проскурин, A.A. Математические модели оценки знаний / A.A. Проскурин. -Режим доступа:
http://it-claim.m/Library/Books/ITS/wwwbook/IST7/proscurnin/Proscurnin.htm (дата обращения 04.02.2013).
165. Райгородский, Д.Я. Психодиагностика персонала. Методики и тесты / Д.Я. Райгородский. - Изд. Бахрах-М, 2007. Т. 1. - 440с.
166. Рогов, Е.И. Настольная книга практического психолога в образовании: учеб. Пособие / Е.И. Рогов. М.: ВЛАДОС, 1995. - 529 с.
167. Родионов, Б.У. Стандарты и тесты в образовании / Б.У. Родионов, А.О. Та-тур. - М.: Изд-во МИФИ, 1995. - 48 с.
168. Романова, Е.С. Психодиагностика: учеб. пособие / Романова Е.С. - СПб: Питер, 2008. - 400 с.
169. Рубинштейн, С.Л. Принцип творческой самодеятельности: к философским основам временной педагогики / С.Л. Рубинштейн // Вопросы психологии. - 1986. - № 4. - С.101-109.
170. Рудинский, И.Д. Статистические методы вывода оценки результатов автоматизированного тестирования [Электронный ресурс] / И.Д Рудинский, C.B. Гру-шецкий // Материалы международной конференции-выставки «Информационные технологии в образовании». - Москва, 2003. - Режим доступа: http :// www . ito . su /2003/ VI / VI -0-2188. html. (Дата обращения 04.02.2013).
171. Руководство пользователя диалоговой системой RUMM 2030 [Электронный ресурс], RUMM Laboratory Pty Ltd, 2010. URL: http://www.rummlab.com.au/demo/marmgetstart.pdf. (Дата обращения 18.04.2010).
172. Руководство пользователя компьютерной программой WINSTEPS/MINISTEP. Rasch-Model Computer Programs. [Электронный ресурс] Program Manual 3.74.0 by John M. Linacre, 2012. URL: http://www.winsteps.eom/a/winsteps-manual.pdf. (Дата обращения 27.08.2012).
173. Русаков, C.B. Автоматическая генерация тестов с заданными свойствами ,и анализ результатов тестирования /C.B. Русаков, О.И. Перескокова // Развитие системы тестирования в России: тезисы докладов всероссийской конференции. -М., 1999. Ч. З.-С. 15-16.
174. Статинфо 8.2. - М.: Федеральный центр тестирования, 2002. - 1 электрон, опт. диск (CD-ROM).
175. Сапронов, А.Г. Использование метода измерения латентных переменных для оценки результатов воспитательной работы / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Воспитательная деятельность в системе обеспечения качества подготовки специалиста в вузе: материалы межвузовской научно-практической конференции (колоквиума). - Кисловодск, 2007. - С. 27-31.
176. Сапронов, А.Г. Проблемы метрологического обеспечения функционирования системы менеджмента качества образования ВУЗа / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Психология образования: современное состояние и перспективы: сб. статей I Всероссийской научно-практической конференции. Славянск-на-Кубани, СГПИ, 2007. - С. 17-21.
177. Сапронов, А.Г. Выбор трудности заданий контрольно-измерительных материалов при проведении итоговой аттестации образовательных программ различ-
ного уровня / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Инновационные образовательные технологии в технических университетах: сб. науч. статей по проблемам высшей школы. - Новочеркасск, Южно-Российский гос. технический университет (НПИ), 2006. - С. 74-78.
178. Сапронов, А.Г. Проблемы оценки качества подготовки выпускников при аттестации образовательных учреждений. / А.Г. Сапронов, И.Н. Елисеев, Б.А. Савельев, A.C. Маслеников // Известия высших учебных заведений. СевероКавказский регион. Технические науки. - 1999. - № 4. - С. 90-95.
179. Сапронов, А.Г. О трудности заданий аттестационных тестов централизованного тестирования / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Вопросы тестирования в образовании. - 2006. - № 17 (1). - С. 89-92.
180. Сапронов, А.Г. Выбор трудности заданий аттестационных тестов централизованного тестирования / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Развитие тестовых технологий в России: тезисы докладов VIII Всероссийской научно-методической конференции. - М.: Федеральный центр тестирования, 2006. - С. 41-42.
181. Сапронов, А.Г. Тестовая оценка знаний студентов по фундаментальным дисциплинам при проведении государственной аттестации вузов / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Фундаментализация высшего технического образования: материалы всероссийской научно-методической конференции. - Новочеркасск, ЮРГТУ, 2000. - С. 78-81.
182. Сапронов, А.Г. Тестовый контроль знаний студентов по электротехническим дисциплинам при подготовке к государственной аттестации вузов / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Новые информационные технологии в электротехническом образовании (НИТЭ-2000): материалы V Международной научно-методической конференции. - Астрахань, 2000. - С 201-205.
183. Сапронов, А.Г. Автоматизированные тестовые технологии контроля знаний студентов во внутривузовских системах менеджмента качества образования / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Развитие тестовых технологий в России: тезисы докладов VI Всероссийской научно-методической конференции. - Шарм-Эль-Шейх (Египет), Центр тестирования Минобразования России, 2004. - С 112-113.
184. Сапронов, А.Г. Автоматизированные тестовые технологии контроля знаний студентов - основа внутривузовских систем менеджмента качества образования / А.Г. Сапронов, И.Н. Елисеев, И.М. Мальцев, И.И. Елисеев // Вопросы тестирования в образовании. - 2004. - №12. - С. 53-62.
185. Сапронов, А.Г. Роль тестирования в условиях функционирования систем менеджмента качества образования в образовательных учреждениях / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Развитие тестовых технологий в России: тезисы докладов VII Всероссийской научно-методической конференции. - Шарм-Эль-Шейх (Египет), Федеральный центр тестирования, 2005. - С. 106-107.
186. Сапронов, А.Г. Проблемы информационно-ресурсного обеспечения функционирования системы менеджмента качества образования вуза / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев // Международный, федеральный и региональный рынок образовательных услуг: состояние и перспективы развития: сб. ст. III Международной научно-практической конференции. - Пенза, 2006. - С. 62-63.
187. Сапронов, А.Г. Расчёт параметров индикаторов по выборкам малого объёма / А.Г. Сапронов, И.Н. Елисеев, И.И. Елисеев, В.И. Марчук // Теория и практика измерения латентных переменных в образовании и других социально-экономических системах: сб. статей IX Всероссийской (с международным участием) научно-практической конференции. - Славянск-на-Кубани, СГПИ, 2007. -
С. 143-147.
188. Свидетельство об официальной регистрации программы для ЭВМ, №2006614012. Программный модуль Analisator / И.Н. Елисеев, И.И. Елисеев, А.Н. Гладилин. - Заявл. 29.09.2006. - Опубл. 22.11.2006.
189. Свидетельство об официальной регистрации программы для ЭВМ, №2009611372. Визуальная студия тестирования / А.Н. Гладилин. - Заявл. 20.02.2009. - Опубл. 06.03.2009.
190. Свидетельство об официальной регистрации программы для ЭВМ, №2009610643. Измеритель латентных переменных RILP-1 / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов. - Заявл. 02.12.2008. - Опубл. 28.01.2009.
191. Свидетельство об официальной регистрации программы для ЭВМ,
№ 2010611109. RILP-2 / И. H. Елисеев, И.И. Елисеев, А.И. Шерстобитов, A.B. Фи-сунов. - Заявл. 08.12.2009. - Опубл. 05.02.2010.
192. Свидетельство об официальной регистрации программы для ЭВМ, №2011615213. RILP-1M / И. Н. Елисеев, A.B. Фисунов, И.И. Елисеев. - Заявл. 12.05.2011.-Опубл. 01.07.2011.
193. Свидетельство об официальной регистрации программы для ЭВМ, №2010611111. RILP-Multi / И. Н. Елисеев, И.И. Елисеев, А.В.Фисунов. - Заявл. 08.12.2009. - Опубл. 05.02.2010.
194. Свидетельство об официальной регистрации программы для ЭВМ, №2009610892. Программа для размножения двухмерных матриц / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов. - Заявл. 16.12.2008. -Опубл. 09.02.2009.
195. Свидетельство об официальной регистрации программы для ЭВМ,
№ 2011615220. RILP-Multi2 / И.Н. Елисеев, A.B. Фисунов, И.И. Елисеев. - Заявл. 12.05.2011. - Опубл. 01.07.2011.
196. Свидетельство об официальной регистрации программы для ЭВМ, №2011615217. Программа для выявления недопустимых дихотомических матриц результатов тестирования / И.Н. Елисеев, И.С. Шрайфель, A.B. Фисунов. - Заявл. 12.05.2011.-Опубл. 01.07.2011.
197. Свидетельство об официальной регистрации программы для ЭВМ, №2011615216. Программа расчета доли недопустимых дихотомических матриц результатов тестирования / И.Н. Елисеев, И.С. Шрайфель, A.B. Фисунов. - Заявл. 12.05.2011.-Опубл. 01.07.2011.
198. Свидетельство об официальной регистрации программы для ЭВМ, №2011615214. Программа для повышения адекватности элементов дихотомической матрицы принятой модели измерения / И.Н. Елисеев, A.B. Фисунов, A.C. Папян. - Заявл. 12.05.2011. - Опубл. 01.07.2011.
199. Свидетельство об официальной регистрации программы для ЭВМ, №2011615215. Программа формирования генеральных выборок латентных переменных модели Раша / И.Н. Елисеев, A.B. Фисунов, A.C. Папян. - Заявл. 12.05.2011. - Опубл. 01.07.2011.
200. Свидетельство об официальной регистрации программы для ЭВМ, №2011615218. Программа моделирования дихотомической матрицы результатов тестирования / И.Н. Елисеев, A.B. Фисунов, A.C. Папян. - Заявл. 12.05.2011. -Опубл. 01.07.2011.
201. Свидетельство об официальной регистрации программы для ЭВМ, №2009610893. Программа для построения психограмм / И.Н. Елисеев, И.И. Елисеев, A.B. Фисунов. - Заявл. 16.12.2008. - Опубл. 09.02.2009.
202. Сериков В.В. Образование и личность / В.В. Сериков. - М.: Логос, 1999. - 272с.
203. Смирнов Н. В. Оценка расхождения между эмпирическими кривыми распределения в двух независимых выборках / Н.В. Смирнов // Бюлл. МГУ. Сер.А. -1939. - №2. Т. 2. - С. 3-16.
204. Смирнов, Н. В. Теория вероятностей и математическая статистика: Избранные труды / Н.В. Смирнов. - М.: Наука, 1970. - С. 117-127, 267-277.
205. Татур Ю.Г. Обеспечение качества в высшем образовании РФ / Ю.Г. Татур. -М.: ИЦПКПС, 2000. - 117с.
206. ФГОС ВПО [Электронный ресурс] // Официальный сайт Министерства образования и науки. Режим доступа: http://www. edu.ru/ (дата обращения 3.09.2012).
207. Хлебников, В.А. Теория и методы оценки эффективности систем обучения коллективного пользования: дисс. на соискание уч. степени доктора физико-математических наук: 05.03.01 / Хлебников Владимир Алексеевич. - Институт вычислительных систем РАН. Москва, 2006. - 163 с.
208. Хлебников, В.А. Концепция объективного оценивания учебных достижений / В.А. Хлебников, Ю.М. Нейман, B.C. Панфёров, А.И. Самыловский, И.Ф. Шары-гин // Развитие системы тестирования в России: тезисы докладов III Всероссийской конференции. - М., ЦТ МО России, 2001. Ч. 1. - С. 120-125.
209. Челышкова, М.Б. Оценка качества характеристик тестов централизованного тестирования / М.Б. Челышкова, И.И. Елисеев, И.Н. Елисеев // Радиотехника, оборудование и технологии сервиса : сб. науч. трудов // Донская гос. академия сервиса. - Шахты: ДГАС, 1998. - Вып. 26 (ч. 2). - С. 159-164.
210. Челышкова, М.Б. Теория и практика конструирования педагогических тестов: учеб. пособие / М.Б. Челышкова. - М.: Логос, 2002. - 432 с.
211. Челышкова, М.Б. Разработка педагогических тестов на основе современных математических моделей: учеб. пособие / М.Б. Челышкова. - М: Исслед. центр проблем качества подготовки специалистов, 1995. - 32 с.
212. Шадриков, В.Д. Новая модель специалиста: инновационная подготовка и компетентностный подход / В.Д. Шадриков // Высшее образование сегодня. -2004. -№8.-С. 26-31.
213. Шемет, О.В. Дидактические основы компетентностно-ориентированного инженерного образования: монография / О.В. Шемет. - Новочеркасск: Изд-во Колорит, 2010. -208с.
214. Шемет, О.В. Дидактические основы компетентностно-ориентированного инженерного образования: // дисс. на соискание уч. степени доктора педагогических наук: 13.00.08 / Шемет Оксана Витальевна. - Калуга, 2010. - 370с.
215. Эфрон, Б. Нетрадиционные методы многомерного статистического анализа: сб. статей / пер. с англ. Ю.П. Адлера, Ю.А. Кошевника, В.Н. Солнцева под общ. ред. Ю.П. Адлера / Б. Эфрон. - М.: Финансы и статистика, 1988. - 263 с.
216. Юрченко, Л. Г. Измерение качества выпускных квалификационных работ на факультете педагогики и методики начального образования / Л. Г. Юрченко, И. И. Буренок, А. А. Данилов, О. Ю. Тищенко, И.Б. Щербак // Теория и практика измерения латентных переменных в образовании других социально-экономических системах: материалы X Всероссийской научно-практической конференции (Сла-вянск-на- Кубани, 22-29 июня 2008 г.). - Славянск-на-Кубани: Издательский центр СГПИ, 2008. - С. 191-209.
217. Andrich, D. Advanced Social and Educational Measurement / D. Andrich. -Perth: Murdoch University, 2001. - 128 p.
218. Andrich, D. Rasch Models for Development / D. Andrich. - London: Sage Publications, Inc., 1988. - 94 p.
219. Andrich, D. The Rasch model explained - in Applied Rasch Measurement: A book of Exemplars / D. Andrich. - Springer - Kluwer, 2005. - Chapter 3. - P. 308-328.
220. Baker, F.B. The Basics of Item Response Theory / F.B. Baker. - ERIC, 2001. - 172p.
221. Bickel P.J. Ann. Statist / P.J. Bickel, D.A. Freedman. -1984. -№2. V. 12.-P. 212-226.
222. Bezruczko, N. Rasch Measurement in Health Sciences/ N. Bezruczko. - Maple Grove, Minnesota: JAM Press, 2005. - 483 p.
223. Birnbaum, A. Some Latent Trait Models and Their Use in Inferring and Examinee's Ability / A. Birnbaum. In Lord F.M., Novick M. Statistical Theories of Mental Test Scores. - Addison-Wesley Publ. Co. Reading, Mass, 1968. - P.397-479.
224. Bond, T.G. Applying the Rasch model. Fundamental Measurement in the Human Sciences / T.G. Bond, C.M. Fox. - Mahwah, New Jersy: Lawrence Erlbaum Associates, Inc., Publishers, 2001. - 255 p.
225. Brown, W. Some experimental results in the correlation of mental abilities / W. Brown // British Journal of Psychology, 1910. - N 2. V. 3. - P.291-322.
226. Cronbach, L. J. Coefficient alpha and the internal structure of tests / L. J. Cronbach //Psychometrika, 1951. - 16. - P. 297-334.
227. Efron, B. Bootstrap methods: Another look at the jackknife / B. Efron // Ann. Statist, 1979.-№ 1. V.7.-P. 1-25.
228. Getting Started RUMM 2010. Rasch Unidimensional Measurement Models. Pert: RUMM Laboratory Ltd, 2001. - 87 p.
229. Guilford, J.P. Fundamental Statistics in Psichology and Education / J.P. Guilford. -ed. N. Y., 1956.-565pp.
230. Gulliksen, H. Perspective on Educational Measurement / H. Gulliksen // Applied Psychological Measurement, June 1986. - N.2. V.10. - P.l 16.
231. Guttman, L.L. Scaling Qualitative Data / L.L. Guttman. - Amer. Sociol. Rev. -1944. -9. -P.139- 150.
232. Guttman, L.L. The Problem of Attitude and Opinion / L.L. Guttman // S.A. Stouf-fer a.o. (Eds) Measurement and Prediction. 2 cd. N-Y, Wiley, 1966. - V.4. - 756p.
233. Hambleton, R.K. Aplicación of Item Response Theory / R.K. Hambleton. - Vancouver: Educ. Res. Inst. B. C., 1983. - P. 45-56.
234. Handbook of Modern Item Response Theory. Editors Wim J. van der Linden, R.K. Hambleton. - Springer-Verlag. New York, 1997. - 510 p.
235. Hodges ,J. L. jr. Estimates of location based on rank tests / J. L. Hodges jr., E. L. Lehmann // Ann. Math. Statist. 1963. - 34. - P. 598-611.
236. Ingebo G.S. Probability in the Measure of Achievement / G.S. Ingebo. - Chicago: MESA Press, 1997. - 148 p.
237. Kuder, G.F The Theory of Test Reliability / G.F. Kuder, M. W. Richardson. - Psy-chometrika. - 1937. - 2. - P.151-160.
238. Linacre, J.M. Many-Facet Rasch Measurement / J.M. Linacre. - Chicago: MESA Press, 1994.- 149 p.
239. Lord, F.M. Application of Item Response Theory to Practical Testing Problems / F.M. Lord. - Hillsdale, N-J, Lawrence Erlbaum Ass.Publ. 1980. - 266pp.
240. Lord, F.M. Statistical Theories of Mental Test Scores / F.M. Lord, M. Novick. -Mass: Addison-Wesley Publ. Co. Reading, 1968. - 310 p.
241. Luce R.D. & Tukey J.W.. Simultaneous conjoint measurement / R.D. Luce & J.W. Tukey// Journal of Mathematical Psychology, 1964. - 1. - P. 1-27.
242. Metropolis, N. The Monte Carlo method / N. Metropolis, S. Ulam // J. A.S. A. 1949. - 44. - N. 247. - P. 335-341.
243. Perline, R. The Rasch model as additive conjoint measurement / R. Perline, B.D. Wright & H. Wainer. // Applied Psychological Measurement. - 1979. - 3. - P. 237-256.
244. Quenouille, M. H. Approximate tests of correlation in time series / M. H. Quenouille // J. Roy. Statist. Soc. - Ser. B. 1949. - 11. - P. 68-84.
245. Quenouille, M. H. Notes on bias in estimation / M. H. Quenouille // Biometrika. -1956. -43. - P. 353-360.
246. Sax, G. (Op. cit.). Item Writing Techniques / G. Sax (Op. cit.).; J.L. Hermen; In: Keeves.J.P. (Ed). Educational Research, Methodology and Measurement. An International Handbook. Oxford, Pergamon Press, 1988. - 332pp.
247. Sax, G. Principles of Educational and Psychological Measurement / G. Sax. - Belmont, Ca., Wadsworth Publ. Co., 1980. - 688pp.
248. Smith, R.M. Rasch Measurement Models: Interpreting WINSTEPS/BIGSTEPS and Facets Output / R.M. Smith. - Gainesville, Florida: JAM Press, 1999. - 68 p.
249. Smith, E.V. Introduction to Rasch Measurement. Theory, Models and Applications / E.V. Smith, M.S. Smith. - Maple Grove, Minnesota: JAM Press, 2004. - 689 p.
250. Spearman, C. Correlation calculated from faulty data / C. Spearman // British Journal of Psychology. - 1910. - N 2. - V. 3. - P. 271-295.
251. Tukey, J.W. Dias and confidence in not quite large samples / J.W. Tukey // Ann. Math. Statist. 1958. - 29. - P. 614.
252. Rasch, G. Probabilistic Models for Some Intelligence and Attainment Tests / G. Rasch.- Copenhagen, Denmark: Danish Institute for Educational Research, I960.- 160p.
253. Rasch, G. Probabilistic Models for Some Intelligence and Attainment Tests / G. Rasch. With a Foreword and Afterword by B.D. Wright. - The Univ. of Chicago Press. Chicago & London, 1980. - 199 p.
254. Rasch Models. Foundations, Resent Developments and Applications. Editors Fischer G. H., Molenaar I. W. Springer, 1997. - 436 p.
255. Van der Ven, A.H.G.S. Introduction to Scaling. Chichester, John Wiley& Sons, 1980. 301 pp.
256. Wilcoxon, F. Individual comparisons by ranking methods / F. Wilcoxon // Biometrics. - 1945.- 1.-P. 80-83.
257. Wilson M. Constructing Measures: An Item Response Modeling Approach / F. Wilcoxon. - Mahwah, New Jersey: Lawrence Erlbaum associates, 2005. - 228 p.
258. Wright, B.D. Rating Scale Analysis: Rasch Measurement / B.D. Wright, G.N. Masters - Chicago, MESA Press, 1982. - 206pp.
259. Wright, B.D. Solving measurement problem with the Rasch model / B.D. Wright // Journal of Educational Measurements. - 1977. - N 2. V. 14. - P. 97 - 116.
260. Wright, B.D. Best Test Design / B.D. Wright, M. N. Stone. - Rasch Measurement, Chicago, MESA PRESS, 1979. - 222 p.
261. Wright, B. D. Rasch Model Derived from Objectivity/ B.D. Wright, J. M. Linacre // Rasch Measurement Transactions. - 1987. - V.l:l. - P. 5.
317
Обратите внимание, представленные выше научные тексты размещены для ознакомления и получены посредством распознавания оригинальных текстов диссертаций (OCR). В связи с чем, в них могут содержаться ошибки, связанные с несовершенством алгоритмов распознавания. В PDF файлах диссертаций и авторефератов, которые мы доставляем, подобных ошибок нет.