Оценка качества методического, математического и программного обеспечения распределенных обучающих систем тема диссертации и автореферата по ВАК РФ 05.13.11, доктор технических наук Гусева, Анна Ивановна

• Гусева, Анна Ивановна
• доктор технических наук
• 2003

Оглавление диссертации доктор технических наук Гусева, Анна Ивановна

ВВЕДЕНИЕ.

РАЗДЕЛ 1. РАСПРЕДЕЛЕННЫЕ ОБУЧАЮЩИЕ СИСТЕМЫ: ОБЩИЕ ПРЕДСТАВЛЕНИЯ И ТРЕБОВАНИЯ.

Глава 1. Современное состояние проблемы.

1.1. Компьютерные средства обучения.

1.2. Системы дистанционного образования.

1.3. Инструментальные средства.

1.4. Международные образовательные стандарты.

Выводы.

Глава 2. Проектирование распределенных обучающих систем.

2.1. Жизненный цикл РОС.

2.2. Процессы жизненного цикла РОС.

2.3. Постановка задачи диссертационного исследования.

Выводы.

РАЗДЕЛ 2. МЕТОДОЛОГИЯ УПРАВЛЕНИЯ КАЧЕСТВОМ РОС НА

ОСНОВЕ ОБЪЕКТНО-ОРИЕНТИРОВАННОГО ПОДХОДА.

Глава 3. Система качества РОС.

3.1. Концептуализация.

3.2. Общие факторы оценки качества программных систем.

3.3. Специализированные факторы качества распределенных обучающих систем

3.4. Сравнительный анализ методик формирования систем качества.

3.5. Особенности показателей качества для различных видов образовательных ресурсов и компонентов РОС.

3.6. Согласование построенной иерархии.

3.7. Управление качеством РОС на этапах жизненного цикла.

Выводы.

Глава 4. Объектно-ориентированная среда оценки РОС.

4.1. Концептуализация.

4.2. Семейство классов требований качества.

4.3. Уровни ощущаемого качества.

4.4. Семейство классов гарантий.

Выводы.

РАЗДЕЛ 3. ПРАКТИЧЕСКИЕ РЕШЕНИЯ.

Глава 5. Система оценки качества РОС.

5.1. Функция полезности электронных ресурсов.

5.2. Бюджетные ограничения и синтез функциональной спецификации.

5.3. Программная реализация.

Выводы.

Глава 6. Предметно-ориентированная среда «Архитектура связи в ЛВС».

6.1. Концептуализация.

6.2. Язык ЯСМОД.

6.3. Предмстио-ориентировапиая среда синтеза протоколов связи.

6.4.Эксплуатация и оценка качества системы.

Выводы.

Глава 7.Электронные учебники.ш

7.1. Концептуализация.

7.2.Компьютсрные учебники.

7.3. Эксплуатация и оценка качества компьютерных учебников.

Выводы.

Глава 8. Контролирующие программы.

8.1. Концептуализация.

8.2.Формированис тестов из тестовых заданий.

8.3. Адаптивные методики тестирования.

8.4. Механизмы выставления оценок.

8.5. Анализ результатов тестирования.

8.6. Построение сценариев стратификациоииых тестов.

8.7. Программные реализации и эксплуатация.

8.8. Оценка качества тестовых систем.

Выводы.

Глава 9. Доставка данных: защита информации в процессе миграции.

9.1. Концептуализация.

9.2.Универсалыюс пространство конфигураций защиты.

9.3. Базовая модель и метрика переходов.

9.4. Анализатор защиты.

Выводы.

Глава 10. Корпоративный ядерный университет: информационно-образова тельный портал.

10.1. Концептуализация.

10.2.Архитектура портала.

10.3. Программная реализация и эксплуатация.

Выводы.

Введение диссертации (часть автореферата) на тему «Оценка качества методического, математического и программного обеспечения распределенных обучающих систем»

Актуальность. В настоящее время одной из важнейших задач, стоящих перед образованием во всем мире, является развитие новых образовательных форм и технологий и повышение качества образования.

Наиболее перспективным и быстроразвивающимся направлением в последние годы является обучение с использованием компьютерных технологий и сетевых коммуникаций, одна из форм которого получила название дистанционное обучение. В этом случае используются принципиально новые формы представления учебной информации в виде компьютерных учебников, виртуальных лабораторных практикумов, тренажеров, предметно-ориентированных сред, контролирующих программ, справочников и баз данных учебных материалов. Доставка учебной информации осуществляется с помощью локальных и корпоративных сетей, так и телекоммуникаций, например сети Интернет. Формы обратной связи между учащимися и преподавателями и учащимися между собой также изменяются: все большей популярностью пользуются теле-, видео- и почтовые конференции, чаты и форумы, доски объявлений и системы электронного голосования, электронная почта и заполнение активных электронных форм. Контроль знаний осуществляется с помощью специальных тестирующих компьютерных программ. Таким образом, появляются новые образовательные технологии, опирающиеся на телекоммуникации и компьютерные средства представления информации.

Используя в качестве критерия возможность доставки информации, т. е. способ коммуникации преподавателей и обучаемых, новые образовательные технологии можно классифицировать следующим образом.

• Методы обучения посредством взаимодействия обучаемого с образовательными ресурсами при минимальном участии преподавателя и других обучаемых (самообучение).

• Методы индивидуализированного преподавания и обучения, для которых характерны взаимоотношения одного студента с одним преподавателем или одного студента с другим студентом (обучение «один к одному»).

• Методы, в основе которых лежит представление студентам учебного материала преподавателем или экспертом, (обучение «один ко многим»),

• Методы, для которых характерно активное взаимодействие между всеми участниками учебного процесса (обучение «многие ко многим»).

В конце 90-х годов возникает новая отрасль знаний - телематика, находящаяся па стыке информатики и исследований в области телекоммуникаций. Область применения новой науки чрезвычайно широка, и создание на ее основе новых образовательных технологий привело к необходимости международной стандартизации. К новейшим разработкам в области стандартизации, в частности относятся [1-7]:

• проект японской ассоциации образования Advanced Learning Infrastructure Consortium (ALIC),

• Европейский проект стандарта Alliance of Remote Instructional Authoring and Distribution Networks of Europe (ARIADNE),

• материалы образовательного консорциума IMS Global Learning Consortium.

• использование телематических систем для обучения работников авиационной отрасли Aviation Industry СВТ Committee (AICC),

• стандарт LTSA 1484 в области архитектуры обучающих систем Institute of Electrical and Electronic Engineers (IEEE) Learning Technology Standards Committee,

• объединенный проект AICC, IMS и IEEE под названием SCORM (Shareable Content Object Reference Model) - модель объектов с разделяемым контентом,

• проект стандарта в области дистанционного образования Российской Федерации.

Этими стандартами вводится понятие современных обучающих систем, как систем для приобретения знаний и умений посредством доступа к информации и обучения, включающих в себя все информационные технологии и другие формы обучения па расстоянии. Проведенный сравнительный анализ вышеназванных источников показывает, что

• полностью отсутствуют какие-либо данные о том, насколько важен тот или иной элемент архитектуры, как изменится поведение системы в отсутствие какого-либо класса или компонента, можно ли расширять набор предлагаемых компонентов и как это повлияет на работоспособность систем; • не учитываются педагогические аспекты использования системы, например, ступени системы познания, содержательность учебного материала, усвояемость и т.д.

Развитие дистанционного образования в России привело к необходимости использования телематических систем. Принимается Концепции создания и развития единой системы дистанционного образования (ДО) в России, и количество вовлеченных в нее образовательных учреждений стремительно растет. В настоящее время их насчитывается более сотни. Для дальнейшего развития и координации усилий в области ДО созданы соответствующие органы в Министерстве образования РФ, Евразийская Ассоциация ДО, Ассоциация Международного образования, принята Концепция создания и развития Системы ДО Российской Федерации и проведен ряд других мероприятий.

В Концепции создания и развития ДО в РФ приводится следующее определение. Дистанционное образование - комплекс образовательных услуг, предоставляемых широким слоям населения в стране и за рубежом с помощью специализированной информационной образовательной среды, базирующейся на средствах обмена учебной информацией на расстоянии (спутниковое телевидение, радио, компьютерная связь и т.п.). Иными словами, дистанционное обучение представляет собой совокупность информационных технологий, обеспечивающих доставку обучаемым основного объема изучаемого материала, интерактивное взаимодействие обучаемых и преподавателей в процессе обучения, предоставление студентам возможности самостоятельной работы по освоению изучаемого учебного материала, а также оценку их знаний и навыков, полученных в процессе обучения.

В пропаганду, организацию научных исследований и внедрение в педагогическую практику идей ДО внесли вклад А.А. Андреев, С.Г. Григорьев, В.П. Тихомиров, В.Г. Кинелев, А.Д. Иванников, Я.А. Ваграменко, Ю.А. Чернышев,

Л.Д. Забродин, |В.В.Семенов|, А.И. Галкина, А.Г. Шмелев, В.А. Самойлов, В.П. Нсвсжин, И.А. Липский, А.А. Золотарёв, В.В. Рождественский, И.П. Норенков, Е.С.Полат, В.А. Каймин, Ю.Б. Рубин [9-17, 55].

Несмотря на большое количество разработок и проектов в области ДО, вопрос об оценке его качества и эффективности до сих пор остается открытым. Открытая дискуссия, проводимая в 2001 году на сайте informika.ru Министерства образования РФ, показала это очень ярко. Большое количество предложений, несмотря на ссылки на ISO 9003, указывало на отдельные показатели качества систем ДО, без каких-либо значительных попыток систематизации. Результатом этой дискуссии является проект ГОСТа по ДО [7], в котором также недостаточно присутствует систематизация. Так, в нем вообще не упоминаются такие важнейшие показатели, как эффективность средств обучения (методическая и дидактическая), безопасность их использования, достоверность полученных знаний учащимися и т.д.

Отсюда, среди проблем, связанных с качеством современного образования в целом, особую значимость приобретает проблема управления качеством распределенных обучающих систем (РОС).

В данной работе вводится понятие РОС как системно организованной совокупности средств передачи данных, информационных ресурсов, протоколов взаимодействия, аппаратно-программного, учебно-методического и организационного обеспечения, которая ориентируется па удовлетворение образовательных потребностей пользователей.

Архитектура современных распределенных обучающих систем должна включать в себя географически разнесенные, но тесно интегрированные между собой компоненты в виде процессов (обучаемая сущность, оценка, доставка, инструктор) и хранилищ (информация по учащемуся, образовательные ресурсы) [5]. Поскольку назначением РОС является предоставление доступа к образовательным ресурсам, обучение и контроль знаний на основании контекста взаимодействия учащегося с системой, то они охватывают целый класс программных систем учебного назначения, от сетевого компьютерного учебника или сервера с базой данных методических материалов до сложных и многофункциональных систем дистанционного обучения.

Любая распределенная обучающая система представляет собой продукт, качество которого может быть определено согласно соответствующим стандартам. Международные стандарты ISO 9000, 9001, 9002 и 9003 (редакция 2000 года) содержат универсальные требования к системе качества и определяют различные модели его обеспечения на разных этапах жизненного цикла [19-21].

Для получения качественного продукта необходимо внедрение так называемой системы качества. Следуя международному стандарту ISO 8402, можно определить систему качества как совокупность организационной структуры, методик, процессов и ресурсов, необходимых для осуществления общего руководства качеством продукции, производимой организацией.

Целыо требований стандартов серии ISO 9000 является удовлетворение требований с позиции четырех аспектов, являющихся ключевыми для качества продукции (технических средств, программного обеспечения, отработанных материалов и услуг):

• качество благодаря определению потребностей пользователей, т.е. благодаря определению и модернизации продукции с целыо ее соответствия требованиям и возможностям рынка;

• качество благодаря конструкции, т.е. благодаря встраиванию в продукцию характеристик, способствующих тому, чтобы она отвечала требованиям и возможностям рынка;

• качество благодаря соответствию конструкции, т.е. благодаря поддержанию постоянного соответствия конструкции, реализации характеристик, заложенных в проект,

• качество благодаря техническому обслуживанию в процессе ее эксплуатации по мере необходимости, чтобы сохранить желаемые характеристики.

Таким образом, обеспечение качества представляется как интегрированный процесс на протяжении всего жизненного цикла системы, который обеспечивает создание качества по мере продвижения разработки, а не фиксирует его на выходе процесса. Качество определяется как набор характеристик системы, относящихся к ее способности удовлетворить установленные и предполагаемые потребности клиентов [14]. Список требований и критериев оценки показателей качества программных систем общего назначения был разработан в 1994-2002 гг. И. Соммервилем, В. Липаевым, Дж. Воасом , Д. Гарвипым [23-26]. Стандарт ISO 9126 (1998 г.) определяет шесть базовых характеристик для оценки качества программных систем [21]. Сравнительный анализ, проведенный автором диссертации между моделями Соммервиля, Гарвина, Редмана [199] и ISO 9126, устанавливает, что эти модели отражают требования к РОС лишь частично. Это связано с тем, что распределенные обучающие системы обладают очень специфической областью использования, и их потенциальными пользователями выступают преподаватели, учащиеся, методисты, инструкторы и т.д. Такую предметную область указанные модели не рассматривают. С другой стороны, речь идет о программных системах, и критерии их оценки должны учитывать основные направления развития.

В данной работе предлагается объединить и систематизировать два направления, связанных и с оценкой качества РОС как программных систем, и с оценкой их возможностей использования в учебном процессе. В результате была разработана иерархическая система требований качества, представленная в виде показателей качества, их значений, критериев и методов оценки (качество благодаря определению потребностей пользователей).

На основе анализа требований, предъявляемых Российским центром информатизации образования (РОСЦИО), Министерством образования Российской Федерации, с учетом опыта большого количества ВУЗов, а также с учетом современных тенденций в образовании и уровня развития компьютерных технологий [18-31, 34, 45-57, 68, 77-79, 83-86], в данной работе были сформулированы требования, которым должна удовлетворять распределенная обучающая система. Соответствие этим требованиям позволило автору диссертации предложить ряд характеристик, отражающих свойства указанных обучающих систем. К ним относятся:

• добротность, характеризующая внутренние достоинства реализации системы с технической стороны;

• надежность, т.е. способность системы сохранять готовность функционирования при установленных условиях за установленный период;

• безопасность, т.е. свобода от неприемлемого риска в виде угроз, классифицируемых в зависимости от возможности злоупотреблений, возникающих в результате действий человека, как преднамеренных, так и непреднамеренных;

• корректность, т.е. соответствие реализации системы ее спецификации ( в данном случае оценивается функциональная полнота и непротиворечивость);

• интерфейс, т.е. средства общения с пользователями системы;

• стоимость, т.е. затраты на закупку, эксплуатацию и модернизацию;

• открытость характеризует модифицируемость системы, т.е. се способность подвергаться изменениям;

• приемлемость, т.е. соответствие сформулированным заказчиком требованиям;

• ощущаемое качество, которое определяется исходя из назначения системы, включает в себя соответствие дидактическим, педагогическим и прочим требованиям, представленным большим объемом соответствующих материалов. Ощущаемое качество распределенных обучающих систем складывается из нескольких факторов.

Далее, для решения проблемы управления качеством РОС, в частности, была создана система оценки качества, т. е. иерархия показателей качества, установлены соответствующие шкалы измерений для каждого' показателя, получены экспертные оценки для определения значимости и удельного веса каждого показателя в общей согласованной иерархии. Система оценки качества обеспечивает качество благодаря конструкции и соответствия конструкции. Затем, в соответствии с разработанной системой оценки качества, автором диссертации была разработана методология управления качеством РОС, которая предоставляет определенные гарантии того, что как в процессе разработки РОС, так и при эксплуатации и сопровождении будут обеспечены требуемые значения показателей качества (качество благодаря обслуживанию). Методология позволяет:

• до начала разработки на основании суждений заказчика (эксперта) о важности тех или иных свойств определить цели качества, т.е. взаимоувязанную систему требований как общих, так и специализированных, к системе РОС, отраженную в спецификации, устанавливать их значимость; определить контрольные точки внутри жизненного цикла системы для проверки достижимости целей;

• определить необходимые метрики (показатели качества, шкалы и способы измерения), которые измеряют результаты действий проекта в контрольных точках жизненного цикла проекта и оценивают, были ли цели качества достигнуты;

• гарантировать требуемые заказчиком значения показателей качества па основе использования соответствующих базовых классов и элементов среды оценки как идентифицирующих и корректирующих действий качества. Возможности предлагаемой методологии управления качеством РОС подтверждены на реальных примерах.

Особую актуальность проблема измерения и стандартизации качества РОС имеет для Московского инженерно-физического института (МИФИ), готовящего специалистов в области всех видов ядерных технологий. По этим специальностям запрещено заочное обучение, поэтому широкое внедрение РОС в МИФИ возможно только при полной гарантии качества обучения. Этим объясняется то обстоятельство, что практическая работа автора проводилась на базе Экономико-аналитического института (ЭЛИ) МИФИ. Она задумана и выполнена как полномасштабный эксперимент, предваряющий перспективные работы по созданию РОС корпоративного ядерного университета.

Цели и задачи. Целью данной диссертационной работы является решение крупной научной проблемы повышения качества обучающих систем, имеющей важное хозяйственное значение.

Для достижения указанной цели были решены следующие задачи.

• Предложена система требований качества в виде согласованной иерархии показателей, объединяющая и систематизирующая хараетеристики РОС как программных систем и их возможностей использования в учебном процессе.

• Создана система оценки качества РОС, разработаны критерии и шкалы измерений для каждого показателя, получены экспертные оценки для определения значимости и удельного веса каждого показателя.

• Для управления качеством РОС разработаны положения по обеспечению качества на каждом этапе жизненного цикла, представленные, в частности, в виде объектно-ориентированной среды с соответствующим набором базовых классов требований качества и классов гарантий.

• Проведены проектирование распределенных обучающих систем различного назначения на основе предлагаемой методологии и оценка качества указанных разработок.

Областью исследования являются критерии и методы оценки показателей качества сетевых программных приложений, основанных на новых информационных технологиях (паспорт специальности 05.13.11 - п.п. 2.1, 2.6 и

2.17).

Научная новизна работы заключается в следующем.

1. Предложена система оценки качества распределенных обучающих систем в виде согласованной иерархии показателей качества, причем для каждого показателя определена шкала и способ измерений, значимость и удельный вес.

2. Предложена методология управления качеством РОС па всем жизненном цикле системы, представленная в виде объектно-ориентированной среды.

3. Для одного из видов электронных ресурсов - предметно-ориентированной среды учебного назначения - разработан язык формальных описаний сетевых протоколов и cepelSOe ЯСМОД. Его использование при проектировании распределенных приложений позволяет управлять такими характеристиками качества, как надежность и корректность.

4. Для таких компонентов РОС, как контролирующие программы, предложены математические модели и алгоритмы формирования адаптивных и стратификационных тестов, адекватной оценки и диагностики результатов контроля знаний учащихся. Их применение повышает эффективность РОС.

5. Для обеспечения безопасности при доставке информации, в том числе учебного назначения, предложена математическая модель универсального доступа к файловым объектам, позволяющая обеспечить целостность, конфиденциальность и доступность данных при миграции между различными файловыми системами.

6. Предложена архитектура информационно-образовательного портала как прототипа корпоративного виртуального университета, обеспечивающего функции организации учебного процесса.

Практическая значимость. На основе предлагаемой методологии управления качеством систем учебного назначения осуществлена разработка следующих компонентов РОС:

• программной реализации системы оценки качества распределенных обучающих систем и их отдельных компонентов «ОЦЕНКАРОС»;

• предметно-ориентированной среды «Архитектура связи ЛВС»;

• семи сетевых компьютермых-учебчиков;

• распределенных систем адаптивного тестирования и тренинга ВИОТ и ВИОТ-2;

• рабочего места администратора гетерогенной сети для обеспечения инвариантного санкционированного доступа к мигрирующим образовательным ресурсам;

• информационно-образовательного портала ЭАИ МИФИ.

Эксплуатация указанных систем показала, что все они обладают высокими значениями показателей качества, а значения функции полезности указанных программных продуктов лежат в допустимых диапазонах.

На защиту выносятся следующие положения:

1) предложенная система оценки качества распределенных обучающих систем, включающая в себя согласованную иерархию показателей качества, установленные шкалы измерений, вычисленные значения и удельный вес каждого показателя на основании полученных экспертных оценок;

2) разработанные подсистемы оценки качества всех видов электронных ресурсов, для которых предложены показатели качества, для которых сформирована иерархия показателей, определена значимость и удельный вес каждого показателя, проведено согласование иерархий; для различных видов элеюронных ресурсов получены экспертные оценки допустимых значений различных факторов качества и определены значения функции полезности для каждого вида электронных ресурсов;

3) предложенная методология управления качеством РОС, представленная в виде объектно-ориентированной среды как набор базовых классов и связей между ними, использование которой гарантирует требуемое качество;

4) программная реализация системы управления качеством РОС «ОЦЕНКАРОС»,

5) разработанный язык синтеза формальных описаний сетевых протоколов и ccpbISOb ЯСМОД,

6) созданные на основе предлагаемой методологии следующие компоненты РОС:

• предметно-ориентированная среда обучения «Архитектура связи локальных сетей»;

• семь компьютерных учебников, функционирующих в локальных и корпоративных сетях и Интернет;

• распределенная адаптивная система тренинга и тестирования «ВИОТ-2»;

• рабочее место администратора сети, обеспечивающее инвариантный санкционированный доступ к данным при миграции в гетерогенных корпоративных сетях;

• информационно-образовательный портал для доступа к распределенным образовательным ресурсам как прототип корпоративного ядерного университета.

Авторский вклад. Всс выносимые на защиту результаты и положения диссертационной работы получены и разработаны лично автором, или при его непосредственном участии.

Апробация работы. Основные научные результаты, полученные в ходе диссертационного исследования, докладывались и обсуждались на следующих конференциях, симпозиумах, совещаниях и семинарах:

IX Всесоюзном семинаре по вычислительным сетям (Рига, 1986); X Всесоюзном симпозиуме «Логическое управление с использованием ЭВМ» (Ижевск, 1987); XI Всесоюзном симпозиуме «Логическое управление с использованием ЭВМ» (Орджоникидзе, 1988); XIII Всесоюзном симпозиуме «Логическое управление с использованием ЭВМ» (Симеиз, 1990); ХУ Всесоюзной школс-семинаре но вычислительным сетям» (Ленинград, 1990); XIV Всесоюзном симпозиуме «Логическое управление с использованием ЭВМ» (Феодосия , 1991); Международном симпозиуме «Логическое управление. Интеллектуальные информационные технологии и стратегии» (Москва, 1992); Всемирном конгрессе ITS-93 «Информационные коммуникации, сети, системы и технологии» (Москва, 1993); XVII Международном симпозиуме «Логическое управление. Интеллектуальные информационные технологии и стратегии» (Москва, 1994); конференции «Информатика и новые информационные технологии в системе ЛИЦЕЙ-ВУЗ» (Москва, 1995); Конференции «Телекоммуникации и новые информационные технологии в системе ЛИЦЕЙ-ВУЗ» (Москва, 1997); Научном семинаре «Электронный бизнес. Выпуск 4».(Москва, МЭСИ, 2001); IX - XI Международных научно-технического семинарах «Современные технологии в задачах управления, автоматики и обработки информации» (Алушта, 2000-2002); Научных сессиях МИФИ 1998-2003 годов.

По теме диссертации опубликована 81 работа, общим объемом 108 печатных листов, в том числе монография, статьи в реферируемых журналах и два, выполненных в рамках Программы сотрудничества Министерства образования Российской Федерации и Министерства Российской Федерации но атомной энергии по направлению «Научно-инновационное сотрудничество», препринта.

Достоверность разработанной методологии управления качеством, математических моделей и методов, алгоритмов и программных средств подтверждается соответствующими актами о внедрении, документами о присвоении номеров государственной регистрации программным продуктам в Российском фонде компьютерных учебных программ, серебряной медалью ВДНХ СССР, почетными дипломами выставки-конференции «Телекоммуникации и новые информационные технологии в образовании».

Структура и объем работы. Диссертационная работа состоит из введения, трех разделов, десяти глав, заключения, 19 приложений, списка использованной литературы из 200 наименований. В работе содержится 39 таблиц и 37рисунков.

Заключение диссертации по теме «Математическое и программное обеспечение вычислительных машин, комплексов и компьютерных сетей», Гусева, Анна Ивановна

Выводы

К основным результатам, полученным в данной главе, можно отнести следующие.

1. Разработана архитектура информационно-образовательного портала Экономико-аналитического института МИФИ, как прототипа корпоративного ядерного университета. Разработка проводилась с использованием методологии управления качества РОС.

2. Отличительными особенностям портала являются:

• возможность обучения по индивидуальным учебным траекториям,

• система санкционированного доступа к распределенным объектам портала,

• встроенная система поддержки учебного процесса «Электронный деканат»,

• встроенная подсистема создания, публикации и проведения широкого спектра электронных занятий.

3. В 2002 году запущена первая очередь портала в виде набора таких подсистем, как организации доступа к ресурсам, «Электронный деканат», система поддержки образовательной среды и модуль оценки качества образовательных ресурсов, подсистемы общения, хранилище с записями о студентах и преподавателях.

4. Подготовлены электронные версии занятий по курсам «Логистика», «Сети и межсетевые коммуникации», «Финансы и кредит», «Экономика предприятия», «Основы экономической теории». По ряду курсов прошло несколько образовательных треков. Одним из основных результатов от использования следует отметить резкое повышение интенсификации труда как преподавателя, так и учащихся.

5. Проведенные экспертные оценки для информационно-образовательного портала ЭЛИ показывают, что все параметры удовлетворяют потребительским ограничениям, а значение функции полезности превышает допустимый минимум на 18 %.

ЗАКЛЮЧЕНИЕ

В ходе работы над диссертационным исследованием были получены следующие наиболее значимые результаты.

1. Впервые предложена система оценки качества распределенных обучающих систем в виде согласованной иерархии показателей качества, причем для каждого показателя определена шкала измерений, значимость и удельный вес. Общее количество показателей и групп показателей, из которых сформировано шесть уровней иерархии, примерно 130. Иерархия показателей согласована по методу Саати, суммарный вес каждого уровня равен единице. Показатели, сгруппированные па верхнем уровне иерархии, разбиваются на общие и специализированные факторы. К общим факторам оценки качества РОС, как к любым программным системам, относятся приемлемость, корректность, надежность, безопасность, добротность, стоимость, интерфейс и открытость. К специализированным факторам, характеризующим программный продукт в конкретной предметной области, относятся функциональность, адаптивность, эффективность, интеллектуальность, комфортность, современность и распределенность. Обработанные автором усредненные экспертные оценки показали, что но совокупности, группа общих факторов обладает весом 0,75. Из них наиболее значимыми являются безопасность (0,18), корректность (0,16) и хорошо построенный интерфейс (0,09). Группа специализированных факторов обладает значимостью 0,25, из них наибольший вклад дает эффективность (0,06).

2. Впервые предложена методология управления качеством РОС на всех этапах жизненного цикла системы, реализованная в виде объектной среды оценки. Указанная среда представляет собой множество базовых классов и связей между ними. Базовые классы соответствуют набору требований качества и требованиям гарантий, сопровождая весь жизненный цикл системы. Использование данной методологии гарантирует значение заданных заранее, на этапе планирования, показателей качества РОС, что было подтверждено на ряде программных продуктов, в частности, семи электронных учебниках, двух распределенных системах контроля знаний и предметно-ориентированной обучающей среде.

3. Разработан новый язык формальных описаний сетевых протоколов и сервисов ЯСМОД. Его использование для построения формальных описаний, верификации и программной реализации сложных распределенных приложений повышает надежность функционирования программных компонентов в сетевых средах. Не уступая по порождающей способности известным языкам, таким как ESTELLA, LOTOS, АГРЕГАТ или ОСА, ЯСМОД имеет более широкий спектр применения: системы синхронного и асинхронного действия, конвейерные системы. Наиболее важным является возможность с равным успехом описывать и верифицировать как протокольные объекты, так и сервисы, несмотря на NP-полноту поставленной задачи. Такая верификация впервые стала возможна при уменьшении размерности задачи редукцией сетевой модели к каноническому виду и последующей проверке на отсутствие ошибок. Помимо применения в учебном процессе, интерпретаторы с ЯСМОД позволили осуществить проектирование, верификацию, моделирование и реализацию системного программного обеспечения ряда реально работающих промышленных сетевых систем и распределенных приложений.

4. Впервые синтезированы математические модели и алгоритмы для формирования адаптивных и стратификационных тестов и адекватной оценки результатов тестирования как на основе классической теории тестирования, так и с использованием лате!ггно-структурного подхода IRT. На основе предложенных моделей впервые формируются карты знаний группы учащихся или одного учащегося, по которым появляется возможность произвести диагностику пробелов в знаниях, оценить качество преподавания и прогнозировать дальнейшее обучение. Их применение повышает эффективность контролирующих компонентов РОС.

5. Впервые разработана математическая модель универсального доступа к данным, позволяющая повысить безопасность информации, в том числе учебного назначения, при миграции между различными файловыми системами. На основе проведенного анализа пространства состояний защиты построена базовая модель отношений "пользователь-система» {аО, al, .а13, ЬО, bl,.bJ3}, позволяющая оценивать все потенциально возможные полномочия доступа и средств их санкционирования при защите от хакерских атак. Аппарат построенной алгебры преобразований защиты дает возможность оценивать степень адекватности конкретных переходов между файловыми системами NetWare, UNIX и Windows NT/2000 формализованным образом на основе четырехзначной логики. Практическим результатом решения задачи обеспечения сохранения полномочий доступа стал программный комплекс анализатора защиты для гетерогенной сети, состоящий из ядра па сервере NetWare и агентов для серверов Windows NT -2000 и Linux.

6. Разработана архитектура информационно-образовательного портала как прототипа корпоративного ядерного университета. Данная работа ведется в рамках Программы сотрудничества Министерства образования Российской Федерации и Министерства Российской Федерации по атомной энергии по направлению «Научно-инновационное сотрудничество». К моменту защиты диссертации запушена первая очередь портала, охватывающая систему доступа к ресурсам, модуль «Электронный деканат», хранилище с записями о студентах и преподавателях, систему поддержки образовательной срсды и модуль оценки качества образовательных ресурсов.

7. На основе предлагаемой автором диссертации методологии управления качеством систем учебного назначения осуществлена разработка следующих компонентов РОС:

• программной реализации системы оценки качества самих распределенных обучающих систем и их отдельных компонентов «ОЦЕНКАРОС»;

• предметно-ориентированной среды «Архитектура связи ЛВС»;

• семи сетевых компьютерных учебников и задачников;

• распределенных систем адаптивного тестирования и тренинга ВИОТ и ВИОТ-2;

• рабочего места администратора гетерогенной сети для эквивалентирования санкционированного доступа к мигрирующим образовательным ресурсам;

• информационно-образовательного портала ЭЛИ МИФИ.

Все указанные разработки используются в учебном процессе Московского инженерно-физического института, о чем имеются соответствующие свидетельства.

8. Эксплуатация указанных систем показала, что все они обладают высокими значениями показателей качества, а значения функции полезности указанных программных продуктов лежат в допустимых диапазонах. Экспертные оценки по нормированной шкале [0.9] для электронных учебников дают значения функции полезности в виде вектора (/={6,55; 6,90; 6,92; 6,96; 7,03; 7,07; 7,13} при минимально допустимом значении umin= 5,32. Полученные экспертные оценки качества для распределенных систем адаптивного тестирования ВИОТ-2 и ВИОТ позволяют определить значение функции полезности как 6,88 и 6,51, в то время как итт для контролирующих программ составляет 5,23. Полученные экспертные оценки для информационно-образовательного портала показывают, что значение функции полезности на 18% превышает допустимый минимум. Таким образом, все рассматриваемые учебники, задачники и тестовые системы, информационно-образовательный портал ЭЛИ МИФИ, спроектированные на основе предлагаемой автором диссертации методологии, удовлетворяют исходным пользовательским ограничениям, а значение функции полезности превышает допустимый минимум на 13-20 %.

Список литературы диссертационного исследования доктор технических наук Гусева, Анна Ивановна, 2003 год

1. Advanced Learning Infrastructure Consortium, 2000 (ALIC)//www.aldnet.org

2. Alliance of Remote Instructional Authoring and Distribution Networks of Europe, 2000 (ARIADNE) //www.aldnet.org

3. IMS Global Learning Consortium, 2000//www.aldnet.org

4. Aviation Industiy CBT Committee, 2001 (AICC) //www.aldnet.org

5. IEEE P1484.1/D9-pre, 2001-11-15 Draft Standard for Learning Technology — Learning Technology Systems Architecture (LTSA)//www.aldnet.org

6. SCORM 2.0,2001 (Shareable Content Object Reference Model)// www.aldnet.org

7. Проект стандарта по дистанционному обучению http://. Db.informika.ru/do/new

8. Проект Государственного стандарта Российской Федерации. Информационная технология. Методы и средства обеспечения безопасности

9. Андреев Л.Л. Введение в дистанционное обучение: Учебно-методическое пособие. М.:ВУ, 1997 С. 85.

10. Ю.Тихомиров В.П. ДО: история, экономика, тенденции//Дистаиционное образование, 1997. №2.

11. И. Полат Е.С. Дистанционное обучение: организационные и педагогические аспекты. М.,ИНФО, 1996.№3.

12. Самойлов В.А., Рубин 10. Б. Система ДО в МЭСИ// Дистанционное образование, 1996, №1. С.13-16.

13. Методические вопросы использования телекоммуникаций в образовании: Отчет НИР. Под рук. Григорьев С.Г. // М., ИНИ11ФО, 1996.

14. Норенков И.П. Компьютерные обучающие среды для дистанционного образования. http://nt.icsti.su/rus/bul/bul2-96/norenkov.html, 2001.

15. Норенков И.П. К проекту документа под названием «Контроль и оценка качества дистанционного образования» http://. Db.informika.ru/, 2001.

16. Золотарев А.А. Современные образовательные технологии в контексте интенсивного информатизированпого обучения. Кн. 1. М.: Ассоциация «Кадры», 2000. 32 с.

17. Васильев Н.П., Метечко В.И., Чернышев Ю.А., Шурыгип В.А. Образовательный портал вуза как элемент информационно-образовательной среды//Всероссийская научно-методическая конференция «Телематика 2002».

18. Компьютерные обучающие программы. Классификация. Критерии качества/Демушкин А.С, Кириллов А.И., Сливина Н.А., Чубров В.Е., Кривошеее А.О., Фомин С.С.// Информатика и образование, 1995, № 3. С.15-22.

19. Общее руководство по качеству предприятия и основные принципы построения модели системы качества. Система качества по МС ISO серии 9000. JL: инженерный центр «Аргус-стандарт», 1991.

20. Проектирование и контроль качества. Система качества но МС ISO серии 9000. Спб.: Аргус-стандарт, 1993.

21. Общее руководство качеством и стандарты по обеспечению качества. Часть 3: «Руководящие указания по применению ISO 9001 при разработке, поставке и обслуживанию программного обеспечения», М.: ВНИИС, 2001.

22. Богданов Д.В., Путилов В.Л., Фильчаков В.В. Стандартизация процессов обеспечения качества программного обеспечения. Апатиты: КФ ПстрГУ, 1997. 161с.

23. Sommervillc S. Software Engineering, Addison-Wcsley Pub. Co., 1996.

24. Липаев В. Качество программного обеспечения. М.: Финансы и статистика, 1983.

25. Воас Дж. Процесс сертификации программ на базе информации об их использовании// Открытые системы, 2000. №10.

26. R. Н. Hayes, D. A. Garvin. Managing as if Tomorrow Mattered// Harvard Business Review, №5-5,1982,70-79.

27. Аджисв В. Мифы о безопасном ПО: уроки знаменитых катастроф // Открытые системы, 1998. №6.

28. Саати Т. Принятие решений. Метод анализа иерархий. М.: Радио и связь, 1993.

29. Замков О. О., Толстопятенко А.В. Математические методы в экономике// Серия «Учебники МГУ им. М. В. Ломоносова». М.:ДИС, 1998.

30. Зайцев С.С. Описание и реализация протоколов сетей ЭВМ М.: Наука, 1989.

31. Моисеев В.Б., Усманов В.В., Таранцева К.Р., Пятирублевый Л.Г. Статистический подход к принятию решений по результатам тестирования для тестов открытой формы//Дистанционнос образование, 2001, №1.

32. Аванесов B.C. Основы научной организации педагогического контроля в высшей школе // Труды Исследовательского центра Гособразования СССР. М., 1989.-168 с.

33. Анастази А. Психологическое тестирование. Ки.1. М.: Педагогика, 1982. -320 с.

34. Кузовлева. К. Т. Конструирование педагогических тестов на основе современных математических моделей// www.informika.ru.

35. Горбатов В.А. Фундаментальные основы дискретной математики. Информационная математика. М.: Наука; Физматлит, 1999. -544 с.

36. Саливэн Д. Пять принципов интеллектуального управления контентом //www.crnep/news.asp.

37. Романюк С.Г. Оценка надежности программного обеспечения // Открытые системы, 1998. №6.

38. Майерс Г. Надежность программного обеспечения. М.: Мир, 1980.

39. Коганов А.В., Ромашок С.Г. Экономический подход к понятию надежности программы // Открытые системы, 1995. №3.

40. Пьянзин К. Безопасность компьютерных систем // LAN: журнал сетевых решений, 1997. №8.

41. Поттосин И. «Хорошая программа»: попытка точного определения понятия // Программирование, 1997. №2.

42. Поттосин И. Добротность программ и информационных потоков // Открытые системы, 1998. №6.

43. Чернопожкин С. Меры сложности программ (Обзор) // Системная информатика, 1996. №5.

44. Дам Э. В. Пользовательские интерфейсы нового поколения // Открытые системы, 1997. №6.

45. Северов J1. Л, Панферов А. И. Информационно-методическое обеспечение дистанционного обучения па старших курсах, http://www.aanet.ru/conferences/papers/inteIect/tezisi.htm, 1999.

46. Колосов В. Г. Организационные принципы построения дистанционных систем обучения // 45.

47. Абдымапапов С. А. Дидактические аспекты дистанционного обучсния//Междупародная научная конференция «Интеллектуальные технологии и дистанционное обучение на рубеже XXI века»// 45.

48. Игнатьев М. Б. Компыотсризм основа дистанционного обучения // 45.

49. Иванов Б. С. Система компьютерного тестирования // 45.

50. Кривошеев А.О. Тенденции развития компьютерных обучающих программ http://Dh.informika.ru/do. 2001.

51. Кривошеев А.О., Фомин С.С. Требования к компьютерному учебнику для дистанционного обучения (Проект). http://Db.informika.ru/do/news/dok/up44.dok, 2001.

52. Виштынецкий Е. И., Кривошеев А. О. Вопросы применения информационных технологий в сфере образования и обучения // Информационные технологии. 1998, № 2, С. 32-36.

53. Абросимов А. Г. Принцип интеллектуальной технологии дистанционного образования // 45.

54. Бережной Jl. Н., Колесов Н. В. Принципы построения интеллектуальных обучающих систем // 45.

55. Семенов В.В., Пименова Т.В. Кибернетическая технология сетевого тестирования// Научная сессия МИФИ-2000. Сборник научных трудов. М.: МИФИ, 2000. Т. 2.,

56. Гречихин А.А., Древе Ю.Г. Вузовская учебная книга: Типология, стандартизация, компьютеризация: Учсбио-мстодичсское пособие в помощь авт. и ред. М.: Логос. Московский государственный университет печати, 2000.255 с.

57. Смольянинов А.В. Гипертекстовые системы в обучении //Компьютерные технологии в высшем образовании. М.: Изд-во МГУ, 1994, С. 208-220.

58. Булгаков М.В., Якивчук Е.Е. Инструментальные системы для разработки обучающих программ//57., с. 153-162.

59. Asymetrix ToolBook II Instructor http://ww\v.asvmctrix.com

60. DiscoverWare http:// discoverware. Com/products/dtoday.html

61. TopCIass http://www.wbtsystems. Com/solutions/overview.html

62. Authorware Attain http://www. Macromedia.com/software/productinfo/

63. Blackboard Courselnfo http://product.blackboard.nct/courseinfo

64. EventWare http://www.eventware.com

65. The Learning Manager http://www.campuscan.com/frames/frstIok2/htmI

66. Автоматизированная система дистанционного обучения «ДОЦЕНТ» //www.uniar.ru67. eLABS//www.c-styIc.ru

67. Компьютерная технология обучения. Словарь-справочник/ Под ред. В.И. Гриценко, A.M. Довгялло, А.Я. Савельева. Киев: Наукова думка, 1992.

68. ISO/DP 8807. Information Processing System Open System Interconnection -ESTELLE - A formal Description Technique Based on Extended State Transition Model, 1984.

69. Питерсон Д. Теория сетей Петри и моделирование систем. М.: Мир, 1984.

70. Пранявичус Г.И., Пилаускас В.К., Хмеляускас А.В. Пранас система спецификации и анализа протоколов// X Всесоюзная конференция по вычислительным сетям, 1985, Т.З, С. 94 -98.

71. R. Abrial. The B-Book: Assigning Programs to Meanings. Cambridge University Press, 1996.

72. Hinchey M.G., Jarvis S.A. Concurrent Systems: Formal Development in CSP// McGraw-Hill International Scries in Software Engineering, 1995.

73. Spivey J.M. The Z Notation: A Reference Manual: 2nd edition// Prentice Hall International Series in Computer Science, 1992.

74. Боуэр Дж., Хинчи М.Дж. Десять заповедей формальных методов // МИР ПК, 1997. №9.

75. Gordon M.J.C., Melham T.F. Introduction to HOL: A theorem proving environment for higher order logic// Cambridge University Press, 1993.

76. Polack F., Mander K.C. Software Quality Assurance using the SAZ Method.

77. Дистанционное обучение. 063op//http:user.kpi.kharkov/lre/bde/rus/de/comedu.htm.

78. Романов A.H., Торопцов B.C., Григорович Д.Б. Технология дистанционного обучения в системе заочного экономического образования. М.: ЮНИТИ-ДАНА, 2000.

79. Техническая документация по Learning Space. http://www.lotus. com/home.nst/tabs/learspace

80. Основы Lotus Notes и системы БОСС-Референт: Учебное пособие. Фирма «АйТи», 2001.

81. БОСС-Референт. Руководство пользователя. Фирма «АйТи», 2001.

82. Малыхина М. П., Алешин А. В., Частикова В. А. Экспертная система для оценки качества учебных nporpaMM//http://www.bytic.ru/cue99M/bd7shlmlxk.htIm

83. Домрачев В.Г., Ретинская И.В. Об опыте обучения по индивидуальным траекториям //Открытое образование, 2000 г. №2.

84. Буравлев А.И., Переверзев В.Ю. Выбор оптимальной длины педагогического теста и оценка надежности его результатов/Юткрытое образование, 1999. №2.

85. Бобров JI.K., Сунгатулин Р.Т. Адаптивная система компьютерного тестирования//: http://cit.drbit.com.ru

86. Маркова Н. Пристальный взгляд на качество программ // Открытые системы, 1999. №7-8.

87. Кулаков А. Ф., Пьявченко А.Н. Стандартизация в области программной инженерии. // www.stq.ru.

88. Гусева Л.И. Дистанционное обучение: требования и механизмы оценки // Научная сессия МИФИ 2001: Сб. научных трудов МИФИ. М.: МИФИ, 2001. Т.2.

89. Гусева Л.И. Мультимедийные средства обучения в специализации «Сетевые системы»// Научная сессия МИФИ-99: Сборник научных трудов. М.: МИФИ, 1999. Т.8. С.20-21.

90. Гусева А.И, Синицып С.В. Сетевые информационные технологии в учебном процессе// Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С. 81-82.

91. Гусева А.И., Тихомирова А.Н. Формальное задание требований и ограничений на разработку системы на основе теории полезности// Научная сессия МИФИ-2001: Сборник научных трудов. М., МИФИ, 2001. Т. 2.

92. Гусева А.И. Методология синтеза распределенных обучающих систем// Труды X Международного научно-технического семинара «Современные технологи в задачах управления, автоматизации и обработки информации». Алушта, 2001. С.177-178.

93. Гусева А.И. Инструментальные средства поддержки дистанционного обучения// Электронный бизнес. Тезисы докладов семинаров. Выпуск 4. М.: Издательство МЭСИ, 2001.

94. Гусева А.И. Локальные сети управления ГПС и особенности их архитектуры // Математическое обеспечение интегрированных систем САПР-ГАП. Куйбышев, 1985. С.53-56.

95. Гусева А.И., Молтенинов Л.В. Малые микропроцессорные локальные сети с разделяемой памятью в управлении ГПС// Математическое обеспечение интегрированных систем САПР-ГАП. Куйбышев, 1985. С.51-52.

96. Гусева Л.И., Метечко В.И. О реализации машин баз данных для обработки цифровой информации// Цифровая обработка измерительной информации. М.: Атомэнергоиздат, 1986.

97. Гусева А.И., Троицкий Н.Л., Фролов С.А. Распределенная система управления гибким мелкосерийным производством длинномерных изделий// Гибкие производственные системы. М.: МДНТП, 1986.

98. Гусева А.И. Сетевые модели при проектировании протоколов связи в ЛВС// Математическое обеспечение интегрированных систем САПР-ГАП. Ташкент, 1986.

99. Гусева А.И., Федоров Н.В., Фролов С.А. Многопроцессорные системы в системах обработки информации и управления // Математическое обеспечение интегрированных систем САПР-ГАП. Ташкент, 1986.

100. Гусева А.И., Фролов С.А. Архитектура распределенной вычислительной сети для управления промышленным производством // IX Всесоюзный семинар но вычислительным сетям. Ч.Ш. Рига, 1986.

101. Гусева А.И. Проектирование протоколов транспортной службы на основе сетевых моделей // X Всесоюзный симпозиум «Логическое управление с использованием ЭВМ». Ижевск, 1987. С. 257-258.

102. Гусева А.И. Формальное описание протокола электронной почты на основе сетевых моделей// XI Всесоюзный симпозиум «Логическое управление с использованием ЭВМ». Орджоникидзе, 1988. С. 243-245.

103. Гусева А.И. Методы синтеза протокольных объектов па основе сетевых моделей//XI Всесоюзный симпозиум «Логическое управление с использованием ЭВМ». Орджоникидзе, 1988. С. 202-205.

104. Гусева А.И., Летунов Ю.П. Архитектура связи в локальных сетях: Учебное пособие. М.: МИФИ, 1988. 64 с.

105. Ш.Гусева А.И. , Летунов Ю.П., Метечко В.И., Порешин П.П., Русаков В.А. Методические указания к проведению практических занятий па ФПК СП по специализации "Распределенная обработка информации». М.: МИФИ, 1988. 44 с.

106. Гусева А.И., Метечко В.И. Электронная почта в сетях рабочих станций// Системные средства САПР. М.: МДНТП, 1989. С. 97-100.

107. Гусева А.И., Летунов Ю.П., Савичева И.Н., Тулупова H.II. Методические указания к проведению практических занятий в виде деловых игр па ПЭВМ по проектированию протоколов в локальных вычислительных сетях. М.: МИФИ, 1989.58 с.

108. Гусева А.И. Электронная почта ЭП-МИФИР средство общения в интерсетях MAP/TOP// Материалы XII Всесоюзного симпозиума «Логическое управление с использованием ЭВМ». Симферополь, 1989. С. 275-277.

109. Гусева А.И., Летунов Ю.П. Лабораторный практикум «Архитектура связи в сетях ЭВМ»: Учебное пособие. М.: МИФИ, 1990.48 с.

110. Гусева А.И. Методы синтеза протокольных объектов на основе сетевых моделей// Материалы XIII Всесоюзного симпозиума «Логическое управление с использованием ЭВМ». Симеиз, 1990. С.354-358.

111. Гусева А.И., Лебедева О.В. Адаптируемые транспортные протоколы сетей ТОР (МИФИР) // Материалы XIII Всесоюзного симпозиума "Логическое управление с использованием ЭВМ». Симеиз , 1990. С.359-361.

112. Гусева А.И. Язык формального описания протокольных объектов на основе сетевых моделей/У Материалы ХУ Всесоюзной школы-семинара по вычислительным сетям. Ленинград, 1990. С.174-179.

113. Гусева А.И. Вопросы верификации локальных и глобальных сервисов в ЛВС (язык ЯСМОД) //Материалы XIV Всесоюзного симпозиума "Логическое управление с использованием ЭВМ». Феодосия , 1991. С. 193-197.

114. Гусева А.И. Характеризационное управление при синтезе распределенных систем// Материалы Всемирного конгресса ITS-93 «Информационные коммуникации, сети, системы и технологии». М.: Международная академия информатизации, 1993. С.65-70.

115. Гусева А.И., Калипова А. А., Мурзипова А. В. Электронный учебник «Локальные вычислительные сети». М.: Фонд алгоритмов и программ НИИВО АПН РФ, № гос. per. 93647, 1993.

116. Гусева А.И., Петров Д.В., Рогулин Д.С. «ВиОТ. История»- распределенная система для тестирования учащихся по курсу «История России» // Материалы конференции «Информатика и новые информационные технологии в системе лицей ВУЗ». М.:МИФИ, 1995. С.27-28.

117. Гусева Л.И. Работа в локальных сетях NetWare 3.12-4.1: Учебник. Рекомендован Министерством общего и профессионального образования РФ в качестве учебника для студентов ВУЗов. М.: ДИЛЛОГ-МИФИ, 1996. 288с.

118. Гусева А.И. , Тихомирова А.Н. Электронный учебник " Работа в сетях NetWare 3.12». М.: Российский фонд компьютерных программ ИПИПФО МО РФ, № гос. per. 1577, 1996.

119. Гусева А.И., Дстинип О.О., Детинииа О.И. Электронный учебник «Работа в сетях NetWare 4.1». М.: Российский фонд компьютерных программ ИНИНФО МО РФ, № гос. per. 1723, 1997 г.

120. Гусева А.И., Тихомирова А.Н Электронный учебник «Работа в сетях NetWare 3.12»//Материалы конференции "Телекоммуникации и новые информационные технологии в системе лицей-ВУЗ». М.: МИФИ, 1997. С. 56-57.

121. Гусева А.И, Тихомирова А.Н. Компьютерный учебник «Сетевая операционная система Windows NT». М.: Российский фонд компьютерных программ ИНИНФО МО РФ, № гос. per. 1751, 1997.

122. Гусева А.И., Детинин О.О., Детинина О.И. Компьютерный учебник «Учимся программировать: Pascal 7.0». М.: Российский фонд компьютерных программ ИНИНФО МО РФ, № гос. per. 1725, 1997.

123. Гусева А.И. Технология межсетевых взаимодействий. NetWare-UNIX-Windows-Internet. М.: ДИЛЛОГ-МИФИ, 1997. 286 с.

124. Гусева А.И. Учитесь программировать: Pascal 7.0. Задачи и методы их решения. Рекомендовано Министерством общего и профессионального образования РФ в качестве учебного пособия для студентов ВУЗов М.: ДИАЛОГ-МИФИ, 1997. 280 с.

125. Гусева А.И. Учимся информатике: задачи и методы их решения. М.: ДИАЛОГ-МИФИ, 1998.320 с.

126. Гусева А.И., Егошин А.И. Компьютерный мультимедийный учебник «Все об Интернет» //Научная сессия МИФИ-99: Сборник научных трудов. М.: МИФИ, 1999. 4.6. 84-85с.

127. Гусева А.И., Тихомирова А.Н. Синтез корректных формальных описаний протокольных объектов и сервисов в распределенных системах//Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.5. 187-188 с.

128. Гусева А.И., Детинин О.О. Синтез эталонов прикладного программного обеспечения корпоративных сетей //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. 79-80 с.

129. Гусева А.И., Тихомирова А.Н. Локальные вычислительные сети. Компьютерный учебник «Работа в NetWare 3.12» //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С.83.

130. Гусева А.И., Дстинин О.О., Детипина О.И. Локальные вычислительные сети. Компьютерный учебник «Работа в сетях NetWare 4.1» //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С.84.

131. Гусева А.И., Тихомирова А.Н Технология межсетевых взаимодействий. Компьютерный учебник «Сетевая ОС WINDOWS NT» //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С. 85.

132. Гуссва А.И., Егошин А.И., Друзин А.А. Технология межсетевых взаимодействий. Компьютерный учебник «Все об INTERNET» //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С.86.

133. Гусева А.И., Детинин О.О., Детипина О.И. Компьютерный задачник с решениями «Учимся программировать: Pascal 7.0» //Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. с.87

134. Гусева А.И., Детинип О.О., Детинина О.И. Компьютерный учебник «Информатика для поступающих в ВУЗы»//Научиая сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. 4.6. С.88.

135. Гуссва А.И., Егошин А.И. Компьютерный мультимедийный учебник «Все об Интернет». М.: Российский фонд компьютерных учебных программ РОСФОКОМП, № гос. per. 1975, 1999.

136. Гусева А.И., Шаиошник А.В. Санкционированный доступ к ресурсам в гетерогенных банковских сетях на основе UNIX-NetWare // Научная сессия МИФИ-98: Сборник научных трудов. М.: МИФИ, 1998. Т.1. С. 20-21.

137. Гусева А.И., Тихомирова А.Н. Синтез корректных формальных описаний распределенных приложений в вычислительных сетях // Научная сессия МИФИ-99: Сборник научных трудов. М.: МИФИ 1999. Т.7. С.86-87.

138. Гусева А.И., Шапошник А.В. Санкционированный доступ при миграции данных в гетерогенных сетях.// Научная сессия МИФИ-99: Сборник научных трудов. М.: МИФИ 1999. Т.7. С.88-89.

139. Гуссва А.И. Инструментальные средства разработки дистанционных систем виртуального тренинга и тестирования// Научная сессия МИФИ-2000: Сборник научных трудов. М.: МИФИ, 2000. Т.2. С. 203-204.

140. Гусева А.И., Шпурик А.П. Дистанционная система тренинга и тестирования// Научная сессия МИФИ-2000: Сборник научных трудов. М.: МИФИ, 2000. Т.2. С.173-174.

141. Гусева А.И., Шпурик А.П. Дистанционная система тренинга и тестирования// Труды IX международного научно-технического семинара «Современные технологии в задачах управления, автоматики и обработки информации». Алушта, 2000. С. 303-306 .

142. Гусева А.И., Андреев В.Л. Подсистема адаптивного тренинга Научная сессия МИФИ-2001: Сборник научных трудов. М.: МИФИ, 2001. Т. 2. С. 169170.

143. Гусева Л.И., Тихомирова А.Н. Формализация требований и ограничений на разработку системы на основе теории полезности// Научная сессия МИФИ-2001: Сборник научных трудов. М.: МИФИ, 2001. Т. 2. С. 162-163.

144. Гусева А.И., Друзин Л.Л., Чернышов С.П. Распределенные банковские системы на базе операционной системы NetWare// Научная сессия МИФИ-98: Сбориик научных трудов. М.: МИФИ, 1998. Т.1. С. 19.

145. Гусева А.И., Шпурик Л. П. Дистанционная система тренинга и адаптивного тестирования ВИОТ-2 // Научная сессия МИФИ-2001: Сборник научных трудов. М.: МИФИ, 2001. Т. 2. С.171-172.

146. Гусева Л.И., Шпурик Л. П. Математические методы построения методик адаптивного тестирования// Научная сессия МИФИ-2002: Сборник научных трудов. М.: МИФИ, 2002. Т.6. С. 186-187.

147. Гусева А.И., Шпурик А. П. Дистанционная система тренинга и адаптивного тестирования ВИОТ-2// Научная сессия МИФИ-2002: Сборник научных трудов. М.: МИФИ, 2002. Т.6. С.184-185.

148. Гусева Л.И., Синицына О.С. Компьютерный учебник по электронной системе документооборота в среде Learning Space// Научная сессия МИФИ-2002: Сборник научных трудов. М.: МИФИ, 2002. Т.2. С.175-176.

149. Гусева А.И., Филиппов С.А. Современные концепции создания образовательных web-ссрвсров.// Труды XI Международной конференции-выставки «Информационные технологии в образовании». М., 2001. Ч. IV. С. 59.

150. Гусева А.И., Филиппов С.А. Концепция информационно-образовательного портала корпоративного университета (на базе ЭЛИ МИФИ). // Научная сессии МИФИ-2002: Сборник научных трудов. М.:МИФИ, 2002. Т. 2. С. 174.

151. Гусева А.И., Филиппов С.А. Этапы создания корпоративного университета: архитектура информационного портала// Технология высшего образования в XXI веке: проблемы и перспективы развития. Актоба.: ЛГУ, 2002.

152. Гусева А.И. Филиппов С.А. Корпоративный университет: архитектура информационного портала //Научно-технический семинар «Применение новых технологий в образовании». Троицк, 2002.

153. Гусева А.И. Адаптивные методики тестирования. М.:МИФИ. Препринт 2002007, 32с.

154. Гусева А.И. Оценка качества распределенных обучающих систем. М.:МИФИ. Препринт 2002-006, 32 е.

155. Гусева Л.И. Сети и межсетевые коммуникации. Windows 2000: Учебник. М.: ДИАЛОГ-МИФИ, 2002. 256 с.

156. Гусева Л.И. Модель качества распределенных обучающих систем //Информатика и образование, 2003, № 2.

157. Гусева Л.И. Методики адаптивного контроля знаний //Информатика и образование, 2003, № 7.

158. Collis В., De Boer, W. F. The Adaptation and Use of a WWW-Bascd Course Management System within Two Different Types of Faculties at the University of Twente// http://teletop.edte.utwente.nl

159. Carleer G.J., Collis B.A. Extending good teaching with technology// http://teletop.edte.utwente.nl

160. Tielemans G., Collis В/ Strategic Rcqiurcments for a System to Generate and Support WWW-Based Environments for a Faculty// http://tcletop.eclte.utwente.nl

161. Игнатова М.Г., Соколова Н.Ю. Принцип подключения активных компонентов в виде специализированных обучающих программ через информационно-образовательную среду на базе ОРОКС// http://www.bitpro.ru/TIO/2001/iti/II/ii/II-4-14.html.

162. ПРОМЕТЕЙ //www.prometeus.ru.

163. Dodds P.V.W. Trends of Learning Technology Standards // www.alic.gr.jp, 2001.

164. Материалы Всесоюзного научно-методического ссмипара «Новые методы и технические средства обучения». М.:ВДНХ, 1980.

165. Материалы отчета Международного института менеджмента ЛИНК// www.ou-link.ru.

166. Предложения ЦДО СПбГТУ к Объединенному проекту по разработке нормативно-правовых документов и отраслевых стандартов дистанционного обучения/Avww.cde. spbstu.ru.

167. Буч Г. Объектно-ориентированный анализ и проектирование с примерами приложений на С++. М.: Издательство Бином, 1999. 560 с.

168. ISO 12207-95. М.: ВНИИС, 2001.

169. ISO 15504. М.: ВНИИС, 2001.

170. Рыжов В.Л. Классификация образовательных программ и систем. М.:ИНИНФО, 1994. 28 с.

171. Ваграмспко Я.А. Технология сертификации программных средств учебного назначения. М.: ИНИНФО, 1993.

172. Рыжов В.А. , Теплицкий В.М., Корниенко А.В.Композиция изображений и принципы предъявления знаний. М.:ИНИНФО, 1995 г.

173. ISO 8402. М.: ВНИИС, 2001.

174. Киресв B.C., Гуссва А.И. Информационно-образовательный портал: качество образовательных ресурсов// Научная сессии МИФИ-2003: Сборник научных трудов. М.-.МИФИ, 2003. Т. 2. С. 113-114.

175. Руководство по составлению электронных учебных пособий// http://info.distant.ru/library/posobiye/contents.htm.

176. Клайн П. Справочное руководство по конструированию тестов (Введение в психометрическое проектирование). Киев, 1994. 282 с.

177. Гусева А.И., Шпурик А.П. Математические методы построения адаптивных методик тестирования// Научная сессии МИФИ-2003: Сборник научных. М.-.МИФИ, 2003. Т. 2. С. 104-105.

178. Гусева А.И., Шпурик А.П. Дистанционная система тренинга и адаптивного тестирования ВИОТ-2// Научная сессии МИФИ-2003: Сборник научных. М.:МИФИ, 2003. Т. 2. С. 102-103.

179. Гусева А.И., Шпурик А.П. Определение аномальных наборов ответов при компьютерном адаптивном тестировании // Научная сессии МИФИ-2003: Сборник научных трудов. М.:МИФИ, 2003. Т. 2. С. 104-105.

180. Portal Lifecycle Management Adding the Hidden Cost of Portal Ownership //www.dclphigroup.com.

181. Тихонов А.Н., Абрамешин А.Е., Воронина Т.П., Иванников Л.Д., Молчанова О.П. Управление современным образованием: социальные и экономические аспекты. М.: Вита-Пресс, 1998. 256 с.

182. Гусева А.И. Филиппов С.А. Прототип корпоративного ядерного университета// Научная сессии МИФИ-2003: Сборник научных трудов. М.:МИФИ, 2003. Т. 6. С. 245-246.

183. Гусева А.И. Филиппов С.А. Информационно-образовательный портал: «Электронный деканат»// Научная сессии МИФИ-2003: Сборник научных трудов. М.:МИФИ, 2003. Т. 6. С. 108.