Автоматизация проектирования мультиагентных обучающих систем тема диссертации и автореферата по ВАК РФ 05.13.12, кандидат технических наук Михтанюк, Алэна Александровна

• Михтанюк, Алэна Александровна
• кандидат технических наук
• 2003

Оглавление диссертации кандидат технических наук Михтанюк, Алэна Александровна

Введение.

Глава 1. Анализ состояния проблемы проектирования АОС.

1.1. Обзор существующих АОС.

1.2. Характеристика проблемы автоматизации проектирования АОС.

1.3. Нерешенные теоретические вопросы формализации процесса обучения.

1.4. Пути решения проблемы и задачи диссертационной работы.

Выводы к главе 1.

Глава 2. Теоретические вопросы проектирования АОС.

2.1. Принципы и основные понятия семиотического моделирования

2.2. Типовые модели электронного учебника, обучаемого и процесса передачи знаний.

2.3. Средства тестового контроля и управления мультиагентным процессом обучения.

2.4. Типовые структура АОС и типовые процедуры проектирования АОС.

2.5 Лингвистические и психологические аспекты функционирования АОС.

Выводы к главе 2.

Глава 3. Разработка типовых модулей учебно-исследовательской САПР АОС.

3.1. Структура, функции и виды обеспечения САПР АОС.

3.2. Алгоритм декомпозиции электронного учебника.

3.3. Синтез гипертекстов и интерфейсов преподавателя и обучаемых.

3.4. Генерация алгоритмов адаптивного мультиагентного обучения.

3.5. Создание тренажеров и рейтинговой системы.

Выводы к главе 3.

Глава 4. Разработка АОС и электронного учебника по курсу "Разработка САПР".

4.1. Структура дисциплины.

4.2. Разработка глоссария и понятийной структуры курса.

4.3. Построение матриц логических и частотных связей дискретов связей и умений.

4.4.Технология обучения в мультиагентной АОС.

4.5. Алгоритм выставления оценки.

4.6. Испытание АОС в учебном процессе и анализ эффективности . 137 Выводы к главе 4.

Введение диссертации (часть автореферата) на тему «Автоматизация проектирования мультиагентных обучающих систем»

Актуальность. Развитие компьютерных технологий в образовании привело к появлению множества педагогических программных средств различного назначения: компьютерных обучающих систем, электронных учебных пособий, тестирующих программ и других средств контроля знаний, аппаратно-программных тренажеров и т.д. В ближайшее десятилетие многие ученые предсказывают революционные изменения в системе среднего и особенного высшего образования, связанные с развитием новых информационных технологий. В европейских странах к 2010 году ожидается создание единой структуры многоуровневого образования, включая традиционные формы обучения, дистанционные технологии, интернет-образование и др.

Глобальные тенденции компьютеризации образовательной среды заставляют пересмотреть сложившиеся подходы к созданию компьютерных средств обучения, которые в конечном итоге должны охватить все дисциплины всех предметных областей, унифицировать терминосистемы, модели, согласовать их по семантике и способам машинного представления и манипулирования знаниями. Создание качественных программно-аппаратных средств обучения является весьма трудоемким процессом, далеко не изученным в научном плане и не во всем поддержанным инструментальными средствами. Не многие преподаватели берутся за разработку автоматизированных обучающих систем (АОС) по читаемым ими курсам. И это объясняется не только сложностью и трудоемкостью получения электронной версии учебных материалов и технологии обучения, но и нерешенностью многих научно-методических вопросов, связанных с недостаточным уровнем качества электронного учебника, теста, обучающей системы, с субъективными их оценками и принимаемыми решениями. Объективное и адекватное описание процесса обучения и текущего состояния участвующих в нем субъектов при современном уровне педагогики, информатики и других предметных областей представляется чрезвычайно сложной проблемой. Накопленный за 40 с лишним лет опыт создания АОС позволил выявить тенденции их развития и выделить частично разрешимые в настоящий момент задачи, продвижение в решении которых поможет значимо повысить эффективность компьютерного обучения. Прежде всего, это проблемы унификации состава, структуры и функций АОС и электронных учебников, следующий круг задач включает разработку моделей, более адекватно описывающих процессы восприятия и усвоения смысловой информации обучаемыми, и, наконец, третий круг актуальных задач относится к автоматизации проектирования и реализации проектов АОС преподавателями учебных заведений.

Из этого обширного перечня проблем, при постановке темы диссертации, были выделены первоочередные задачи создания АОС, более эффективных, чем существующие, основанных на теории автоматизированного проектирования, моделях теоретической семиотики и системологии, прежде всего, это исследование и формализация процесса обучения, построение семиотических моделей АОС, электронного учебника (ЭУ), смысловых структур обучаемых и процессов передачи знаний, разработка типовых моделей САПР АОС и автоматизированной технологии проектирования АОС, ЭУ и процесса обучения.

Цель и задачи исследования. Основные цели диссертационной работы — создание теоретических моделей и практических программных и методических средств, которые позволят упростить и ускорить разработки АОС и электронных учебников, повысить их качество и эффективность функционирования в неоднородной образовательной среде. Для достижения этих целей необходимо решить следующие задачи:

1. Исследование и формализация основных особенностей обучающих систем и технологий как объектов автоматизированного проектирования.

2. Разработка типовых информационных и семиотических моделей объективированного описания процесса обучения.

3. Разработка алгоритмов и программных модулей учебно-исследовательской САПР АОС и видов обеспечения процессов проектирования технологий обучения.

4. Создание АОС и электронного учебника по курсу "Разработка САПР", опробование системы и оценка эффективности ее функционирования.

Методы исследования. В работе были использованы понятия и формальные модели теоретической информатики, системологии, методы семиотического моделирования, теории автоматизированного проектирования, теории информационных систем, теории графов, теории вероятностей и математической статистики.

На защиту выносятся:

- алгоритмы и программные модули учебно-исследовательской САПР мультиагентных обучающих систем и АРМ преподавателя;

- информационные и семиотические модели процесса обучения, электронного учебника, модели знаний и умений обучаемых;

- мультиагентная АОС и электронный учебник по курсу "Разработка САПР".

Научная новизна результатов заключается в следующем:

- используя формальный аппарат системологии и теоретической семиотики были построены модели передачи и освоения знаний, процедур образования кон-товой и дентовой, процедурной и декларативной, структурно-параметрической и функциональной семантик изучаемых дискретов знаний и умений;

- впервые предложены и реализованы алгоритмы декомпозиции учебного материала на основе анализа логических и частотных связей между дискретами знаний;

- предложена типовая структура АОС, обладающая полнотой и достаточной адекватностью традиционным технологиям обучения;

- мультиагентный режим функционирования АОС обеспечивает адаптацию процесса обучения при взаимодействии с обучаемым путем организации и анализа обратных связей и результатов тестирования.

Практическая значимость полученных результатов состоит:

- в реализации унифицированных методик проектирования обучающих систем и технологий;

- в ускорении их разработок;

- в повышении качества электронных учебников и обучающих систем;

- в реализации адаптированного режима обучения, учитывающего достигнутый уровень знаний обучаемых;

- в достижении более объективных результатов тестирования и оценок текущего рейтинга студентов.

Апробация работы. Основные научные результаты и результаты, полученные в диссертационной работе, докладывались и обсуждались на: Третьей международной научно-практической конференции "Computer Science and Information Technologies (CSIT' 2001)", Янгантау, (2001); Пятом научно-практическом семинаре "Новые информационные технологии", Москва (2002); Четвертом научно-практическом семинаре "Новые информационные технологии", Москва (2001); Международной молодежной научно-технической конференции "Интеллектуальные системы управления и обработки информации", Уфа (2001); Всероссийской молодежной научно-технической конференции "Информационные и кибернетические системы управления и их элементы", Уфа (1997); Международной научной конференции "Теоретическая информатика - 2000", Уфа (2000); Международной научной конференции "Моделирование, вычисления, проектирование в условиях неопределенности -2000", Уфа (2000); Республиканском научно-методическом совещании с международным участием "Образовательные программы и технологии подготовки кадров в области информатики и вычислительной техники в технических университетах", Уфа (2002).

Публикации. Основные результаты исследования по теме диссертации опубликованы в 10 работах - в том числе, в виде пяти докладов и пяти тезисов.

Структура работы. Диссертационная работа изложена на 151 страницах и включает в себя введение, четыре главы основного материала, заключение и библиографический список. Библиографический список включает 76 наименования.

Заключение диссертации по теме «Системы автоматизации проектирования (по отраслям)», Михтанюк, Алэна Александровна

Выводы к главе 4

1. Разработан электронного учебника и АОС дисциплины "Разработка САПР", который содержит: 1. Тексты теоретического, практического и методического материала. 2. Глоссарий: содержащий основные понятия и их определения в рамках данного курса. 3. Набор иллюстраций: содержащий графические схемы и изображения изучаемых в курсе объектов и процессов.

2. В соответствии с алгоритмом декомпозиции и теорией радиально-концентрического моделирования разработана структура электронного учебника структурированного на главы, параграфы, ДЗУ.

3. Разработано программное обеспечение представляющее собой совокупность типовых программных модулей: адаптивное тестирование, интерфейс, управление базой знаний, программный агент, база знаний и умений.

4. Глоссарий электронного учебника включает понятия и их определения соответствующие уровню сложности (Препедевтика (Р), Базис (S), Надстройка (N)). Подобная иерархия является необходимой для более успешного понимания данного курса, для разработки путей навигации по электронному учебнику и для разработки уровней сложности вопросов адаптивного тестирования.

5. Рассмотрена структурная схема мультиагентной АОС и основные режимы обучения, приведено описание адаптивного тестирования, разработан алгоритм адаптивного тестирования и математический аппарат выставления оценки. Рассмотрена схема выставления оценки обучаемому за компьютерный адаптивный тест с точки зрения теоретической информатики.

6. Проведен сравнительный анализ результатов тестирования между группами САПР-518 и САПР-419 факультета информатики и робототехники. Группа САПР-419 обучалась и тестировалась с помощью АОС по "Разработке САПР", а группа САПР-518 обучалась традиционным образом по этой же дисциплине, тестирование было письменным, но предлагалось ответить на те же вопросы, что и группе 419. Анализ показал, что студенты с интересом работают с АОС в индивидуальном темпе. Согласно результатам сравнения скорости обучения, скорость усвоения и освоения учебного материала с помощью АОС в среднем в 2-3 раза выше, чем при традиционном обучении. Сравнение результатов тестирования группы САПР-518 и САПР-419 показало, что средний арифметический уровень правильных ответов группы САПР-419 (Х73%)выше, чем уровень группы САПР-518 (267%), что с осторожным оптимизмом позволяет судить об эффективности обучения с помощью АОС "Разработка САПР".

7. Анализ позволил выявить наиболее распространенные ошибки, и случайные одинаковые варианты ответов, но самое главное он позволил оценить адекватность трехуровневого разбиения тестовых вопросов (Препедевтика, Базис, Надстройка). Были выделены вопросы, сложность которых оказалась ниже уровня сложности, к которому они относятся или разброс между экспертной и экспериментальной оценками был значительным. Эти вопросы были отбракованы и либо переведены на уровень ниже, либо ни удалены из базы знаний и умений. Адекватность результатов адаптивного тестирования проверялась на основе сравнения устного и адаптивного тестирования для одной группы, был выявлен процент (12%) расхождения между оценками тестирований, что является причиной дальнейшей доработки алгоритма адаптивного тестирования.

Заключение

В процессе выполнения работы получены следующие результаты и выводы:

1. На основе проведенного анализа существующих средств компьютерного обучения разработана концепция проектирования мультиагентных обучающих систем, электронных учебников и технологий обучения основанная на принципах и понятиях семиотического моделирования.

2. Разработаны принципы и алгоритмы декомпозиции учебного материала, формализации семантической информации в структурном, ролевом, семиотическом и проблемологическом базисах для взаимосвязанных дискретов знаний и умений, представленных семиомоделями в автоматизированных системах обучения и их проектирования.

3. Исследованы и выявлены основные особенности существующих и перспективных автоматизированных обучающих систем и технологий с позиции формализации процессов их проектирования и создания САПР АОС. Разработана типовая структура АОС и основных модулей, что позволит упростить и ускорить разработки АОС и электронных учебников, повысить их качество и эффективность функционирования.

4. Показана необходимость реализации мультиагентного режима функционирования АОС. В диссертации предложено и обосновано разделение программных агентов на педагогические, ситуационные и функциональные, которые обеспечивают реализацию гибкого интерфейса и адаптацию процесса обучения к индивидуальным особенностям обучаемых.

5. Разработаны обобщенные информационные и семиотические модели знаний и действий автоматизированной обучающей системы (АОС), обучаемых и модели их взаимодействия при передаче и освоении новых знаний, использующие базисы системологии, семиотики, проблемологии, в которых описываются основные виды семантик процесса обучения.

6. Разработаны типовая структурно-функциональная схема АОС, обладающая полнотой и достаточной адекватностью традиционным технологиям обучения, алгоритмы и программные модули учебно-исследовательской САПР мультиагентных обучающих систем и автоматизированное рабочее место преподавателя, основанные на преобразованиях типовой структуры АОС, семиотических моделей, результатов декомпозиции учебного материала и последующего тестирования обучаемых.

7. Используя САПР мультиагентных АОС разработана мультиагентная обучающая система по курсу "Разработка САПР", которая включает электронный учебник, интерактивный алгоритм декомпозиции исходных данных, модули адаптивного тестирования и вычисления текущего и итогового рейтинга обучаемых по данной дисциплине. Проведено опробование разработанной АОС и оценена эффективность ее функционирования.

Список литературы диссертационного исследования кандидат технических наук Михтанюк, Алэна Александровна, 2003 год

1. Агапова О.И., Кривошеев А.О., Ушаков А.С. О трех поколениях компьютерных технологий обучения // Информатика и образование. 1994, N 2. С. 34-40.

2. Андреев А.А. Введение в дистанционное обучение: Учебно-методическое пособие. М.: ВУ, 1997. 47 с.

3. Арзамасцев А.А., Китаевская Т.Ю. Повышение эффективности учебного процесса в вузе: экспериментальное исследование и имитационное моделирова-ние//Вестник Тамбов, ун-та. Сер."Естеств. и техн. науки". Т.5. Вып.1, 2000. -79 с.

4. Архангельский С.И. Учебный процесс в высшей школе, его закономерности, законы и методы. М.: Высшая школа, 1980. С. 21-24

5. Бадмаев Б.Ц. Психология и методика ускоренного обучения. М.: Владос,1998,-57 с.

6. Беспалько В.П. Программированное обучение (дидактические основы). М.: Высшая школа, 1970. - 203 с.

7. Беспалько В.П. Слагаемые педагогической технологии. М.: Педагогика, 1989.; Талызина Н.Ф. Теоретические основы разработки модели специалиста. М.: Знание, 1988.-34 с.

8. Беспалько В.П. Слагаемые педагогической технологии. М.: Педагогика, 1989.; Талызина Н.Ф. Управление процессом усвоения знаний.-М.: Изд-во МГУ, 1984.-87 с.

9. Виштынецкий Е. И., Кривошеев А. О. Вопросы применения информационных технологий в сфере образования и обучения // Информационные технологии. 1998, N 2. С. 32-36.

10. Гальперин П.Я. Введение в психологию. М.: МГУ, 1976. 45 с.

11. Гласс Дж., Стэнли Дж. Статистические методы в педагогике и психологии. -М.: Прогресс, 1976. 495 с.

12. Гребенюк В.А., Катасонов А.А. Учебный процесс и контроль знаний в системе виртуального образования //Дистанционное образование. -1999. №1. - С. 26 -34

13. Громов Г.Р. Персональные вычисления новый этап информационных технологий //Микропроцессорные средства и системы. М.: 1984. N 1. С.37-50.

14. Давыдов В.В. Об изменении содержания начального обучения. "Советская педагогика", 1964, N 4. С. 45-58.

15. Дворецкий С.И., Пучков Н.П., Таров В.П. Достижение нового качества образовательных технологий через использование информационных систем в исследовательском процессе вуза//Тезисы докладов Межвузовской научной конференции. М.: РХТУ, 2000. С. 23-25.

16. Демушкин А.С., Кириллов И.А., Сливина Н.А., Чубров Е.В., Кривошеев А.О., Фомин О.О. Компьютерные обучающие программы // Информатика и образование. 1995, N3. С. 15-22.

17. Евгеньев Г., Савинов А., Савинов К. Гиперзнания новая информационная технология в инженерном образовании. «Компьютер пресс», № 3, 1998. - 277 с.

18. Зверев Г.Н. Информационные основания чистой и прикладной математики. Труды международной конференции "Теоретическая информатика 2000: от теории к практике"/ Уфимск. гос. авиац. техн. ун-т. - Уфа, 2000. С.8 - 22.

19. Зверев Г.Н., Основания теоретической информатики. Разд. 1 9. - Уфа: УГАТУ, 1995 -99.

20. Информационные технологии в образовании/ Официальный каталог (9-12 ноября 1999 г.). М.: МИФИ, 1999. 78 с.

21. Кастро К., Альфтан Т. Компьютеры во внешкольном образовании //Перспективы: вопросы образования. М: Комиссия СССР по делам ЮНЕСКО, 1991, N2, с.59-71.

22. Каталог программных средств учебного назначения. М.: НИИВО, 1991. 66с.

23. Коваленко В.Е., Кольцова Н.Е., Лобанов Ю.И., Ремизова Е.А., Соловов А.В.

24. Базы знаний учебного назначения. (Новые информационные технологии в образовании: Обзор. инф./НИИВО; вып.2). М., 1992. 60с.

25. Колпащиков А.Г., Мрыкин С.Г., Соловов А.В. Тренажер по методам оптимизации подсистема учебной САПР ПРОСК. Куйбышев: Куйбыш. авиац. ин-т, 1985.- 30с.

26. Компьютерные технологии в высшем образовании // Ред. кол. Тихонов А.Н., Садовничий В.А. и др. М.: Изд-во Моск. ун-та., 1994. 87 с.

27. Компьютерные технологии в высшем образовании / Ред. кол. Тихонов А.Н., Садовничий В.А. и др. М.: Изд-во Моск. ун-та., 1995. 90 с.

28. Краудер Н.А. О различиях между линейным и разветвленным программированием /В сб. "Программированное обучение за рубежом". М.: Высшая школа, 1968. С.58 67.

29. Кривошеев А.О. Проблемы развития компьютерных обучающих программ // Высшее образование в России. 1994, N 3. С. 12-20.

30. Лобанов Ю.И., Брусиловский П.Л., Съедин В.В. Экспертно-обучающие системы. (Новые информационные технологии в образовании: Обзор. инф./НИИВО; вып.2). М.,1991. 56с.

31. Минаси М. Графический интерфейс пользователя: секреты проектирования: Пер. с англ. М.: Мир, 1996. 90 с.

32. Михтанюк А.А. Адаптивное тестирование с помощью компьютера и неклассические логики // Информационные и кибернетические системы управления и их элементы: тез. докл. Всерос. молодежи, науч.- техн. конф. Уфа: УГАТУ, 1997.-С.229.

33. Михтанюк А.А. Построение обучающих систем с использованием неклассических логик и семиотического моделирования // Моделирование, вычисления, проектирование в условиях неопределенности -2000: Междунар. науч. конф. Уфа: УГАТУ, 2000. -С.534-537.

34. Михтанюк А.А. Электронный учебник как основа создания дистанционного обучения //Теоретическая информатика 2000: Междунар. науч. конф. Уфа: УГАТУ, 2000. -С. 149-151.

35. Михтанюк А.А. Применение семантических моделей для построения муль-тиагентной обучающей системы // Интеллектуальные системы управления и обработки информации: тез.док. Междунар. молодежи, науч.-техн. конф. Уфа: УГАТУ, 2001.-С.72.

36. Михтанюк А.А. Построение семиотических моделей при разработке обучающих систем // Новые информационные технологии: Материалы четвертого науч.-практ. сем. Москва: Московский государственный технический университет им. Н.Э. Баумана, 2001. -С. 198-200.

37. Новиков В.А., Селиванов А. Д., Токарева B.C. Учебно-методическое обеспечение автоматизированных обучающих систем в зарубежных странах. (Средства обучения в высшей и средней специальной шк.: Обзор инф./НИИВШ; Вып.5). М., 1984. 48 с.

38. Обучающие машины и комплексы: Справочник / Под общей ред. А .Я. Савельева. Киев: Вища шк.,Головное изд-во. 1986. 303 с.

39. Под редакцией Гриценко В.Ю., Довгялло A.M., Савельева А.Я. Компьютерная технология обучения. Словарь-справочник. К: «Наукова думка» 1992. -109 с.

40. Полат Е.С. Дистанционное образование: организационный и педагогический аспекты // Информатика и образование. 1996. - №3. С. 87-91

41. Поспелов Г.С. Искусственный интеллект основа новой информационной технологии. - М.: Наука, 1988. - 47 с.

42. Растригин JI.A., Эренштейн М.Х. Адаптивное обучение с моделью обучаемого. Рига: Зинатне, 1988. 160 с.

43. Ретинская И.В., Шугрина М.В. Отечественные системы для создания компьютерных учебных курсов //Мир ПК, 1993, N7, С. 55-60.

44. Савельев А.Я., Новиков В.А., Лобанов Ю.И. Подготовка информации для автоматизированных обучающих систем. М.: Высш. шк., 1986. 176с.

45. Самарин Ю.А. Очерки психологии ума. М.: Изд во АПН РСФСР, 1962. - 56с.

46. Силич В.А. Декомпозиционные алгоритмы построения моделей сложных систем. Томск: изд-во Томского гос. ун-та, 1978. 208 с.

47. Системы автоматизированного проектирования и обучения: Межвуз. сб. науч. тр. Иваново: Иванов, ун-т,Иванов, энерг. ин-т, 1987. 156с.

48. Скиннер Б. Наука об учении и искусство обучения / В сб. "Программированное обучение за рубежом". М.: Высшая школа, 1968. С.32 46.

49. Сливина Н., Фомин С. Компьютерное учебное пособие «Высшая матема-тика для инженерных специальностей». «Компьютер пресс», № 8, 1997. 72 с.

50. Соловов А.В. Проектирование компьютерных систем учебного назначения: Учебное пособие. Самара: СГАУ, 1995. 138 с.

51. Суходольский Г.В. Основы психологической теории деятельности. Л.: Из-во Ленингр. ун-та. 1988. - 78 с.

52. Талызина Н.Ф. Управление процессом усвоения знаний. М.: МГУ, 1975. 145 с.

53. Тихонов А.Н., Иванников А.Д. Технологии дистационного обучения в России //Высшее образование в России. 1994, N3, С.3-10.

54. Управление современным образованием. Под ред. А.Н.Тихонова.-М.: изд-во «Вита-пресс»,1998. 90 с.

55. Филиппов Е.Н. Программная инженерия и педагогические программные средства. В сб. Системы и средства информатики. Вып.8.-М.: Наука. Физ-матлит, 1996. 67 с.

56. Христочевский С.А. Информатизация образования //Информатика и образование. 1994, N1, С.13-19.

57. Цевенков Ю.М., Семенова Е.Ю. Информатизация образования в США. (Новые информационные технологии в образовании: Обзор. инф./НИИВО; вып. 8). М., 1990. 80с.

58. Цевенков Ю.М., Семенова Е.Ю. Эффективность компьютерного обучения. (Новые информационные технологии в образовании: Обзор. инф./НИИВО; вып. 6). М., 1991. 84с.

59. Человеческий фактор. В 6 т. Т.З. Моделирование деятельности, профессиональное обучение и отбор операторов: Пер. с англ./Холдинг Д., Голдстейн Н., Эбертс Р. и др. (Часть 2. Профессиональное обучение и отбор операторов). М.: Мир, 1991.-302с.

60. Шапиро Э.Л. Компоненты знаний и их соотношения в сферах интеллектуальной деятельности //Вестник высш. шк., 1990, N11, С.26-31.

61. ЭВМ в учебном процессе вуза: Межвуз. сб. науч. тр./ Под ред. В.Н. Врагова.

62. Новосибирск: Новосиб. ун-т, 1987. 160 с.

63. Amadco A. Distance education without high costs//Learning and leading with technology, 1995, vol 22, №8. 105 c.

64. Aroyo, L & Kommers, P. " Preface Intelligent for Educational Computer-Aided Systems", in Journal of Interactive Learning Research, vol 10, no. 3Л 1999, pp. 235 - 243, AACE Charlottesville VA USA, 1999.

65. Bogley, W.A. et al. (1996). New pedagogies and tools for Web based calculus. WebNet'96, World Conference of the Web Society, AACE. 33-39.

66. Graham, C.R., & Trick, T.N. (1997). An innovative approach to asynchronous learning using Mallard: Application of Java applets in a freshman course. FIE'97, Frontiers in Education Conference, Stipes Publishing L.L.C. 238-244.

67. Graham, C.R., Swafford, M.L., & Brown, D.J. (1997). Mallard: A Java Enhanced Learning Environment. WebNet'97, World Conference of the WWW, Internet and Intranet, AACE. 634-636.

68. Lee, S.H., & Wang, C.J. (1997). Intelligent hypermedia learning system on the distributed environment. ED-MEDIA/ED-TELECOM'97 World Conference on Educational Multimedia/Hypermedia and World Conference on Educational Telecommunications, AACE. 625-630.

69. Mikhtanyuk A.A. The use of systemology, semantics, sensforics, problemology bases on modeling teaching system processes//Proceedings of 3-rd International Workshop on Computer Science and Information Technologies. Ufa, 2001.-V.2, P.195-197.