Программно-методические средства экспресс-диагностики и контроля функционального состояния человека тема диссертации и автореферата по ВАК РФ 05.13.11, кандидат технических наук Корниенко, Алексей Викторович

• Корниенко, Алексей Викторович
• кандидат технических наук
• 1999

Оглавление диссертации кандидат технических наук Корниенко, Алексей Викторович

СОДЕРЖАНИЕ

стр.

Введение

Глава 1. Принципы разработки компьютерных тестовых программ

1.1. Анализ подходов к проблеме диагностики состояния личности

1.2. Исследование проблем разработки и реализации компьютерных тестов

1.3. Построение модели операторской деятельности в системе человек-машина

1.4. Концепция адаптивных тестов

Глава 2. Формирование интерфейса информационных моделей тестовых процедур и механизмы их реализации

2.1. Ключевые понятия системы тестов. Единый интерфейс

2.2. Программная реализация теста "Реакция"

2.3. Тест "Быстрота и точность наведения" и его реализация

2.4. Программная реализация теста "Память"

2.5. Разработка теста "Слежение"

2.6. Тест "Переключение внимания" и его реализация

2.7. Реализация механизма адаптации в тесте "Сортировка"

2.8. Исследование влияния манипуляторных навыков

пользователя на результаты тестовых испытаний

Глава 3. Программная реализация системы "Экспресс-диагностика"

3.1. Основные принципы разработки диагностических тестовых комплексов

3.2. Состав и назначение системы "Экспресс-диагностика"

3.3. Программная реализация функций блока "Пользователь"

3.4. Программная реализация функций блока "Администратор"

3.5. Механизмы представления результатов тестирования

Глава 4. Программная реализация тестов для домашнего использования

4.1. Общая характеристика системы "Формула успеха"

4.2. Повышение выразительной мощности интерфейса тестовой процедуры

4.3. Добавление игровых ситуаций и возможностей

технологии мультимедиа

ЗАКЛЮЧЕНИЕ

СПИСОК ЛИТЕРАТУРЫ

ПРИЛОЖЕНИЕ 1

Введение диссертации (часть автореферата) на тему «Программно-методические средства экспресс-диагностики и контроля функционального состояния человека»

ВВЕДЕНИЕ.

Актуальность.

Информатика, как наука начинала свое развитие как прикладная инженерная дисциплина. Достаточно вспомнить времена, когда с информатикой у большинства людей ассоциировалось изучение либо языков программирования и основ математической логики, либо выполнение расчетов пропускной способности информационных коммуникаций. Лишь постепенно стало приходить понимание, что информатика имеет ранг метанауки. Развитие современной картины мира уже формирует новое мировоззрение, когда осознается сущность информационных процессов в их неразрывной связи с энергией и материей не только на уровне генетики, но и в глобальном космологическом плане. Даже исследования в таких областях, как социология и психология (теории восприятия и деятельности) уже немыслимы без новой информационной парадигмы. Таким образом, уже сам человек попадает в область интересов информатики. Современные достижения эргономических исследований, а также человеко-машинного взаимодействия уже попали в зону воздействия информатики. Поэтому исследования и разработки новых методов и технологий тестирования, построенные на парадигме человеко-машинных систем, уже приносят существенные результаты.

Компьютерные и информационные технологии в своем распространении находят применение в самых различных сферах человеческой деятельности. Они уже активно используются в таких областях, как диагностика, тестирование, тренировка и развитие личности, определение и контроль функционального состояния, определение мобилизационной способности в критических ситуациях и т.п. Преимущества использования информационных технологий для задач тестирования человека очевидны. Появляются новые возможности развития лично-

сти, быстрой обработки большого числа данных, автоматизируется процесс получения результата, предоставляется возможность изучения огромного количества взаимосвязанных параметров.

Уже сейчас компьютерные и информационные технологии активно используются в процессах тестирования. Известно множество примеров тестовых компьютерных программ. К сожалению, практически все они являются переводом в компьютерную форму известных "бумажных" тестов. В качестве примера можно привести тесты-опросники типа ММР1, тестовая процедура Айзенка на коэффициент интеллекта цветовой тест Люшера и много других

"традиционных" тестовых методик.

Главным недостатком большинства реализованных в настоящее время компьютерных тестов является то, что они не учитывают возросшие потребности к системам компьютерной диагностики. Перечислим недостатки существующих тестовых программ:

• отсутствует возможность оперативно отслеживать состояние человека, что может быть важным при диагностике представителей профессий связанных с риском или большой ответственностью, например летчиков, диспетчеров атомных станций и так далее;

• объективность многих тестов, прежде всего построенных по принципу анкетирования, вызывает сильное сомнение, более того существует специальная литература [50], позволяющая при желании "обмануть" даже очень хитрые тесты;

• не существует полноценной инструментальной среды для специалистов в области тестирования.

(

Отдельные решения проблемы получения достоверных результатов в компьютерных диагностических программах были предложены в работе [55]. Однако они не учитывают принципиального различия сис-

темы "человек - компьютер" от ограниченного подхода, отталкивающегося от модели "человек - внешняя среда".

Тестовые методики предложенные в работе [56] при переводе на компьютерную основу также не преодолели "барьера" традиционного мышления. Здесь мы также видим желание втиснуть традиционные методы в компьютерные программы, не обращая внимания на то, что компьютерный интерфейс уже сам по себе является серьезной тестовой процедурой. А это в тестах с моделируемой экспериментальной ситуацией приводит в основном к непреодолимым сложностям в интерпретации результатов.

Попытки создания объективных компьютерных тестов, предназначенных для оценки функционального состояния человека, предпринимались давно. Такие попытки, например, были предприняты в конце 80-х годов группой российских ученых (математиков и психологов) под руководством Шмелева А.Г. в МГУ им. М.В.Ломоносова. Замысел состоял в том, чтобы взять за основу тестового испытания известную компьютерную игру "Тетрис". Главная проблема, которую тогда так и не удалось разрешить, состояла в том, что не было построено правильной информационной модели операторской деятельности в системе "человек-машина". Тогда акценты в поставленной задаче были выставлены не совсем верно (сложность моделируемой ситуации и ритмика операторской деятельности).

Система компьютерного тестирования комплекса "Медилаб" [63], разрабатываемая для орбитальных станций, позволяла проводить диагностику функционального состояния человека в определенных пределах. Однако время тестирования составляло порядка 30-40 минут, что приводило к сильному утомлению испытуемых и давало крайне низкую точность.

Программный комплекс, описанный в работе [57], предназначен для проведения тестовых испытаний в коллективах, однако сфера его применения сильно ограничена. Во-первых, тесты, составляющие ядро комплекса, не подходят для постоянного использования, так как при тестировании чаще чем раз в год результаты не будут достоверными. Во-вторых, в процессе тестирования необходимо участие профессионального психолога. В третьих, тесты не предназначены для оценки функционального состояния человека.

Как уже было отмечено, большинство систем компьютерного тестирования являются лишь программной реализацией готовых тестов-опросников. В качестве примеров можно привести систему "Брэйншторм" - тест на коэффициент интеллекта Айзенка и систему "Познай себя" - сборник небольших тестов на различные темы.

Интересную разработку представил информационно-психологический центр "Tabula Rasa". Созданная по оригинальной методике система "Антистресс" позволяет оценивать текущее состояние человека, однако результат дается в виде общих рекомендаций философского характера.

Таким образом, ни одна из разработок не предлагает решения задачи оперативной оценки функционального состояния человека. Также отсутствует полноценная инструментальная среда для проведения регулярных испытаний в коллективах.

Этим определяется актуальность проблемы разработки программно-методических средств экспресс-диагностики и контроля функционального состояния человека. В работе рассматривается тестовый комплекс, основу которого составляют тесты с контролируемой экспериментальной ситуацией моделируемой на компьютере. Одновременно тесты выполняют роль игроподобных тренажеров, позволяющих развивать и тренировать полезные способности и навыки. Данный ком-

плекс является хорошим инструментом для социологов и психологов при проведении индивидуального и группового тестирования.

Цель и задачи исследования.

Целью работы является разработка программно-методических средств экспресс-диагностики и контроля функционального состояния человека, включающая в себя разработку системы компьютерных тестов и программного администратора данной системы.

Для достижения поставленной цели решаются следующие задачи:

• разработка архитектуры системы "Экспресс-диагностика";

• разработка концепции системы адаптивных тестов;

• разработка информационных моделей тестовых процедур;

• разработка алгоритмов адаптации тестов к уровню возможностей испытуемого;

• программная реализация системы тестов;

• программная реализация функций администратора системы;

• создание компьютерной системы "Формула успеха".

Научная новизна работы.

• Разработана архитектура и осуществлена программная реализация системы компьютерной экспресс-диагностики, которая является комплексным решением проблем управления тестовыми процедурами, сбора, обработки и хранения тестовой информации, а также структурированного представления результатов тестирования для проведения анализа данных.

• Для оценки качества результатов испытуемых в методике определения отклонений от личных норм предложено использовать процедуру пошаговой перекалибровки личных норм, что позволило добиться отстройки от манипуляторных навыков испытуемого и определять профили функционального состояния испытуемого.

• Разработаны алгоритмы адаптации уровня сложности тестовых процедур к уровню возможностей испытуемого.

Практическая ценность работы заключается в том, что разработанные программные средства позволяют:

• повысить эффективность процесса компьютерной диагностики для индивидуальных и коллективных тестовых испытаний с целью выявить лучших по выделенным показателям;

• за короткое время проводить диагностику специалистов профессий связанных с риском или большой ответственностью;

• повысить эффективность учебного процесса при подготовке социологов и психологов;

• компьютерная система "Формула успеха" дает возможность проводить тестирование в домашних условиях без привлечения специалиста-психолога.

Краткое содержание работы.

Диссертация состоит из введения, четырех глав,- заключения, списка литературы и приложения.

Во введении дается общая характеристика работы: обосновывается ее актуальность, научное значение и практическая ценность.

В первой главе дается анализ подходов к проблеме диагностики состояния личности. Рассматривается задача тестирования с помощью компьютера. Проводится исследование проблем, возникающих при разработке и реализации систем компьютерного тестирования. Дается классификация диагностических программ с точки зрения реализации. Рассматривается концепция адаптивных тестов. Для понимания процессов происходящих при общении испытуемого с компьютерной программой разрабатывается модель операторской деятельности в системе

"человек-машина". Вводятся такие понятия как диполь внимания, эталон, стимул.

Во второй главе вводятся ключевые понятия тестов: испытание, сериал, текущий результат, индивидуальная норма, база и другие. Описывается единый интерфейс тестов: управление, -прохождение испытаний, графическое представление результатов, информационный блок. Рассматривается шесть тестов: "Реакция", "Быстрота и точность наведения", "Память", "Слежение", "Переключение внимания" и "Сортировка". Для каждого из них дается описание информационной модели тестовой процедуры, исследуются особенности программной реализации. Предлагаются механизмы адаптации тестов к возможностям испытуемых. Это достигается согласованием уровня сложности программы и уровня возможностей испытуемого. Проводится исследование влияния манипуляторных навыков пользователя на результаты тестовых испытаний.

Третья глава посвящена описанию механизмов разработки и реализации компьютерного тестового комплекса "Экспресс-диагностика". Прежде всего рассматриваются основные подходы к проблеме разработки подобных комплексов. Исследуются общие требования к составу и функциональному наполнению программного средства, призванного решать задачи компьютерного тестирования. Функциональное наполнение должно включать в себя: средства по организации процесса тестирования, механизмы защиты программ и данных, средства представления результатов. Затем дается описание архитектуры системы "Экспресс-диагностика". Подробно описаны функции пользовательского интерфейса системы, а также функции предназначенные для администратора комплекса. Предлагаются механизмы представления результатов тестирования.

В четвертой главе предлагается концепция программной реализации тестов для домашнего использования. Дается общая характеристика системы "Формула успеха". Рассматриваются методы повышения выразительной мощности тестовой процедуры. Исследуются возможности добавления игровых ситуаций и технологий мультимедиа в состав тестовой программы.

В заключении перечисляются основные результаты работы.

На защиту выносятся :

• архитектура и программная реализация диагностического тестового комплекса "Экспресс-диагностика";

• информационные модели тестовых процедур, их разработка и программная реализация;

• алгоритмы адаптации уровня сложности тестовых процедур к уровню возможностей испытуемого.

Заключение диссертации по теме «Математическое и программное обеспечение вычислительных машин, комплексов и компьютерных сетей», Корниенко, Алексей Викторович

ЗАКЛЮЧЕНИЕ

В заключении перечислим основные результаты диссертационной работы:

1. Проведено исследование принципов разработки и реализации компьютерных программ диагностики человека. Описаны основные подходы к тестированию, выделяется способ получения результатов на основе объективных тестов с контролируемой экспериментальной ситуацией, моделируемой на компьютере.

2. Разработана архитектура компьютерной системы "Экспресс-диагностика", которая является комплексным решением проблем управления тестовыми процедурами, сбора, обработки и хранения тестовой информации, а также структурированного представления результатов тестирования для проведения анализа данных.

3. Разработана концепция системы адаптивных тестов. Основу данной концепции составляет подход, при котором система "человек-машина" рассматривается как единое целое. По результатам тестирования строится специальный интегральный вектор, дающий качественную оценку текущего функционального состояния человека.

4. Для оценки качества результатов испытуемых в методике определения отклонений от личных норм предложено использовать процедуру пошаговой перекалибровки личных норм, что позволило добиться отстройки от манипуляторных навыков испытуемого и определять профили функционального состояния испытуемого.

5. Разработаны информационные модели тестовых процедур. Обозначены ключевые понятия тестов: испытание, сериал, текущий результат, индивидуальная норма, база. Выполнено построение моделируемых ситуаций, позволяющее проводить оценку функционального состояния человека по основным базовым характеристикам.

6. Разработаны алгоритмы адаптации уровня сложности тестов к уровню возможностей испытуемого. Данные алгоритмы предназначены для повышения эффективности тестовых испытаний. Основные функции, которые они выполняют: коррекция уровня сложности тестовой процедуры в зависимости от уровня возможностей испытуемого, настройка первого испытания, информационная поддержка испытуемого во время тестирования.

7. Разработаны общие требования к проектированию диагностических комплексов. Показано, что функциональное наполнение должно включать в себя: средства по организации процесса тестирования, механизмы защиты программ и данных, средства представления результатов.

8. Осуществлена программная реализация системы тестов. Предложенная система состоит из шести тестов: "Реакция", "Быстрота и точность наведения", "Память", "Слежение", "Переключение внимания" и "Сортировка". В каждом тесте создаются специальные микроситуации, способствующие проявлению основных свойств личности - базовых характеристик. Результаты тестирования выдаются в реальном времени.

9. Выполнена программная реализация функций администратора комплекса "Экспресс-диагностика". Блок "Администратор" предназначен для лица, ответственного за проведение тестовых испытаний в коллективах. Он предоставляет широкий спектр услуг по сбору, сопровождению, анализу и отображению тестовой информации.

10. Разработана и реализована компьютерная система "Формула успеха", которая позволяет проводить тестирование в домашних условиях без привлечения специалиста-психолога.

Список литературы диссертационного исследования кандидат технических наук Корниенко, Алексей Викторович, 1999 год

СПИСОК ЛИТЕРАТУРЫ

1. Брябрин В.М. Программное обеспечение персональных ЭВМ. - М.: Наука, 1990.

2. Персональные ЭВМ в инженерной практике: Справочник / Т.Э.Кренкель, А.Г.Коган, А.М.Тараторин. - М.: Радио и связь, 1989.

3. Персональные компьютеры. Информатика для всех. - М.: Наука, 1987.

4. Королев JI.H. Микропроцессоры и персональные компьютеры.- М.: Знание, 1986.

5. Корнилова Т.В., Тихомиров O.K. Принятие интеллектуальных решений в диалоге с компьютером. - М.: Изд-во МГУ, 1990.

6. Игры, в которые играют люди... - М.: Знание, 1988.

7. Компьютерные игры. Обучение и психологическая разгрузка. - М.: Знание, 1988.

8. Тихомиров O.K. Лысенко Е.Е. Психология компьютерной игры // Новые методы и средства обучения. М.: 1988.

9. Вербицкий A.A. Игровые формы контекстного общения. - М.: Знание, 1983.

10. Гутке Ю., Волраб У. Диагностические программы как вариант тестов обучаемости. // Психодиагностика: теория и практика. М, 1986.

11. Гнездилова Г.Г., Чижов A.A. Управление окнами и меню на персональной ЭВМ. - М.: Вычислительный Центр АН СССР, 1986.

12. Иванов Г.Н. Дружелюбный компьютер //"Вычислительная техника и ее применение", 1989, N 3. - с. 3 - 37.

13. Лукьянов Б.В., Панфилов A.C., Юрин Д.В. Нужную информацию в нужное время //"Вычислительная техника и ее применение", 1990, N 7. - с. 3 - 28.

14. Коутс Р., Влейминк И. Интерфейс "человек-компьютер". - М., Мир, 1990.

15. Любимский Э.З., Мартынюк В.В., Трифонов Н.П. Программирование. - М.: Наука, 1980.

16. Мячев A.A., Степанов В.Н. Персональные ЭВМ и микро ЭВМ. Основы организации: Справочник/Под ред. A.A. Мячева - М.: Радио и связь, 1991.

17. Юнг К. Психологические типы. Пер. с нем. С.-Петербург "Ювента", М.:Изд. группа "Прогресс-Универс", 1995.

18. Фрид Дж. Построение вычислительных систем на базе перспективных микропроцессоров. - М.: Мир, 1990.

19. Уэйт М., Прата С., Мартин Д. Язык Си. - М.: Мир, 1988.

20. Гибсон Джеймс Дж., Экологический подход к зрительному восприятию. - М.: Прогресс, 1988.

21. Ф.Блум, А.Лейзерсон, Л.Хофстедер, Мозг, разум и поведение. - М.: Мир, 1988.

22. Рыжов В.А. Интерпретатор схем диалога для IBM РС/ХТ/АТ. Препринт ВЦ АН СССР, М., 1988.

23. Рыжов В.А., Трофимов C.B., Корниенко A.B. Методы динамической адаптации обучающих и тестовых систем. - М., РОСЦИО, 1992.

24. Рыжов В.А., Трофимов C.B., Корниенко A.B. Игровые обучающие принципы и их использование в технологии обучения на базе компьютерных систем. - М., РОСЦИО, 1992.

25. Рыжов В.А., Трофимов C.B., Корниенко A.B. Состав и общие требования к компьютерным обучающим комплексам, базирующимся на средствах мультимедиа (проблема синхронизации процессов). -М., РОСЦИО, 1992.

26. Рыжов В.А., Трофимов C.B., Корниенко A.B. Обучающая игровая программа "Звезда Полынь" (поведение детей в зоне радиоактивного заражения). - М.: ИНИНФО, 1993.

27. Рыжов В.А., Трофимов C.B., Корниенко A.B. Технология разработки обучающих игровых программ (Мультипликация, графика). - М-ИНИНФО, 1993.

28. Рыжов В.А., Трофимов C.B., Корниенко A.B. Технология разработки обучающих игровых программ (Использование музыки, звуковых эффектов. Аудиоплаты для персональных компьютеров). - М.: ИНИНФО, 1993.

29. Рыжов В.А. Проблема представления знаний, информации и данных в обучающих и развивающих системах. В сборнике: Информатика, образование, методология. - М.,ИНИНФО,1993.

30. Рыжов.В.А. Классификация образовательных программ и систем. -М.,ИНИНФО, 1994. .

31. Рыжов В.А., Трофимов C.B., Корниенко A.B. Принципы контроля функционального состояния обучаемого (технология разработки обучающих и игровых программ) - М.,ИНИНФО, 1994.

32. Рыжов В.А., Корниенко A.B. Методы динамической адаптации игровых и обучающих систем. Российская конференция "Технология мультимедиа в образовании" 2-4 ноября 1994 года, Ижевск.

33. Рыжов В. А., Трофимов C.B., Корниенко A.B., Миля ев В.И. Модель операторской деятельности в системе "человек-машина". Экспресс-диагностика и контроль функционального состояния человека. -М.,ИНИНФО, 1995.

34. Рыжов В.А., Теплицкий В.К., Корниенко A.B. Композиция изображений и принципы предъявления знаний. - М.: ИНИНФО, 1995.

35. Рыжов В.А., Корниенко A.B. Использование игровых принципов в обучающих системах и программах. Игровой момент. - М.: ИНИНФО, 1995.

36. Рыжов В.А. Экология сознания личности и проблема защиты индивидуального сознания в инфо-инфраструктуре общества. - М.: ИНИНФО, 1996.

37. Рыжов В.А., Корниенко A.B., Миляев В.И. Технология "Интерактивное видео" для повышения выразительной мощности дидактического материала в системах ММ и BP. - М.: ИНИНФО, 1996.

38. В.А.Рыжов, А.В.Корниенко. Создание эргономичных средств управления и психологически-комфортных композиций экранных изображений в среде виртуальной реальности. - М.: ИНИНФО, 1996.

39. Н.Н.Большаков, В.А.Рыжов. Новый подход к проблеме создания коллектива и поддержания его высокой работоспособности (система управления организованными коллективами на основе базовых характеристик личности) // Международный сотовый банковский справочник "Банки. Новосибирск, Москва, Киев...", N.5, 1996.

40. Рыжов В.А., Корниенко A.B., Демидович Д.В. Концепция диполя в модели операторской деятельности. - М.: ИНИНФО, 1997.

41. Корниенко A.B. Принципы построения системы "Экспресс-диагностика" и перспективы ее использования в учебном процессе. Научно-методический журнал "Педагогическая информатика". - М., ИНИНФО, №4, 1998.

42. Корнилова Т.В., Тихомиров O.K. Принятие интеллектуальных решений в диалоге с компьютером. - М.: Изд-во МГУ, 1990.

43. Рихтер Дж. Windows для профессионалов: Программирование для Windows 95 и Windows NT 4 на базе Win32 API/Пер. с англ. - М.: Из-

дательский отдел "Русская Редакция" ТОО "Channel Trading Ltd.", 1997.

44. Бемер С. MS Access 2.0: Пер. с нем. - СПб.: BHV - Санкт-Петербург, 1995.

45. Гаврилова Т.А., Зудилова Е.В. Концептуальное проектирование интерфейсов для систем приобретения знаний. Известия РАН. Техническая кибернетика. М.: Наука, N2, 1994, 3-12.

46. Гаврилова Т.А., Зудилова Е.В., Ильясов М.З. Интеллектуальные и обучающие системы. Учеб. пособие, СПб ГТУ, 1994.

47. Анастази А. Психологическое тестирование. T.l. М., 1982, с.96-162.

48. Столин В.В., Шмелев А.Г. Практикум по психодиагностике (Дифференциальная психометрика) М., 1987.

49. Уотерман Д. Руководство по экспертным системам. - М.: Мир, 1989.

50. Зиверт X. Тестирование личности: Пер. с нем. - М.: АО "Интерэксперт", 1997

51. Зиверт X. Ваш коэффициент интеллекта. Тесты: Пер. с нем. - М.: АО "Интерэксперт", 1997

52. Шмелев А.Г. Психодиагностика черт (тестовые опросники и субъективное шкалирование) // Общая психодиагностика под ред. А.А.Бодалева, В.В.Столина, М., МГУ, 1987.

53. Денинг В., Эссинг Г., Маас С. Диалоговые системы "человек-ЭВМ". Адаптация к требованиям пользователя: Пер. с англ. - М.: Мир, 1984.

54. Липаев В.В. Качество программного обеспечения. - М.: Финансы и статистика, 1986.

55. В.А.Дюк. Компьютерная психодиагностика. - Санкт-Петербург.: "Братство", 1994.

56. В.М.Мельников. Введение в экспериментальную психологию личности. -М.: Просвещение, 1985.

57. Нарушев Е.С. Разработка и применение средств проектирования и реализации экспертных систем психодиагностики: Дис. канд. теХн. наук: 05.13.11.М., 1996.

58. Человеческий фактор. Сб., под редакцией Г.Салвенди, в 6-ти томах.- М. Мир, 1991. (Handbook of Human Factors, Edited by Gavriel Salvendy, Purdue University, A Wiley-Interscience Publication, John Wiley & Sons; New York, Chichester, Brisbane, Toronto, Singapore).

59. Jones M.V. Video games as psychological tests // Simulation and Games. 1984. V.15,N2.

60. Vladmir Ryshov, Sergey Trofimov. The tWEEt manipulator, combinat-ing "Precision" of a mouse and "Rate" of a joystick in the same device, and manipulators functional quality evaluation in connection with human factor and vice versa., EWHCI'94. The 1994 East-West International Conference on Human-Computer Interaction. August 2-6, Saint Petersburg, Russia.

61. Vladimir Ryshov, Nikolay Bolshakov. Management of collective by means of computer system "THE EXPRESS-DIAGNOSTICS". EWHCI'96. The 1996 East-West International Conference on HumanComputer Interaction. August 12-16, Moscow, Russia.

62. Vladimir Ryshov, Alexey Kornienko. Is the TWEEt-method precursor of future interfaces? (keyboardless work with symbolical information). EWHCI'96. The 1996 East-West International Conference on HumanComputer Interaction. August 12-16, Moscow, Russia.

63. Ryshov V.A. & others. Computer Games - Perspective Means of Operator's Work Capability Estimation. Pr. Institute for Biomedical Problems, USSR, M., 1990.