Методы построения квалиметрических оценок в задачах управления качеством обучения персонала АЭС тема диссертации и автореферата по ВАК РФ 05.13.10, кандидат технических наук Лященко, Сергей Александрович

• Лященко, Сергей Александрович
• кандидат технических наук
• 2004

Оглавление диссертации кандидат технических наук Лященко, Сергей Александрович

ВВЕДЕНИЕ.

ГЛАВА I. АНАЛИЗ ПОДХОДОВ В СИСТЕМАХ ОБЕСПЕЧЕНИЯ КАЧЕСТВА ПОДГОТОВКИ СПЕЦИАЛИСТОВ АЭС И ПУТИ ИХ

РЕАЛИЗАЦИИ.

§ 1. Система обеспечения качества АЭС.

§2.Схема формирования и характеристики основных этапов программы подготовки специалистов для АЭС.

§3. Цели и задачи исследования.

ГЛАВА II. МЕТОДОЛОГИЯ ОЦЕНИВАНИЯ

КАЧЕСТВА ПОДГОТОВКИ ПЕРСОНАЛА АЭС.

§1.Комплексное оценивание в системе обеспечения качества.

§2. Структура и основные процедуры оценивания при обучении персонала АЭС.

2.1 Обзор этапа «оценка».

2.2 . Внутренняя оценка.

2.2.1. Данные опыта эксплуатации АЭС.

2.2.2.Данные опыта эксплуатации отрасли.

2.2.3. Отчеты об инспекциях и оценках.

2.2.4. Изменения в процедурах.

2.2.5 Данные от руководителей АЭС.

2.2.6. Данные от работников АЭС.

2.2.7. Данные от инструкторов.

2.2.8 Данные от обучаемых.

2.2.9 Данные наблюдений.

2.3. Внешняя оценка.

2.4. Обратная связь от результатов оценки.

2.5. Назначение этапа «оценка» подготовки.

2.6. Стратегия оценки.

2.7. Четырехуровневая модель оценки результатов обучения.

2.7.1 Оценка удовлетворенности обучаемых.

2.7.2.Педагогическая оценка.

2.7.3. Оценка переноса.

2.7.4. Оценка последствий.

Выводы.

ГЛАВА III МЕТОДЫ ФОРМИРОВАНИЯ ОЦЕНОК КАЧЕСТВА

ДЛЯ НЕЗАВИСИМЫХ РЕСУРСОВ.

§1. Оценки качества и построение квалитативных функций.

1.1 .Измерение качества и трудность.

1.2. Квалитативная функция.

1.3 .Восстановление вида квалитативной функции.

§2.Оценка требований к качествам ресурсов и ее использование для тестирования

2.1. Требования к качествам ресурсов.

2.2.Перевод непрерывных оценок в универсальные баллы.

2.3.Практическое использование методов перевода оценок

Реализация разработанных методов.

§3 Дискретные оценки качества.

3.1. Проблемы агрегирования и дезагрегирования.

Выводы.

ГЛАВА IV ИЕРАРХИЧЕСКИЕ ОЦЕНКИ КАЧЕСТВА ОБУЧЕНИЯ И ТЕСТИРОВАНИЯ ДЛЯ ВЗАИМОСВЯЗАННЫХ

РЕСУРСОВ.

§ 1. Восстановление иерархической структуры бинарного дерева.

§2 Метод ветвей и границ для анализа бинарных иерархических деревьев в задаче оценки структуры обучения.

Выводы.

Введение диссертации (часть автореферата) на тему «Методы построения квалиметрических оценок в задачах управления качеством обучения персонала АЭС»

Актуальность темы исследования

В условиях комплексной динамической трансформации всей экономики России, отразившейся, в первую очередь на ее энергетической системе, составной и важнейшей частью которой является атомная энергетика, возникает объективная необходимость в исследовании и осмыслении новых подходов к организации управления. Повышение эффективности управления напрямую связано с определением стратегических приоритетов и формированием действенных механизмов.

Все основные усилия мировой атомной энергетики в последние десятилетия были сосредоточены на проблеме качества для безопасности. Они координировались и поддерживались МАГАТЭ с тем, чтобы самый высокий уровень стандартов качества стал нормой на всех стадиях эксплуатации АЭС от проектирования до заключительной стадии. При распространении такого опыта стало ясно, что главным лимитирующим фактором безопасности является персонал объекта.

Именно поэтому создание и эксплуатация системы обеспечения качества подготовки специалистов, работающих на АЭС, является чрезвычайно актуальной задачей.

Диссертационное исследование выполнено в рамках НИР ГБ 01.04 «Интеллектуализация принятия решений в автоматизированных и информационных системах» в соответствие с одним из основных научных направлений Воронежского государственного технического университета «Проблемно-ориентированные системы управления».

Общим проблемам управления качеством посвящены многочисленные работы российских и зарубежных авторов: [1-18], [120-132] Проблемам качества и оценкам, возникающим в задачах обучения, посвящены исследования [19-39]. Сравнительно небольшая группа ученых рассматривала специфические эффекты анализа качества в атомной энергетике. Здесь следует упомянуть работы и важнейшие нормативные документы [40-43], [44-57].

Также следует отметить публикации, посвященные квалиметрическому анализу целевых систем и проблемам согласования оценок качества [68-74]. Практически все авторы сходятся во мнении, что для повышения эффективности управления необходима разработка системы четких целей (прежде всего - долгосрочных), позволяющих сконцентрировать усилия на ключевые направления развития.

Большая часть исследователей отмечает наличие противоречий между целями, невозможность сопоставления их между собой, отсутствие единой методологии измерения отдельных качественных характеристик и способов их комплектования.

Все это определяет необходимость проведения исследований, направленных на разработку моделей и методов оценки, согласования и объединения качественных характеристик в процессе создания и эксплуатации системы качества.

Цель исследования заключается в разработке и построении системы квалиметрических оценок в задачах управления качеством, позволивших обеспечить набор требований при обучении персонала.

Задачи исследования. Для достижения поставленной цели в работе цели решаются следующие задачи:

- на основании изучения целей функционирования АЭС разработать методы формирования иерархической структуры системы обеспечения качества подготовки специалистов;

- исследовать процессы управления системой обеспечения подготовки специалистов с помощью разбиения на локальные подсистемы, каждой из которой должна соответствовать система оценок качества;

- разработать методику построения и использования локальных и обобщенных оценок качества, пригодную для анализа различных подсистем, входящих в комплексную систему обеспечения качества;

- провести исследования метода агрегирования и сопоставления качественных оценок различного типа.

Объектом исследования выступает комплексная программа обеспечения качества при предоставлении услуг по обучению персонала АЭС.

Предметом исследования являются формирование и использование оценок качества и анализ их роли в управлении процессом достижения целей для системы обеспечения качества подготовки специалистов для АЭС.

Методы исследования. Для решения поставленных задач использовались основные положения теории систем, теории линейной и нелинейной оптимизации, методы классификации, методы анализа экспертной информации, математической статистики, теории графов и теории управления.

Научная новизна. На защиту выносятся следующие положения, характеризующие научную новизну:

- методический подход к созданию единой документированной системы обеспечения качества подготовки персонала АЭС, удовлетворяющий требованиям международных стандартов к системам качества, позволяющий рационально и обоснованно осуществлять выбор оптимальных решений на основе моделирования процессов по этапам жизненного цикла системы;

- метод построения программы представления услуг по обучению персонала АЭС, отличающийся использованием единой системы элементов каждого уровня, применением стандартизированной схемы перехода между уровнями и многокритериальным выбором оптимальных вариантов;

- истема измерения качества подготовки персонала АЭС, включающая измерение качества ресурсов, измерение качества процесса оценивания обучаемых и измерения качества технологических и административных процессов;

- методы и программы, позволившие впервые осуществить расчет квалитативных функций как аналогов производственных функций для оценок качества в случае независимых ресурсов и на их основе построить модель, дающую возможность оценивать требования к качеству ресурсов по требованию к результату функционирования системы;

- метод построения комплексных оценок качества для дискретных зависимых показателей. Решена обратная задача теории иерархических систем - по комплексной оценке бинарного дерева восстанавливается его структура.

Практическая значимость работы состоит в конструировании системы оценки качеств и способов их комплексирования и сопоставления. Предложенная система и механизмы ее реализации могут быть теоретической базой разработки систем обеспечения качества не только в атомной энергетике. Они могут лечь в основу алгоритмов получения оценок степени достижения целей и их согласования при разработке и управлении реализацией целевых комплексных программ в образовании, промышленности, науке и медицине.

Материалы диссертации используются при разработке учебных курсов специальностей 220100 - «Вычислительные машины, комплексы, системы и сети», 062000 - «Управление персоналом».

Рекомендации, сформулированные в ходе исследования, внедрены при разработке «Программы обеспечения качества при представлении услуг по обучению персонала АЭС» и использованы при обучении российских и иностранных специалистов.

Апробация работы. Основные положения и выводы, а также прикладные результаты докладывались и обсуждались на следующих конференциях, симпозиумах, совещаниях, научных сессиях: Международном симпозиуме «Надежность и качество 2001», Пенза, 2001 г.; Международной конференции «Проблемы интеллектуализации образования», Воронеж - Москва, 2002 г.; Всесоюзном научно-техническом совещании «Вопросы создания системы подготовки эксплуатационного персонала АЭС», Москва, 1989 г.; Международном совещании «Процедуры внедрения системного подхода к обучению персонала АЭС», проведенных совместно с концерном Росэнергоатом МАЭРФ и Госкоматомом Украины, Нововоронеж, 2001 г.; научных сессиях Московского государственного инженерно-физического института в 2002 и 2003 годах.

Публикация результатов работы. По теме диссертации опубликовано 14 печатных работ. В работах, опубликованных в соавторстве и приведенных в конце автореферата, лично автору принадлежит в [1, 2, 7, 8, 10, 11] - определение и анализ процедур управления качеством на каждом этапе жизненного цикла, общие базисные принципы построения информационной системы управления качеством и способы ее оценивания; в [3, 13, 14] - модель оценки требований к качеству входных ресурсов и реализация методов восстановления квалитативных функций по экспериментальным данным; в [4, 6, 9]- оценка качества подготовки технического персонала.

Структура и объем работы. Диссертация состоит из введения, четырех глав, заключения, списка литературы из 132 наименований, 4 приложений.

Заключение диссертации по теме «Управление в социальных и экономических системах», Лященко, Сергей Александрович

Выводы

1. Разработаны методы и программы, позволившие осуществить эффективный расчет квалитативных функций для показателей, находящихся на разных уровнях иерархического дерева.

2. Построен и практически реализован новый метод решения обратной задачи теории иерархических систем - по виду интегральной оценки восстанавливается структурного бинарного дерева целей. Разработанный метод применен для восстановления структуры учебного плана по результатам итоговых испытаний обучаемых.

3. Разработанные в главе методы использованы также [119] для психологического тестирования [98-104], основанного на построении оппозиционных шкал и использовании иерархических деревьев для оценки их сходства между собой, выбора основных и построении интегральных оценок.

Список литературы диссертационного исследования кандидат технических наук Лященко, Сергей Александрович, 2004 год

1. Докучаев Е. Управление качеством продукции: Учеб. пособие / Е. Докучаев, Ю. М. Малышев ; Уфим. гос. нефтяной техн. ун-т., 2002 .

2. Пиганов М. Н. Индивидуальное прогнозирование показателей качества элементов и компонентов микросборок / М. Н. Пиганов, 2002.

3. Федюкин В. К. Методы оценки и управления качеством промыпшенной продукции: Учеб. для студентов вузов, обучающихся по эконом, специальностям / В.К.Федюкин, В.Д. Дурнев., В.Г. Лебедев, 2001

4. Герасимов Б. И. Экономико-математические модели погрешностей оценки качества / Б.И. Герасимов; М-во образования Рос. Федерации. Тамб. гос. техн. ун-т, 2000.

5. Никеров Н. Экспертно-статистический метод оценки качества продукции /Учеб. пособие. Под ред. Н. Никерова; Петерб. гос. ун-т путей сообш;, 1995.

6. Базаржапов Ч. Б. Качество сельскохозяйственной продукции: методы оценки и анализа /Ч. Б. Базаржапов, 1989.

7. Батечко И. В. Методы оценки технического уровня и качества продукции/ И. В. Батечко, В. А. Кныш, 1988,

8. Елагин К.В. ,сост. Эстетическая оценка качества продукции. Номенклатура показателей и методы оценки Метод. Рекомендации. К. В. Елагин и др., 1987 .

9. Миттаг Х.-Й. Статистические методы обеспечения качества/Х.-Й. Миттаг, X. Ринне ; Пер. с нем. Е. Кокот; Под ред. Б. Н, Маркова, 1995.

10. Азгальдов Г.Г. О квалиметрии / Г.Г.Азгальдов, Э.П. Райхман - М.: Изд.- во стандартов, 1973.-172 с.

11. Азгальдов Г.Г. Теория и практика оценки качества товаров / Г.Г. Азгальдов - М.: Экономика, 1982.- 254с.

12. Андрианов Ю.М. Квалиметрия в приборостроении и машиностроении / Ю.М. Андрианов., А.И. Субетто - Л.: Машиностроение, 1980.- 222 с. 16.0крепилов В.В. Управление качеством- М.: Экономика, 1998.

13. Харрингтон Дж.Х. Управление качеством в американских корпорациях- М.: Экономика, 1990.

14. Системы качества / Сб. нормативно-методических документов. Под. ред. З.С.Федорова. М.: Издательство стандартов, 1989.

15. Буканов Ф. Ф. Квалиметрия профессиональных знаний / Ф. Ф. Буканов, A. Н, Меркушев, Е. В. Погорелова. Междунар. акад. информатизации, Самар. гос. техн. ун-т, 1996.

16. Хазова Л. В, Критерий и оценка эффективности гуманитарной подготовки в техническом вузе / Л. В. Хазова. Учеб. пособие Краснояр. гос. техн. ун-т, 1996.

17. Мизинцев В. П., Мизинцев В. П, Проблема аналитической оценки качества и эффективности учебного процесса в школе: Учеб. пособие / В. П. Мизинцев. Ч. 1.. 1979.

18. Мизинцев В. П. Проблема аналитической оценки качества и эффективности учебного процесса в школе: Учеб. пособие (Спецкурс) В 3-х ч.. / В. П. Мизинцев. Ч. 2. 1980.

19. Мизинцев В. П. Проблема аналитической оценки качества и эффективности учебного процесса в школе : В 3 ч.. / В. П. Мизинцев, А. B. Кочергин ; Куйбышев, гос. пед. ин-т им. В. +В. Куйбышева. Ч. 3.. 1986.

20. Вроейнстийн А. И. Оценка качества высшего образования: Рекомендации по внеш. оценке качества в вузах / А. И. Вроейнстийн; Предисл. В. Гуничева, Степанова; Пер. М.В. Рылова.-М.: МНЭПУ, 2000.-179,1. с.

21. Системы качества в образовании: Сб. пер. с англ. / Мое, гос. ин-т стали и сплавов; Под. обш;. ред. Ю. П. Адлера. Вып. 1, ч. 1.-2000.-142с.

22. Системы качества в образовании: Сб. пер. с англ. / Мое, гос. ин-т стали и сплавов; Под. общ. ред. Ю. П. Адлера. Вып. 1, ч. 2.-2000.-143с.

23. Сидоркина Г.Л. Системная оценка качества образования / Г.Л.Сидоркина // Системы управления качеством высшего образования, 2001.-С. 32-33.

24. Обеспечение качества при эксплуатации АЭС / Справочное пособие. Концерн «Росэнергоатом» ВНИИАЭС. Москва, 2000.

25. Воронин Л.М. Безопасность атомных электростанций / Л.М. Воронин, Р.Е. Засорин и др. Справочник-Paris: VBD communication graphique, 1998.

26. Горлов В.Н. Обеспечение качества в атомной энергетике и промышленности / В.Н. Горлов и др.//Ядерная энергетика: вопросы и ответы. -М.: ИздАТ.1995.-Вып.8.

27. TRS 380. Обучение персонала АЭС и его оценка. Руководство по безопасности / Международное агентство по атомной энергии МАГАТЭ.-Вена, 1990.

28. Серия изданий по 6e3onacHOCTH.№50-C/SG-Q. Обеспечение качества для безопасности атомных электростанций и других ядерных установок / Международное агентство по атомной энергии МАГАТЭ.-Вена, 1990.

29. ГОСТ Р ИСО 9001-96. Системы качества. Модель обеспечения качества при проектировании, разработке, производстве, монтаже и обслуживании / Государственный стандарт Российско Федерции.-Москва.ИПК. Издательство стандартов, 1996.

30. ГОСТ Р ИСО 9002-96. Системы качества. Модель обеспечения качества при производстве, монтаже обслуживании / Государственный стандарт Российской Федерации.- Москва. ИПК. Издательство стандартов, 1996.

31. ГОСТ Р ИСО 9003-96. Системы качества. Модель обеспечения качества при окончательном контроле испытаниях / Государственный стандарт Российской Федерации.- Москва. ИПК. Издательство стандартов, 1996.

32. ГОСТ Р ИСО 10011-1-93. Руководящие указания по проверке систем качества Часть 1. Проверка / Государственный стандарт Российской Федерации.- Москва. РШК. Издательство стандартов, 1993.

33. ИСО 9000-1-94. Стандарты по общему руководству качеством и обеспечению качества. Часть 1. Руководящие указания по выбору и применению / Международная организация по стандартизации.- Женева, 1994.

34. ИСО 8402-94. Управление качеством и обеспечение качества. Словарь/ Международная организация по стандартизации.- Женева, 1994.

35. ИСО 10013:95. Руководящие указания по разработке руководств по качеству/ Международная организация по стандартизации.- Женева, 1995.

36. ИСО 10005:95. Административное зшравление качеством/ Руководящие указания по планам качеств. Международная организация по стандартизации.-Женева, 1995.

37. ИСО 9004-1-94. Общее руководство качеством и элементы системы качества. Часть 1./ Руководят указания. Международная организация по стандартизации. -Женева, 1994.

38. ИСО 9004-2-91. Общее руководство качеством и элементы системы качества. Часть 2. /Руководят; указания по обеспечению качества при предоставлении услуг. Международная организация по стандартизации.-Женева, 1994.

39. ETKC-9. Единый тарифно-1свалификационный справочник работ и профессий рабочих АЭС/ Государственный комитет СССР по труду и социальным вопросам.- Москва, 1985.

40. Регламент подготовки и поддержания квалификации персонала АС в НВ УТЦ/ Нововоронежский УТЦ.- Нововоронеж, 1999. 63.0ПЭ АС. Основные правила обеспечения эксплуатации атомных станций/ Минатом РФ.- Москва, 1999.

41. Положение об учебно-тренировочном центре для подготовки эксплуатационного персонала/№ СССР. -Москва, 1999,

42. Правила организации работы с персоналом на предприятиях и в организациях Минатомэнерго СССР ПОРП-89/ Москва, 1989.

43. Основные положения по подбору, подготовке, допуску к работе и контролю в процессе эксплуатации персонала АС. МАЭП СССР. 1990.

44. Леденена Т.М. Моделирование прогресса агрегирования информации в целенаправленных системах /Т.М. Леденева-Воронеж.: Изд.-во ВГТУ, 1999.- 154с.

45. Каплинский А.И. Моделирование и алгоритмизация слабо- формализованных задач выбора наилучших вариантов систем / А.И. Каплинский, И.Б.Руссман, В.М. Умывакин - Воронеж.: Изд.-во ВГУ, 1990.-168 с.

46. Руссман И.Б. Комплексная оценка системы и оценки подсистем./ И.Б. Руссман // Изд.-во АН СССР, Сер. Техническая кибернетика.- 1978. N2, -С.201-204.

47. Артоболевский И.И. О некоторых способах выбора интегрального критерия качества в задачах оптимального проектирования машин / И.И. Артоболевский, И.Б.Руссман, В.И.Сергеев, Р.Б. Статников // АН СССР, Машиноведение.- 1978.-N2.- 3-10.

48. Бермант М.А. О проблеме оценки качества / М.А.Бермант, И.Б. Руссман // АН СССР, Экономика и математические методы, 1978.-N4. 422-431.

49. Руссман И.Б. О проблеме пересчета интегральных показателей при сравнении многомерных объектов / И.Б.Руссман // Проблемы функционирования и развития инфраструктуры народного хозяйства.-М.: ВНИИСИ, 1983.- 19-24.

50. Руссман И.Б. Интегральные оценки качества в организационных системах / И.Б.Руссман // Структурная адаптация сложных систем управления. - Воронеж.: Изд-во ВПИ, 1977.- 90-92,

51. КИНИ Р.П. Принятие решений при многих критериях: Предпочтения и замещения / Р.П. Кини, X. Райфа - М.: Радио и связь, 1981.-560 с.

52. Литвак Б.Г. Экспертная информация: Методы получения и анализа / Б.Г. Литвак - М.: Радио и связь, 1984.-184 с.

53. Лотов А.Б. Компьютер и поиск компромисса. Метод достижимых целей / А.Б. Лотов, В.А. Бушенков, Г.К. Каменев - М.: Наука, 1997.- 239 с.

54. Николаев В.И. Системотехника: Методы и приложения / В.И. Николаев, В.М. Брук, - Л.: Машиностроение, 1985.-199 с. 81.0рловсьсий А. Проблемы принятия решений при нечеткой исходной информации / А. Орловский - М.: Наука, 1981.- 206 с. ИЗ

55. Подиновский В.В. Многокритериальные задачи с однородными равноценными критериями /В.В. Подиновский //Журнал вычислительной математики и математической физики. - 1975 - Т. 15, N2.- С 330-344.

56. Прикладные нечеткие системы / Под редакцией Т. Тэрано и др. - М.: Мир, 1993.- 368с.

57. Саати Т.Л. Взаимодействия в иерархических системах / Т.Л. Саати // Изв. АН СССР. Сер. Техническая кибернетика - 1979.- N1. - 68-84.

58. Терехина А.Ю. Анализ данных методами многомерного шкалирования / А.Ю.Терехина - М.: Наука, 1986.- 168 с.

59. Хованов Н.В. Анализ и синтез показателей при информационном дефиците / Н.В. Хованов - СПб.: Изд.-во СПГУ, 1996.-196 с.

60. Волкова В.Н. Основы теории систем и системного анализа / В.Н. Волкова, А.А. Денисов - СПб: Изд.-во СПбГТУ, 1999.- 512 с.

61. Саати Т.Л. Аналитическое планирование и организация систем / Т.Л.Саати, К. Керне - М.: Радио и связь. 1991.- 224 с.

62. Янг Системное управление организацией / Янг- М.: Сов. Радио, 1972.-455с.

63. Миллер Р.В. ПЕРТ - система управления организацией / Р.В. Миллер - М.: Экономика, 1965.-202 с.

64. Лопухин М.М. ПАТТЕРН - Метод планирования и прогнозирования научных работ / М.М. Лопухин - М.: Сов. Радио, 1971.- 160 с.

65. Поспелов Г.С. Программно-целевое планирование и управление / Г.С.Поспелов, В.А. Гериков - М.: Сов. Радио, 1976.- 440с.

66. Принципы декомпозиции целей и методика построения дерева целей в системах организационного управления / Ф.И. Перегудов, В.Н. Сагатовский и др.// Кибернетика и вуз. Вып.8.- Томск: ТПИ, 1974,-С. 9-20.

67. Базилевич Л.А. Моделирование организационных структур /Л.А. Базилевич- Л. Изд.-во ЛГУ, 1978.-160 с.

68. Базилевич Л.А. Комплексный критерий качества организационной стрзпктуры / Л.А. Базилевич // Количественные методы анализа и синтеза структур организационных систем / Л.А. Базилевич - М.: МНИИПУ, 1983.-C.14-23.

69. Мильнер Б.З. организация программно -целевого управления / Б.З. Мильнер-М.: Наука, 1980.- 376 с.

70. Овсиевич Б.Л. Формирование организационных структур / Б.Л. Овсиевич - Л.: Наука, 1979.- 159 с.

71. Психология и математика / Сб. статей. Под ред.В.Б. Рубахина. -М.:Наука, 1976.-212 с.

72. Дюк В.А. Компьютерная психо-диагностика. - СП.: Братство, 1994 - 252 с.

73. Леонов Ю.П. Теория статистических решений и психофизика / Ю.П. Леонов,- М.: Наука, 1977.-227 с.

74. Бардин К.В. Проблема порогов чувствительности и психофизические методы/ К.В. Бардин. - М.: Наука, 1976.-3 Юс.

75. Смирнов Л.В. О возможности использования теории нечетких множеств в дифференциальной психологии/ Л.В. Смирнов. В кн. Дифференциальная психофизиология и ее генетические аспекты. - М.: Наука, 1975.-С. 163

76. Шмелев А.Г. Введение в экспериментальную психосемантику / А.Г. Шмелев.- М.: Наука, 1983.- 264с.

77. Дюран И.Б. Кластерный анализ / И.Б. Дюран, П.Одел. М.: Статистика, 1977.-128 с.

78. Лансберг СЕ. Системный структурный анализ и программа обеспечения качества обучения персонала в Нововоронежском учебно-тренировочном центре/ СЕ.Лансберг, А.Лященко УДК 658.15. Издательство "Воронежский государственный университет", 2001.

79. Лященко А., Согласование оценок качества в задачах обучения и управления/ А. Лященко, И. Б. Руссман // РИА Ставдарты и качествс-2003. N1.

80. Лященко А. Комплексная психофизиологическая оценка в системе качества подготовки специалистов /С.А. Лященко//Системы управления и информационные технологии: Межунар. сб. науч. тр.- Воронеж, Изд-во: Научная книга.-2003.- Вып. 10.- 27-30.

81. Kellaghan, Thomas. Using assessment to improve the quality of education / Thomas Kellaghan -Paris: UNESCO. Intern, inst. for educational planning, 2001.

82. Andersson, Mona. The early childhood environment rating scale (ECERS) as a tool in evaluating and improving quality in preschools / Mona Andersson-Stockholm -.Stockholm inst. of education press (HLS fori.), 1999.

83. Fitz-Gibbon, Carol Taylor. Monitoring education: Indicators, quality a. effectiveness / Carol Taylor, Fitz-Gibbon - London- New York -.Cassell, 1998.

84. ROFFE, I.M. Conceptual problems of continuous quality improvement and innovation in higher education/ I.M. ROFFE //Quality Assurance in Education.-1998.-6 (2).-pp. 74-82.

85. HERMES, LIESEL. Learner assessment through subjective theories and action research/ LIESEL HERMES // Assessment & Evaluation in Higher Education. -1999- 24 N 2.- pp. 193-200.

86. John D. Mulhem. Total Quality Management: Can education afford to ignore it?/ Mulhem, John D// Continuous Improvement Monitor.- 1998-Volume 1 Number 3.

87. Anna-Marija Liuhanen, Paavo Sippola and Asko Karjalainen The Impact of Evaluations for Improving University Teaching/ Anna-Marija Liuhanen, Paavo Sippola and Asko Karjalainen // University of Oulu, Finland.- 1997.

88. Dr. Alma Harris. Successful School Improvement in the United Kingdom and Canada School of Education/ Dr. Alma Harris- University of Nottingham, England, 2000.

89. James R. Evans, William M. Lindsay. The Management and Control of Quality/ James R. Evans, William M. Lindsay// - 4-th/ ed. South-Western College Publishing.-1999.- pp 785.

90. Ralf G. Lewis, Douglas H. Smith. Total Quality in Higher Education/ Ralf G. Lewis, Douglas H. Smith. - St. Lucie Press, 1997. -330 pp.

91. R.S. Winter. Can total Quality Management be adopted in Colleges and Universities? An International perspective/ R.S. Winter. // 43rd European Quality Congress. Proceeding book. Madrid, 9-11 June, 1999.

92. Daniel Mieade. A Quality Strategy for Institutional Effectiveness at ITESM/ Daniel Mieade. // 43"^ ^ European Quality Congress. Proceeding book. Madrid, 9-11 June, 1999.

93. Nieves Segovia Bonet. Quality and Innovation in Education/ Nieves Segovia Bonet. // 43rd European Quality Congress. Proceeding book. Madrid, 9-