Методы и средства обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа тема диссертации и автореферата по ВАК РФ 05.13.19, кандидат технических наук Беззубов, Владимир Федорович

• Беззубов, Владимир Федорович
• кандидат технических наук
• 2013

Оглавление диссертации кандидат технических наук Беззубов, Владимир Федорович

ОГЛАВЛЕНИЕ

ВВЕДЕНИЕ

Глава 1. Защищенные вычислительные системы, принципы построения, безопасность функционирования и средства

обеспечения функционально - информационной безопасности

1.1. Защищенные многопроцессорные вычислительных систем

1.2.3ащищенные Многомашинные вычислительные комплексы

2. Анализ способов организации обмена

2.1. Многомашинные вычислительные комплексы с общей магистралью межмашинного обмена

2.2. Двухмашинные вычислительные комплексы (ДВК)

2.2.1. Временные характеристики ДВК

2.2.2. Remote Direct Memory Access (дистанционный ПДП)

Выводы

Глава 2. Организация средств обмена и обеспечения функционально - информационной безопасности

на основе межмашинного прямого доступа

2.1. Использование прямого доступа к памяти для организации

обмена данными

2.2. Двойной (межмашинный) прямой доступ к памяти

2.2.1. Алгоритм межмашинного (двойного) ПДП для организации обмена в ДВК

2.2.2. Временные характеристики межмашинного (двойного) ПДП

2.3. Варианты организации вычислительных комплексов

2.3.1.Алгоритм работы ДВК с организацией обмена между вычислительными модулями посредством межмашинного ПДП

2.4. Исследование вариантов организации взаимосвязи

ВМ в отказоустойчивых вычислительных комплексах

2.5. Эффективность межмашинного обмена в дублированных вычислительных комплексах при различных способах

организации обмена

Выводы

Глава 3. Модель надежности и функционально - информационной безопасности резервированных вычислительных комплексов с реализацией межмашинного прямого доступа

3.1. Марковская модель надежности резервированных вычислительных комплексов с межмашинным (двойным)

прямым доступом к памяти

3.2. Надежность и безопасность резервированного

вычислительного комплекса при ограниченном восстановлении

3.3. Модели определения вероятностей опасных и безопасных состояний надежности с учетом ограничений восстановления

с учетом требований функционально-информационной безопасности

Выводы

Глава 4. Организация средств обмена и защиты на основе межмашинного прямого доступа через общую магистраль

4.1. Алгоритм межмашинного (двойного) ПДП для организации

обмена ММВК с шинной структурой

4.2. Архитектура резервированных вычислительных систем

с обеспечением устойчивого функционирования и сохранности

данных на основе программных методов межканального контроля

Выводы

ОСНОВНЫЕ РЕЗУЛЬТАТЫ ДИССЕРТАЦИОННОЙ РАБОТЫ

ПРИЛОЖЕНИЕ А. Варианты реализации средств поддержки

функционально - информационной безопасности на основе межмашинного прямого доступа

А. 1. Средства реконфигурации структуры

А. 1.1. Многоканальное устройство для реконфигурации системы

А. 1.2. Устройство переключения и управления реконфигурацией

А.2. Устройства сопряжения (УС)

А.З. Устройства (модули) сопряжения с внешними объектами (УСО)

А.4. Устройства (модули) сопряжения с магистралью (УСМ)

А.5. Аппаратные технические решения обеспечения

отказоустойчивости резервированных вычислительны комплекс

А.5.1. Устройство переключения резерва

А.5.2. Устройства (модули) реконфигурации (УР)

А.5.3. Резервированная вычислительная система

с реконфигурацией структуры

СПИСОК ЛИТЕРАТУРЫ

Введение диссертации (часть автореферата) на тему «Методы и средства обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа»

ВВЕДЕНИЕ

АКТУАЛЬНОСТЬ РАБОТЫ

Высокая надежность, устойчивость, функциональная и информационная безопасность систем критического применения, достигается при резервировании основных подсистем и комплектации системы средствами защиты от злонамеренных и случайных внешних и внутренних воздействий, потенциально вызывающих отказы, снижение устойчивости функционирования, нарушения целостности и доступности данных.

Повышение функциональной и информационной безопасности систем достигается при минимизации вероятности и последствий возникновения опасных состояний, возникающих в результате отказов, сбоев или внешних злонамеренных или случайных (непредумышленные) дестабилизирующих воздействий.

Обеспечение функциональной безопасности в значительной мере определяется информационной безопасностью, и прежде всего, связано с минимизацией риска потери данных при отказах системы, вызванных внешними или внутренними причинами, в том числе в результате злонамеренных воздействий.

Эффективность средств защиты от внешних и внутренних воздействий, вызывающих нарушение целостности информации и отказы резервированных вычислительных комплексов, во многом определяется организацией средств комплексирования, которые должны обеспечить высокоскоростной доступ к памяти, хранящей важные для вычислительного процесса данные и результаты вычислений. Высокоскоростной доступ к ресурсам вычислительных комплексов, позволяет ускорить контроль и обнаружение опасных состояний, минимизировать их вероятности и увеличить эффективность процесса снижения риска при компенсации ошибочного функционирования вычислительного процесса, потери доступности и целостности данных.

Взаимозависимость и взаимосвязь задач противодействия угрозам нарушения информационной и функциональной безопасности, обеспечения устойчивости

информационных систем требует интеграции всей совокупности средств защиты системы от внешних и внутренних угроз функционированию системы.

Таким образом, на современном этапе развития информационных технологий создание средств обеспечивающих устойчивое функционирование вычислительных систем, сокращение риска и последствий потери информации, после случайных или злонамеренных дестабилизирующих воздействий, является актуальной задачей.

ОБЪЕКТ ИССЛЕДОВАНИЯ — защищенные вычислительные информационно управляющие резервированные системы критического (ответственного) назначения.

ПРЕДМЕТОМ ИССЛЕДОВАНИЯ являются модели, методы и средства обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа.

- защищенные отказоустойчивые вычислительные системы и узлы (модули) для их построения;

- организация защищенного устойчивого вычислительного процесса в резервированных вычислительных системах, включая межмашинный обмен для поддержки их безопасности.

ЦЕЛЬЮ РАБОТЫ является разработка и исследование методов и средств обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа.

ЗАДАЧИ ИССЛЕДОВАНИЯ

• разработка структур, протоколов и алгоритмов функционирования средств защиты, обеспечивающих высокоскоростной доступ к ресурсам вычислительных устройств, в том числе и с отказавшим процессором с целью минимизации нахождения системы в опасных состояниях;

• разработка алгоритмов и средств взаимосвязи узлов защищенных вычислительных систем на основе межмашинного прямого доступа к памяти (межмашинного ПДП);

• разработка набора модулей (узлов) для построения средств защиты отказоустойчивых резервированных вычислительных систем, с обеспечением высокоскоростного доступа к ресурсам вычислительных устройств, в том числе после отказа их процессора;

• построение моделей оценки информационно - функциональной безопасности, надежности и производительности защищенных устойчивых резервированных систем, с обеспечением высокоскоростного доступа к внутренним ресурсам, вычислительных систем;

• исследование эффективности защищенных систем, с реализацией взаимосвязи между резервированными узлами на основе межмашинного (двойного) ПДП.

МЕТОДЫ ИССЛЕДОВАНИЯ. Используются методы теории массового обслуживания, надежности, оптимизации, Марковских процессов и рисков. НАУЧНАЯ НОВИЗНА

В диссертационной работе предложены модели, методы и средства обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа к внутренним ресурсам резервированных устройств, при этом:

1. Предложен метод и организация межмашинного прямого доступа к памяти, позволяющего сократить время межмашинного обмена информацией и обеспечить высокоскоростной доступ к памяти и другим ресурсам резервированных вычислительных устройств, в том числе, в случае отказов процессоров резервированных устройств, что потенциально позволяет повысить устойчивость системы (доступность и возможность восстановления данных ) к воздействию деструктивных факторов.

2. Предложена организация средств обеспечения информационно-функциональной безопасности, надежности, целостности и доступности данных в резервированных вычислительных комплексах на основе межмашинного ПДП, позволяющего повысить устойчивость функционирования резервированных комплексов путем создания работоспособных конфигураций с использованием

сохраненных после деструктивных воздействий (отказов) ресурсов и результатов вычислений.

3. Предложена организация защищенных резервированных (в том числе дублированных) вычислительных комплексов с реализацией отказоустойчивого высокоскоростного доступа на основе межмашинного (двойного) ПДП;

4. Предложены аналитические модели безопасности и надежности отказоустойчивых вычислительных комплексов на основе межмашинного ПДП, -определена область эффективного использования предлагаемых решений по обеспечению отказоустойчивого безопасного функционирования резервированных вычислительных комплексов.

5. Проанализированы варианты организации отказоустойчивых резервированных вычислительных комплексов и показана эффективность реализации доступа, к ресурсам резервированных вычислительных устройств на основе межмашинного ПДП.

ПОЛОЖЕНИЯ, ВЫНОСИМЫЕ НА ЗАЩИТУ

Методы и средства обеспечения информационно-функциональной безопасности и надежности резервированных вычислительных систем.

Метод и организация межмашинного обмена для защищенных отказоустойчивых резервированных вычислительных комплексов с двойным прямым доступом к памяти.

Модели безопасности и надежности отказоустойчивых вычислительных комплексов на основе межмашинного ПДП.

Организация защищенных отказоустойчивых резервированных вычислительных комплексов с реализацией межмашинного ПДП.

ПРАКТИЧЕСКАЯ ЦЕННОСТЬ РАБОТЫ

1. Предложены средства поддержки информационно-функциональной безопасности и надежности вычислительных систем критического применения на основе организации высокоскоростного обмена и обеспечения доступа к внутренним ресурсам ВМ на основе межмашинного ПДП.

2. Предложен протокол и организация межмашинного обмена на основе двойного ПДП, обеспечивающие высокоскоростной доступ к внутренним ресурсам вычислительного устройства, в том числе при состояниях с отказавшим процессором резервированного устройства.

3. Рассмотрены типовые структуры отказоустойчивых вычислительных комплексов на основе предложенных средств защиты.

4. Проанализирована эффективность предлагаемых структур защищенных отказоустойчивых вычислительных комплексов и определена область эффективности предложенных решений.

5. Патентная чистота предлагаемых технических решений по построению защищенных отказоустойчивых вычислительных комплексов и их узлов, подтверждается одиннадцатью авторскими свидетельствами и тринадцатью патентами на изобретения.

АПРОБАЦИЯ РАБОТЫ. Основные результаты работы докладывались и обсуждались на научно - технических конференциях: - Международная конференция «Локальные вычислительные сети» ЛОКСЕТЬ 90, Рига, 9-11 октября 1990г.; - Третья и Четвертая международная научно-техническая конференция «Автоматизация и энергосбережение машиностроительного производства, технология и надежность машин, приборов и оборудования», г. Вологда, 10 -12 ноября 2007г., 24 - 26 ноября 2008г.; - 3-ий Международный форум «Актуальные проблемы современной науки», г. Самара, 20 -23 ноября 2007г.; - XXXIX и ХЬ Международная научно-практическая конференция, «Неделя науки СПбГПУ», 6 -11 декабря 2010, 2011 г., Санкт-Петербургский Государственный Политехнический Университет; - Ма1епа1у VII гшеёгпагоёолуе] паико^ш -ргак^усгпе] ког^егепср «рег8рек1ушсгпе оргасо\уаша Ба паика1 1есЬшкагш - 2011», Рггету^, Каика [ БШсПа 2011, 07 - 15 ноября 2011г.; - Пятая всероссийская межвузовская конференция молодых ученых, СПбГУ ИТМО, 15 - 18 апреля 2008г.; - Всероссийская межвузовская научная конференция «Всероссийские научные Зворыкинские чтения», Муромский институт Владимирского Государственного университета, 22 апреля 2011г.; - Всероссийская молодежная научно - практическая конференция: -

«Исследования молодежи, - экономике, производству, образованию.», г.Сыктывкар, 20 - 21 апреля 2011г.; - Отраслевая научно-практическая конференция: - "Пути совершенствования сетей и комплексов технических средств связи.", .Ленинград, НПО «Красная Заря», 1989г.; - Первая межвузовская научно -практическая конференция - «Актуальные проблемы организации и технологии защиты информации»., СПбГУ ИТМО, 30 ноября - 01 декабря 2011г.; - VII Всероссийская межвузовская конференция молодых ученых (КМУ), СПбГУ ИТМО, 16 - 18 марта 2010г.; - XXXIX научная и учебно-методическая конференция СПбГУ ИТМО, 02 - 05 февраля 2010.

Результаты работы использовались в ряде разработок, в том числе в НИР № 610481 на кафедре вычислительной техники НИУ ИТМО.

ДОСТОВЕРНОСТЬ ПОЛУЧЕННЫХ РЕЗУЛЬТАТОВ подтверждается корректностью используемого математического аппарата; - реализацией и внедрением, предложенных технических решений; результатами Государственной патентной экспертизы предлагаемых технических решений; обсуждением материалов на четырнадцати конференциях.

ПУБЛИКАЦИИ. По результатам проведенных исследований опубликовано 46 печатных работ, в том числе авторских свидетельств на изобретение - 11, патентов на изобретение - 13. Число публикаций в изданиях из списка ВАК - 5.

ОБЪЕМ И СТРУКТУРА РАБОТЫ Диссертация состоит из введения, четырех глав и заключения. Материалы изложены на 161 странице, 85-ти рисунках, 2-х таблицах. Библиографический список включает 98 наименований.

11

Заключение диссертации по теме «Методы и системы защиты информации, информационная безопасность», Беззубов, Владимир Федорович

ОСНОВНЫЕ РЕЗУЛЬТАТЫ ДИССЕРТАЦИОННОЙ РАБОТЫ

В диссертационной работе предложены модели, методы и средства обеспечения функционально-информационной безопасности резервированных вычислительных систем на основе межмашинного прямого доступа к внутренним ресурсам резервированных устройств, при этом.

1. Предложен метод и организация межмашинного прямого доступа к памяти (двойного ПДП), позволяющего сократить время межмашинного обмена информацией и обеспечить высокоскоростной доступ к памяти и другим ресурсам резервированных вычислительных устройств, в том числе, в случае отказов процессоров резервированных устройств, что потенциально позволяет повысить устойчивость системы (доступность и возможность восстановления данных ) к воздействию деструктивных факторов.

2. Предложена организация средств обеспечения информационно-функциональной безопасности, надежности, целостности и доступности данных в резервированных вычислительных комплексах на основе межмашинного ПДП, позволяющего повысить устойчивость функционирования резервированных комплексов путем создания работоспособных конфигураций с использованием сохраненных после деструктивных воздействий (отказов) ресурсов и результатов вычислений.

3. Предложена организация защищенных резервированных (в том числе дублированных) вычислительных комплексов с реализацией отказоустойчивого высокоскоростного доступа на основе межмашинного (двойного) ПДП;

4. Предложены аналитические модели безопасности и надежности отказоустойчивых вычислительных комплексов на основе межмашинного ПДП, -определена область эффективного использования предлагаемых решений по обеспечению отказоустойчивого безопасного функционирования резервированных вычислительных комплексов.

5. Проанализированы варианты организации защищенных резервированных вычислительных комплексов и показана эффективность реализации доступа к ресурсам резервированных вычислительных систем на основе межмашинного ПДП. Определена область эффективности предложенных решений.

6. Патентная чистота предлагаемых технических решений по построению средств обеспечения информационно - функциональной безопасности и надежности отказоустойчивых вычислительных устройств и их узлов, подтверждается одиннадцатью авторскими свидетельствами и тринадцатью патентами на изобретения.

118

Список литературы диссертационного исследования кандидат технических наук Беззубов, Владимир Федорович, 2013 год

СПИСОК ЛИТЕРАТУРЫ

1. ГОСТ Р 50922-2006, Национальный стандарт РФ «Защита информации. Основные термины и определения»

2. ГОСТ Р ИСО/МЭК 17799—2005, Национальный стандарт РФ «Информационная технология. Практические правила управления информационной безопасностью»

3. Безопасность: теория, парадигма, концепция, культура. Словарь-справочник / Автор-сост. профессор В. Ф. Пилипенко. 2-е изд., доп. и перераб. — М.: ПЕР СЭ-Пресс, 2005.

4. Информационная безопасность (2-я книга социально-политического проекта «Актуальные проблемы безопасности социума»). М.: «Оружие и технологии», 2009.

5. ГОСТ Р ИСО/МЭК 13335-1-2006, Национальный стандарт РФ «Методы и средства обеспечения безопасности. Часть 1. Концепция и модели менеджмента безопасности информационных и телекоммуникационных технологий».

6. Рекомендации по стандартизации «Информационные технологии. Основные термины и определения в области технической защиты информации» (Р 50.1.053-2005).

7. Словарь терминов по безопасности и криптографии. Европейский институт стандартов по электросвязи.

8. Поиск. Глоссарий.ги, [Электронный ресурс] // URL: - http://www. glossary.ru

9. Рекомендации по стандартизации «Техническая защита информации. Основные термины и определения» (Р 50.1.056-2005).

10. Домарев B.B. Безопасность информационных технологий. Системный подход — К.: ООО ТИД Диа Софт, 2004. — 992 с.

11. Лапина М. А., Ревин А. Г., Лапин В. И. Информационное право. М.: ЮНИТИ-ДАНА, Закон и право, 2004.

12. Таненбаум Э., Ван Стен М. Распределенные системы, принципы и парадигмы, Питер, 2003г.

13. Коваленко А.Е., Гула В.В. Отказоустойчивые микропроцессорные системы, Киев, «Техника», 1987 г.

14. Ларионов A.M., Майоров С.А., Новиков Г.И.. Вычислительные комплексы, системы и сети, Ленинград, «Энергоатомиздат», 1986 г.

15. Барбашов Е.А. Исследование производительности и надежности бортовых вычислителей в пилотажно - навигационных комплексах самолетов. // Автореферат, Санкт - Петербург, 2007.

16. Панфилов А.П. Опыт проектирования и изготовления СБИС и «систем на кристалле» по схеме «fables» // Материалы семинара. М: НТЦ «Модуль», 2002.

17. Технология NeuroMatrix [Электронный ресурс] // НТЦ «Модуль» URL: http.7/www.parallel.ru/news/module_nmserial.html (19.03.2013г.)

18. Павлов A.M. Принципы организации бортовых вычислительных систем перспективных летательных аппаратов. // Мир компьютерной автоматизации. 2001. №4. С. 25-35.

19. Канащенков А.И., Меркулов В.И., Самарин О.Ф. Облик перспективных бортовых радиолокационных систем. Возможности и ограничения // М: ИПРЖР, 2002. С. 176.

20. Канащенков А.И., Меркулов В.И. Радиоэлектронные системы самонаведения. Изд.2-е, перераб. и доп. // М.: Радиотехника, 2003. С.390.

21. Анцев Г.В. Принципы построения бортовых информационно -управляющих систем высокоточного оружия нового поколения // Радиотехника 2001. №8. С. 81-86.

22. Space Wire - Links, Nodes, Routers and Networks. EC S S - Space Engineering, ES A - ESTEC, Requiremtnts & Standards Division. Noordwijk, the Netherlands, 2001. 131p.

23. Пономарев Л.И., Нестеров Ю.Г., и др. Теория и практика радиолокации земной поверхности. // Вестник УГТУ-УПИ. Сер.радиотехн. 2005г. № 19 (71). С. 235.

24. Петричкович Я.Я., Солохина Т.В. Микроэлектронные технологии: Сигнальные микроконтроллеры серии «МУЛЬТИКОР» для перспективных аэрокосмических применений.// Труды конференции «Микросистемы - 2003», Санкт-Петербург, 14-17 июня, 2003. С. 34 - 37.

25. Шейнин Ю., Солохина Т., Петричкович Я. Технология Space Wire для параллельных систем и бортовых распределенных комплексов. // Электроника: НТБ, 2006. №5. С. 64-75.

26. Солохина Т., Александров Ю., Петричкович Я. Сигнальные контроллеры компании Элвис: первая линейка отечественных DSP. // Электроника: НТБ, 2005. № 7. С. 70 - 77.

27. Горбачев C.B., Рождественский Д.А., Суворова Е.А., Шейнин Ю.Е. Масштабируемые архитектуры распределенных систем на технологии Space Wire на базе платформы «Мультикор» // Вопросы радиоэлектроники. Сер. ОТ. 2006. вып.2. С.69 - 80.

28. Солохина Т.В., Петричкович Я.Я., Александров Ю.Н. Микросхемы базовых серий «Мультикор». Сигнальный микроконтроллер 1892ВМ2Т (МС - 24). Часть 1. // Chip News, № 2(95). 2005. С. 20 - 31.

29. Солохина Т.В., Петричкович Я.Я., Александров Ю.Н. Микросхемы базовых серий «Мультикор». Сигнальный микроконтроллер 1892ВМ2Т (МС - 24). Часть 2. // Chip News, № 3(96). 2005. С. 20 - 26.

30. Солохина Т., Александров Ю., Глушков А. и др. Новые отечественные трехпроцессорные dsp - микроконтроллеры с производительностью 1,5 GFLOPs. // Электронные компоненты. 2006. № 6. С. 73 - 78.

31. Райе JI. Эксперименты с локальными сетями микро-ЭВМ. // «Мир», 1990 г.

32. Морозов А. Отказоустойчивые системы;- зачем нужны и как построить. [Электронный ресурс] // CNews. URL: http://www.outsourcing.ru/content/rus/203/2031-article.asp (19.03.2013г.)

33. Мирес Дж. Сети на базе рефлективной памяти. [Электронный ресурс] // МКА. URL: http://www.mka.ru/?p=40644(19.03.2013r.)

34. Резервирование сервера технологических данных. [Электронный ресурс] // МКА. URL: http://asutp.ru/?p=600401 (19.03.2013г.)

35. Гопчанский О. Унифицированные средства бортовых вычислительных комплексов космических аппаратов. // «Современные технологии автоматизации», 1998 г., № 1.

36. Харченко B.C., Юрченко Ю.Б., Байда Н.К. Реализация проектов отказоустойчивых бортовых компьютеров космических аппаратов с использованием электронных компонентов Industry // Технология приборостроения № 1,2002. С. 74-80.

37. Байда Н.К., Кривоносов А.И., Лысенко И.В., Харченко B.C., Юрченко Ю.Б. Эволюция отказоустойчивых БЦВК и направления их развития на однокристальных микро-ЭВМ. // Системы обработки информации, Харьков: НАНУ, ПАНМ, ХВУ, 2001. Вып.4. С. 217 - 225.

38. Бурцев В. Возможности использования зарубежной элементной базы в системах военного применения // Живая электроника России. 2002. С. 33 - 36.

39. Афонин В.В., Лисейкин В.А., Милютин В.В., Зиновьев В.Л.,Московский А.Н. Синхронизация троированных каналов ПЖ жёсткого PB // Промышленные АСУ и контроллеры, 2001. №6. С. 58 - 60.

40. Байда Н.К., Кривоносов А.И., Лысенко И.В., Харченко B.C., Юрченко Ю.Б. Эволюция отказоустойчивых БЦВК и направления их развития на однокристальных микро-ЭВМ // Системы обработки информации, Харьков: НАНУ, ПАНМ, ХВУ, 2001. Вып.4. С. 217 - 225.

41. Харченко B.C., Юрченко Ю.Б. Повышение отказоустойчивости систем управления на основе мажоритированных вычислительных комплексов с аппаратной синхронизацией // Інформаційно-керуючі системи на залізничному транспорті. 2001. № 4. С.122 - 123.

42. Богатырев В.А., Иванов JI.C., Апинян В.В. Математическая модель мультипроцессорных систем с общей магистралью.// Техника средств связи. Серия Техника проводной связи. 1985.№ 4. С. 113-118.

43. Половко A.M. Основы теории надежности. // СПб. БХВ- Петербург. 2006г. С. 704

44. Панфилов И.В., Половко A.M. Вычислительные системы. // М., «Сов. радио» 1980. С. 304.

45. Шубинский И.Б., Николаев В.И., Колганов С.К., Заяц A.M. Активная защита от отказов управляющих модульных вычислительных систем. // СПб. «Наука» 1993. С. 285.

46. Вайрадян A.C., Коровин A.B., Удалов В.Н. Эффективность функционирования управляющих мультипроцессорных систем. // М., «Сов. радио» 1984. - С. 328.

47. Удаленный прямой доступ к памяти [Электронный ресурс] // Компьютерное Обозрение. URL: http://ko.com.ua/ (19. 03.2013)

48. «Передний край» - і WARP. [Электронный ресурс] // RDMA iSCSI NetApp 10G Ethernet about. URL: http://aboutnetapp.livejournal.com/17811.html (19. 03.2013)

49. SMB Multichannel - новая возможность протокола SMB. [Электронный ресурс] // Заметки о Windows. URL:http://windowsnotes.ru/windows-server-2012/smb-multichannel-novaya-vozmozhnost-protokola-smb-3-0 (19. 03.2013)

50. Булдаков. Записки сисадмина. [Электронный ресурс] // Windows Server 2012 SMB Multichannel. URL: http://www.buldakov.ru/?m=201208 (19. 03.2013)

51. Богатырев В.А. Комбинаторно-вероятностная оценка надежности и отказоустойчивости кластерных систем // Приборы и системы. Управление, контроль, диагностика. 2006. №6. С. 21 - 24.

52. Богатырев В.А. Оценка надежности и оптимальное резервирование кластерных компьютерных систем. // Приборы и системы. Управление, контроль, диагностика. 2006. №10. С. 18 -21.

53. Богатырев В.А. Оптимальное резервирование системы разнородных серверов. // Приборы и системы. Управление, контроль, диагностика. 2007. № 12. С.32-36.

54. Богатырев В.А. Метод оценки надежности вычислительных систем при функциональной неоднородности компьютерных узлов. // Приборы и системы. Управление, контроль, диагностика. 2006. № 12. С. 20 - 22.

55. Богатырев В.А. Надежность сетей при резервировании коммутаторов с неполнодоступным подключением узлов. // Известия Санкт-Петербургской лесотехнической академии. 2005. № 174. С. 127 - 134.

56. Богатырев В.А., Богатырев С.В. Критерии оптимальности отказоустойчивых компьютерных систем. // Научно технический вестник информационных технологий, механики и оптики. 2009. № 5. С. 92 - 97.

57. Богатырев В.А., Богатырев С.В. Анализ готовности многоуровневой коммуникационной подсистемы компьютерных систем кластерной архитектуры. // Научно технический вестник информационных технологий, механики и оптики. 2009. № 59. С. 88-93.

58. Богатырев В.А., Беззубов В.Ф., Котельникова Е.Ю., Богатырев.А.В., Землянухин А.А., Белоусов С.И., Румянцев А.С. Выбор структуры отказоустойчивого двухмашинного вычислительного комплекса. // Информационные системы и технологии: теория и практика. Сборник научных трудов. Выпуск 3. СПБ. 2011. С. 14 - 20.

59. Богатырев В.А., Беззубов В.Ф., Голубев И.Ю. Организация межпроцессорного обмена отказоустойчивого вычислительного комплекса. // Материалы международной научно-практической конференции 6-11 декабря 2010г. Санкт-Петербург. Издательство Политехнического университета. 2010. С. 17.

60. Беззубов В.Ф. Сравнительный анализ методов обмена в многопроцессорных системах. // Вестник компьютерных и информационных технологий. 2006. № 4. С. 51 - 56.

61. Клингман Э. Проектирование микропроцессорных систем. // «МИР». 1980. С. 453-483.

62. Акимов C.B. Четырехуровневая интегративная модель для автоматизации структурно - параметрического синтеза. // Труды учебных заведений связи. СПбГУТ. 2004. № 171. С. 165 - 173.

63. Устройство для сопряжения ЭВМ, Авторское свидетельство СССР № 1462341 G 06 F 15/16; Беззубов В.Ф.

64. Устройство для сопряжения ЭВМ с магистралью, Патент СССР № 1605242 G 06 F 13/00., Беззубов В.Ф. и др.

65. Устройство для сопряжения двух ЭВМ, Авторское свидетельство СССР № 1543415 G06F 15/16, Беззубов В.Ф.

66. Устройство для сопряжения ведущей и ведомой ЭВМ, Патент СССР № 1679493 G 06 F 13/00, Беззубов В.Ф. и др.

67. Богатырев В.А., Башкова С.А., Беззубов В.Ф., Полякова A.B., Котельникова Е.Ю., Голубев И.Ю. Надежность дублированных вычислительных комплексов // Научно технический вестник информационных технологий механики и оптики, № 6(76) 2011г. С.74 - 78.

68. Богатырев В.А., Беззубов В.Ф., Голубев И.Ю. Сравнительный анализ структур отказоустойчивых дублированных вычислительных комплексов. // Информационно - измерительные и управляющие системы. 2011. № 2. С. 8 - 12.

69. Богатырев В.А., Голубев И.Ю., Беззубов В.Ф., Организация межмашинного обмена в дублированных вычислительных комплексах // Известия ВУЗов Приборостроение, Санкт - Петербургский национальный исследовательский университет информационных технологий механики и оптики., 2012г., С.8-14.

70. Вентцель Е.С., Исследование операций, Сов. Радио., Москва, 1972г. С.232.

71. Клейнрок JI. Теория массового обслуживания. // М.: Машиностроение, 1979. С. 432.

72. Устройство для сопряжения ЭВМ с внешними устройствами. Патент СССР на изобретение № 1478222 G 06 F 13/00, Беззубов В.Ф.

73. Многоканальное резервированное устройство передачи информации, Патент № 1699027 Н 05 К 10/00, G 05 В 23/02., Беззубов В.Ф. и др.

74. Устройство для реконфигурации резервированной системы, Патент №1628725, Беззубов В.Ф. и др.

75. Международный Научно-Технический Центр. [Электронный ресурс] // TECHDB.ISTC.RU/Проекты. URL: http://www.istc.ru/istc/istc.nsf/ (19.032013г.)

76. Резервированная вычислительная система, Авторское свидетельство СССР № 1798946 Н 05 К 10/00, G 06 А 11/20, Беззубов В.Ф. и др.

77. Беззубов В.Ф., Дзбоев Е.А. Управляющая вычислительная система высокой надежности с реконфигурацией // Научно технический вестник информационных технологий механики и оптики, 2008 г. С. 228 - 231.

78. Беззубов В.Ф., Управляющая вычислительная система высокой надежности с реконфигурацией. // Информационно измерительные и управляющие системы, 2010г. №3, С. 46-50.

79. Ю - Чжен Лю, Гибсон Г., Микропроцессоры семейства 8086/8088 Архитектура, программирование и проектирование микрокомпьютерных систем. // «Радио и связь». 1987г. С. 364 - 370.

80. Хамман Ф. Отказоустойчивая операционная система Tandem NonStop Kernel. // «Открытые системы», 1997, № 3, С. 326.

81. Мамедли Э.М., Соболев H.A. Концепция обеспечения отказоустойчивости системы управления и безопасности экипажа МТКК (часть 1) // Зарубежная радиоэлектроника. - 1986г., №8, С.3-39.

82. Пономарев Л.И., Нестеров Ю.Г., и др. Вестник УГТУ-УПИ. Сер. радиотехн. // Теория и практика радиолокации земной поверхности. 2005г. № 19 (71). С. 235.

83. Воронцов М.В., Гондарь A.B., Диденко В.Б., Кондрашин A.A., Петров A.B. ВЫСОКОСКОРОСТНОЙ МЕЖМАШИННЫЙ / ВНУТРИСИСТЕМНЫЙ ИНТЕРФЕЙС RDMA. [Электронный ресурс] // E-mail: [e-mail] URL: http://www.mcst.ru>doc/voroncov_i_dr.doc (19.03.2013г.)

84. Фельдман В.М. Система на кристалле MU,CT-R500S. [Электронный ресурс] // Аннотация. URL: http://www.mcst.ru>doc/feldman080229.doc (19.03.2013г.)

85. ГОСТ Р МЭК 61508-2-2007. Функциональная безопасность систем электрических, электронных, программируемых электронных, связанных с безопасностью. Часть 2. Требования к системам. - Введ. 01.09.2008. - М.: Стандартинформ, 2008. - 68 с.

86. ГОСТ Р МЭК 61508-4-2007. Функциональная безопасность систем электрических, электронных, программируемых электронных, связанных с безопасностью. Часть 4. Термины и определения. - Введ. 01.06.2008. - М.: Стандартинформ, 2008. - 27 с.

87. Половко A.M., Гуров C.B. Основы теории надежности. - СПб: БХВ-Петербург, 2006. - 704 с.

88. Shunji Osaki, Toshihiko Nishio. Reliability Evaluation of Some Fault-Tolerant Computer Architectures. - Springer-Verlag, Berlin Heidelberg, New York, 1980. -129 p.

89. Sorin D. Fault Tolerant Computer Architecture. - Morgan & Claypool, 2009. -116 p.

90. Богатырев B.A., Башкова C.A., Беззубов В.Ф., Полякова A.B., Котельникова Е.Ю., Голубев И.Ю. Надежность дублированных вычислительных комплексов // Научно-технический вестник СПбГУ ИТМО. - 2011. - № 6 (76). -С. 74-78.

91. Богатырев В.А., Демидов Д.В., Алексанков С.М. Оценка надежности дублированных комплексов с учетом контроля // Materiali VII mezinarodni vedecko-prakticka konference Aktyalni vymozenosti vedy. - 2011. Чехия, Прага 27.06.201105.07.2011. - Прага: Education and science, 2011. - C. 57-58.

92. Bogatyrev V.A. Exchange of Duplicated Computing Complexes in Fault Tolerant Systems // Automatic Control and Computer Sciences. - 2011. - V. 46. - № 5. -P. 268-276.

93. Богатырев В.А., Бибиков C.B. Оценка функциональной безопасности систем, связанных с безопасностью // Технико-технологические проблемы сервиса. -2011.-№4.-С. 45-47.

94. Богатырев В.А. Надежность вариантов размещения функциональных ресурсов в однородных вычислительных сетях // Электронное моделирование. -1997.-№3.-С. 21-27.

95. Богатырев В.А., Богатырев C.B. Объединение резервированных серверов в кластеры высоконадежной компьютерной системы // Информационные технологии. - 2009. - № 6. - С. 41-47.

96. Богатырев В.А. Надежность функционально-распределенных резервированных структур с иерархической конфигурацией узлов // Изв. вузов. Приборостроение. - 2000. - № 4. - С. 67-70.

97. Богатырев В.А. Надежность отказоустойчивых вычислительных систем реального времени, компонуемых из многофункциональных модулей // Информационные технологии. - 2000. - № 10. - С. 11-16.

98. Богатырев В.А. Отказоустойчивые кластеры дублированных вычислительных комплексов // Информационные технологии. - 2012. - № 1. - С. 9-15.