Автоматизация анализа проектных решений с применением методов интеллектуальной обработки информации тема диссертации и автореферата по ВАК РФ 05.13.12, кандидат технических наук Макаров, Сергей Львович

• Макаров, Сергей Львович
• кандидат технических наук
• 2009

Оглавление диссертации кандидат технических наук Макаров, Сергей Львович

Глава 1. Аналитический обзор существующих методов анализа проектных решений, информационно-аналитических систем и программного обеспечения лингвистической обработки текстовых документов

1.1. Методы анализа проектных решений

1.1.1. Системы поддержки принятия решений

1.1.2. Геометрическое моделирование

1.1.3. Физическое моделирование

1.1.4. Математическое моделирование

1.1.5. Функционально-стоимостный анализ (ФСА)

1.1.6. Бизнес-плановые методы А

1.1.7. Методы инженерного анализа

1.2. Проблемы анализа неструктурированных информационных источников

1.3. Методы и средства автоматизированного анализа информации

1.3.1. Информационно-аналитические системы ;

1.3.2. Информационно-поисковые системы

1.3.3. Программные модули и системы лингвистической обработки текста

1.4. Особенности анализа информации в инвестиционно-инновационной деятельности

1.5. Выводы и постановка задачи

Глава 2. Типовая структура программного модуля анализа текстовых документов и программного комплекса автоматизации анализа проектных решений

2.1. Структура информационно-аналитической системы

2.1.1. Анализ входной проектной документации

2.1.2. Модель информационно-аналитической системы

2.1.3. Модель объекта исследования ИАС

2.1.4. Связь моделей ИАС и объекта исследования

2.1.5. Анализ существующих информационно-аналитических систем

2.1.6. Новые объекты

2.1.7. Модель контента

2.1.8. Структура базы данных аналогичных проектов

2.1.9. Программный модуль лингвистической обработки текстовых документов

2.1.9.1. Метод выделения словосочетаний (двух-, трёх-, четырёхсловных терминов). Терминологическая модель. Векторная модель

2.1.10. Средство формирования поисковых запросов

2.1.11. Средство аннотирования/реферирования документов

2.1.12. Средство отображения результатов

2.2. Модель средства автоматизированного проектирования информационно-аналитических систем

2.3. Схема работы информационно-аналитической системы

2.4. Выводы

Глава 3. Разработка методик автоматизации анализа проектных решений

3.1. Методика автоматизированного анализа проектных решений для новых объектов с использованием контента сети Интернет

3.2. Методика автоматизированного построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет по результатам лингвистического частотного анализа этого документа

3.3. Методика автоматизированного формирования экспертного заключения по проектам в инновационной сфере

3.4. Исследование результатов работы поисковых систем

3.5. Выводы

Глава 4. Реализация разработанных методик в виде программных комплексов автоматизации анализа проектных решений з

4.1. Описание модулей системы

4.1.1. Программный модуль лингвистической обработки текстовых документов

4.1.1.1. Назначение программного модуля

4.1.1.2. Установка программы

4.1.1.3. Описание процесса работы

4.1.2. Агент системы

4.1.3. База данных аналогичных проектов

4.1.4. Модуль реферирования текстовых документов

4.2. Применение модуля лингвистической обработки текстовых документов

4.2.1. Исследование текстовых документов различных жанров

4.2.2. Исследование текстов по живым системам

4.2.2.1. Живые системы :: :

4.2.2.2. Живые системы и информационные системы -

4.2.3. Программа анализа проектов и поиска аналогов в Интернет

4.3. Модуль трансформации содержания таблиц базы данных по живым системам в html-код

4.3.1. Назначение программного модуля

4.3.2. Установка модуля

4.3.3. Описание процесса работы

4.4. Программа сравнения двух текстовых документов для исследования поисковых систем и сравнения проектного решения и его аналогов

4.5. Программный комплекс автоматизированного формирования экспертного заключения по проектам в инновационной сфере

4.6. Программный комплекс автоматизированного анализа проектных решений с использованием контента сети Интернет

4.7. Выводы

Введение диссертации (часть автореферата) на тему «Автоматизация анализа проектных решений с применением методов интеллектуальной обработки информации»

Актуальность темы исследования. В настоящее время при принятии проектных решений значительное место занимают задачи анализа информации.Это связано с переходом на безбумажные сетевые формы документооборота, а также с расширением глобального информационного пространства. Информационное обеспечение систем проектирования и принятия решений складывается в значительной мере из внешних источников информации, в связи с чем весьма актуальной является задача интеллектуальной обработки и анализа информации, содержащейся в таких источниках. Возникает острая необходимость в новых средствах информационной поддержки проектных решений.Для решения задачи анализа проектных решений для новых объектов используются различные методы. Это и геометрическое моделирование и анализ конструкции, и математическое моделирование, и физическое моделирование новых объектов, и технические и технологические методы для создания сложных технических объектов, и методы функционально-стоимостного анализа (ФСА), и методы создания необходимых бизнес-планов для объекта инновации, и современные методы моделирования и инженерного анализа, и многие другие. Все эти методы анализа новых объектов науки и техники призваны осуществить некоторый количественный анализ, который может дать ответ на вопрос о том, повышается ли эффективность работы за счёт создаваемого изделия по сравнению с существующими аналогами, будет ли разрабатываемый продукт пользоваться спросом на рынке, каков будет его потенциал с точки зрения привлечения инвестиций, коммерциализации, надежности, окупаемости и т.д., иными словами анализируется его инновационная грань, и этот анализ отличается тем, что, как правило, ему подвергаются исключительно структурированные источники информации.Однако практически ни один из существующих методов не анализирует новационность предлагаемых проектных решений, т.е. новизну, которая является главным звеном инновационной деятельности. В настоящий момент прак6 тически не существует программного обеспечения, осуществляющего автоматизированный анализ проектного решения с точки зрения новационности, работающего с неструктурированными источниками информации. Существующее же программное обеспечение не решает полностью задачу автоматизации анализа проектных решений.Особенно остро нехватка таких программных средств ощущается в области экспертизы инновационных проектов, так как экспертиза проектов до сих пор не автоматизирована, а число новых проектных решений, подаваемых на рассмотрение экспертам, растёт с каждым годом.Для любого проектного решения из определённой предметной области существует некоторое описание, которое представляет собой неструктурированный электронный источник, или текстовый документ на естественном языке, содержащий необходимую информацию о предполагаемой новизне проектного решения. Информация о конкурентах рассматриваемого проектного решения содержится в сети Интернет и представляет собой такие же неструктурированные текстовые документы. Поэтому разрабатываемое программное обеспечение автоматизированного анализа проектного решения должно решать задачу интеллектуальной обработки текстовой информации, извлекаемой из подобных документов, для обеспечения решения глобальной задачи оценки новационной составляющей принимаемых проектных решений.Таким образом, совершенствование процессов проектирования новых объектов с помощью создания программного обеспечения автоматизации анализа проектных решений на новизну с применением методов интеллектуальной обработки электронных текстовых документов, содержащих информацию о проектных решениях, и аналогов, содержащихся в сети Интернет является важной и актуальной задачей, решение которой позволяет повысить эффективность принимаемых проектных решений и сократить сроки создания и ввода в эксплуатацию новых объектов, что позволяет ускорить научно-технический прогресс в различных отраслях промышленности.Цели и задачи. Целью работы является повышение эффективности анализа проектных решений на основе автоматизации этого анализа с применением методов интеллектуальной обработки информации. Повышение эффективности осуществляется минимизацией трудоёмкости экспертизы, максимизацией количества найденных аналогов проектного решения, реализацией количества ненайденных экспертом аналогов и минимизацией ресурсного обеспечения экспертизы. Для достижения поставленной цели необходимо решить следующие задачи: • обзор существующих методов анализа проектных решений; • анализ особенностей изложения новизны проектных решений; • обзор методов и средств анализа текстовых документов; • анализ существующих информационно-поисковых систем; • разработка методики автоматизированного анализа проектных решений для новых объектов с использованием контента сети Интернет; • разработка методики автоматизированного построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет по результатам лингвистического частотного анализа этого документа; • разработка методики автоматизированного формирования экспертного заключения по проектам в инновационной сфере; • разработка типовой структуры программного обеспечения автоматизированного анализа проектных решений; • создание программных средств, реализующих разработанные методики.Областью исследования диссертационной работы является обзор и разработка моделей, алгоритмов и методов синтеза и анализа проектных решений.Объектами теоретического исследования являются методы обработки текстов на естественном языке, методы анализа проектных решений, методы сравнения документов, а также методы построения информационных запросов.Объектами экспериментального исследования являются информационное и программное обеспечение анализа проектных решений, различные поисковые механизмы сети Интернет, а также разработанные программные модули системы автоматизированного анализа проектных решений.Методы исследования. При проведении исследований в работе использовались: технологии визуального и web-программирования, методы математического программирования, аппарат теории множеств, алгебраические методы, кластеризация по методу дальнего соседа, методы получения словосочетаний для русского языка, методы построения запросов.Основные положения, выносимые на защиту: 1. Методика автоматизированного анализа проектных решений, отличающаяся автоматическим поиском аналогов для новых объектов с использованием контента сети Интернет.2. Формализованная методика автоматизированного построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет, отличающаяся автоматическим формированием запросов по результатам лингвистического частотного анализа этого документа.3. Методика автоматизированного формирования экспертного заключения по проектам в инновационной сфере, отличающаяся автоматическим построением экспертных оценок, заключений и резюме.4. Типовая структура программного обеспечения автоматизированного анализа проектных решений, учитывающая разделение компонентов на обязательные и необязательные.5. Программный комплекс автоматизированного анализа проектных решений, отличающийся автоматическим поиском аналогов для новых объектов с использованием контента сети Интернет.6. Программный комплекс автоматизированного формирования экспертного заключения по проектам в инновационной сфере, отличающийся автоматическим построением бланка заключений эксперта.7. Программный модуль сравнения двух текстовых документов, отличающийся возможностью учёта многословных терминов документов.Научная новизна. Научная новизна работы заключается в следующем: 1. Разработана методика автоматизированного анализа проектных решений, отличающаяся автоматическим поиском аналогов для новых объектов с использованием контента сети Интернет.2. Разработана формализованная методика автоматизированного построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет, отличающаяся автоматическим формированием запросов по результатам лингвистического частотного анализа этого документа.3. Разработана адаптируемая методика автоматизированного формирования экспертного заключения по проектам в инновационной сфере, отличающаяся автоматическим построением экспертных оценок, заключений и резюме.Теоретическая ценность. Теоретическая ценность работы заключается в следующем: 1. Созданы методические основы интеллектуализации анализа новизны проектных решений, инвариантные к предметной области.Практическая значимость. Практическая значимость работы заключается в следующем: 1. Разработанная типовая структура программного обеспечения автоматизированного анализа проектных решений позволяет создавать программистам подобное программное обеспечение для других предметных областей.2. Проведён ряд экспериментов, доказывающих, что программное обеспечение автоматизированного анализа проектных решений, построенное в соответствии с впервые предложенными методиками, повышает эффективность этого анализа по сравнению с существующими методами этого анализа. Таким образом, усовершенствован процесс анали10 за проектных решений за счёт повышения качества информационного обеспечения принимаемых решений.3. Программные средства, реализующие методику автоматизированного анализа проектных решений, инвариантны к предметной области и могут использоваться пользователем как информационноаналитическая система поиска аналогов введенного в систему текста.4. Программный модуль лингвистической обработки текстовых документов с возможностью выбора анализируемых частей речи и глубины поиска словосочетаний позволяет пользователю анализировать любые текстовые документы и предоставлять статистику по терминам для документа. Этот модуль был внедрён рамках научноисследовательских работ по теме "Научно-методическое обеспечение создания национального информационного центра по мониторингу приоритетных направлений развития науки, технологий и техники в области живых систем" ВИНИТИ РАН (период 05 августа 2005 г. - 08 декабря 2006 г.), 5. Программный модуль сравнения двух документов с возможностью варьирования глубины анализа, с помощью которого было проведено исследование эффективности пяти информационно-поисковых систем, может быть использован пользователем для сравнения текстовых документов с целью выявления степени совпадения.6. Программный модуль перевода содержания таблиц баз данных заданного формата в html-форму позволяет быстро размещать таблицы в сети. Этот модуль был внедрён рамках научно-исследовательских работ в ВИНИТИ РАН, указанных в п. 4.7. Разработанное программное обеспечение автоматизированного формирования экспертного заключения по инновационным проектам было внедрено в рамках научно-исследовательских работ по автоматизации синтеза экспертного заключения по инновационным проектам, заявки с описанием которых подаются для участия в программе И «СТАРТ» государственного Фонда содействия развитию малых форм предприятий в научно-технической сфере.8. Результаты работы внедрены в рамках учебного процесса по дисциплине "Информационные системы" на кафедре "Вычислительная техника" МИЭМ. Обоснованность и достоверность теоретических выводов и практических рекомендаций определяется корректностью математических выкладок, использованием апробированных методов математического и компьютерного моделирования, а также положительным опытом применения и улучшением известных и выявленных критериев и оценок при проведении экспериментов по оценке эффективности предложенных методик автоматизированного анализа проектных решений с помощью программного обеспечения, реализующего эти методики на конкретных наборах текстовых документов-заявок, которые подаются для участия в программе «СТАРТ» государственного Фонда содействия развитию малых форм предприятий в научно-технической сфере.Реализация результатов. Результаты работы реализованы в виде программных компонент, которые могут быть использованы и в других областях при создании информационно-аналитических компонент и систем, и внедрены в рамках научно-исследовательских работ по теме "Научно-методическое обеспечение создания национального информационного центра по мониторингу приоритетных направлений развития науки, технологий и техники в области живых систем" ВИНИТИ РАН (период 05 августа 2005 г. - 08 декабря 2006 г.), а также - в рамках научно-исследовательских работ по автоматизации синтеза экспертного заключения по инновационным проектам, заявки с описанием которых подаются для участия в программе «СТАРТ» Фонда содействия развитию малых форм предприятий в научно-технической сфере. Модуль сравнения терминологических портретов двух документов зарегистрирован в Роспатенте в сентябре 2008 года (С №2008614408). Результаты работы также внедрены в рамках учебного процесса по дисциплине "Информационные системы" на кафедре "Вычислительная техника" МИЭМ. Апробация работы. Результаты диссертационной работы докладывались и обсуждались на научно технических конференциях студентов, аспирантов и молодых специалистов МИЭМ, Москва 2003 г., 2004 г., 2005 г., 2006 г. 2009 г.; IV, V, УП межвузовских ежегодных научно-практических конференциях "Информационные технологии XXI века", X международной научно-практической конференции "Наука - сервису", VI студенческой межвузовской конференции "Информационные системы будущего" ИИТ МГУ С, Москва 2003 г., 2005 г.; научно-технической конференции студентов, аспирантов и молодых специалистов "Информационные технологии в бизнесе", ГУ ВШЭ, Москва 2006 г, IV международной научно-технической конференции "Искусственный интеллект в XXI веке. Решения в условиях неопределённости", Пензенская государственная технологическая академия, АНОО "Приволжский Дом Знаний" Пенза 2006 г., а также на заседаниях кафедры "Вычислительная техника" МИЭМ в 2005 — 2009 гг.Публикации. По материалам диссертационной работы опубликовано 15 печатных работ, в том числе 3 статьи в журналах ВАК и 12 трудов отечественных и международных научно-технических конференций. Список публикаций представлен в приложении Д. Структура работы. Диссертационная работа состоит из введения, 4 глав, заключения, списка литературы (87 наименований) и 5 приложений. Основное содержание диссертации изложено на 170 страницах, включая 5 таблиц, 38 рисунков; приложения содержат 127 страниц, включая 3 акта внедрения и 1 свидетельство о регистрации программы.Во введении обоснована актуальность работы, сформулированы цель и задачи исследования, его новизна и практическое значение, области и методы исследования, положения, выносимые на защиту, обоснованность и достоверность, а также реализация и апробация работы. Кратко изложено содержание диссертации по разделам.В первой главе проводится обзор существующих методов анализа проектных решений для новых объектов, из которого формируется проблема ана13 лиза новизны проектируемого объекта и проектных решений. Формулируются основные проблемы области анализа проектных решений. Рассматривается проблема анализа новизны проектных решений, особенности которой приводят к необходимости анализа существующих методов и средств лингвистической обработки текстовых электронных документов и выбора такого средства для дальнейшей работы. Выделяются проблемы анализа неструктурированных информационных источников, рассматриваются особенности анализа инвестиционно-инновационных проектов. В конце главы формулируются выводы и на основе проведённого обзора существующих методов и средств анализа проектных решений определяются критерии повышения эффективности этого анализа, а также формируются цель и задачи исследования.Во второй главе предлагается структура программного комплекса автоматизации анализа проектных решений, разрабатывается модель программного комплекса и модели объекта исследования этого комплекса как новации, а также рассматриваются компоненты программного комплекса, приводятся терминологическая и векторная модель документов, методы кластеризации и оценки степени схожести различных документов, рассматривается и исследуется лингвистическая модель выделения многословных терминов. В конце второй главы формулируются выводы о составе программного комплекса автоматизации анализа проектных решений и о функциях такого комплекса.В третьей главе рассматривается разработка методики автоматизации анализа проектных решений для новых объектов с использованием информационного контента сети Интернет, методики автоматизированного построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет по результатам лингвистического частотного анализа этого документа, а также методики автоматизированного формирования экспертного заключения по проектам в инновационной сфере. Проводится исследование существующих информационно-поисковых систем с целью выбора наиболее подходящих для тех или иных задач и дальнейшего использования в составе программного комплекса автоматизации анализа проектных решений и про14 граммного комплекса автоматизированного формирования экспертного заключения по проектам в инновационной сфере. В конце главы формулируются выводы о предложенных методиках и об эффективности рассмотренных поисковых систем в соответствии с результатами проведённых экспериментов.В четвёртой главе рассматривается использование разработанных методик и моделей для решения практических задач. Рассматривается реализация различных модулей, из которых состоит программный комплекс автоматизированного анализа проектных решений, принципы их функционирования и их структура, в частности: входящего в состав комплекса модуля анализа текстов и гипертекстов для анализа информационных проектов; модуля сравнения двух текстовых документов, на основе которого было проведено исследование эффективности наиболее популярных информационно-поисковых систем; системы анализа документа на новизну, использующую разработанные методику построения запросов для поискового механизма и методику анализа этого документа на новизну; системы автоматизации принятия экспертного заключения по инновационным проектам. Рассматривается реализация и предпосылки создания вспомогательных модулей при внедрении результатов работы в рамках различных научно-исследовательских работ на предприятия и организации, а также результаты многочисленных экспериментов, проведённых с помощью разработанного программного обеспечения и доказывающих эффективность предложенных методик автоматизации анализа проектных решений, на основе которых формулируются выводы в конце главы.В заключении подводятся итоги проделанной работы. Перечисляются основные результаты диссертации и следующие из них выводы.В приложении А рассмотрены модули лингвистической обработки тестовых документов.В приложении Б рассмотрены некоторые существующие информационно-аналитические системы.В приложении В рассмотрены существующие информационнопоисковые системы.В приложении Г представлен тестовый набор из трёх классов документов, на основе которого проводилось исследование и апробация созданного лингвистического модуля.В приложении Д приведён список опубликованных работ по теме диссертации, а также в качестве приложений представлены 3 акта внедрения и 1 свидетельство о регистрации программы.

Заключение диссертации по теме «Системы автоматизации проектирования (по отраслям)», Макаров, Сергей Львович

1. На основе проведенного анализа существующих информационно аналитических систем предложена классификация компонент таких систем и программного комплекса автоматизации анализа проектных решений на необходимые и опциональные.2. Впервые разработана методика автоматизации анализа проектных решений для новых объектов с использованием информационного контента сети Интернет.3. Впервые разработана формализованная методика автоматизированно го построения поисковых запросов для контекстного поиска аналогов текстового документа в сети Интернет по результатам лингвистиче ского частотного анализа этого документа.4. Впервые разработана адаптируемая методика автоматизированного формирования экспертного заключения по проектам в инновационной сфере.5. На основе исследования поисковых систем выбрана система, наиболее подходящая для поиска аналогов в сети Интернет.6. Разработана типовая структура программного обеспечения автомати зированного анализа проектных решений.7. Разработаны программные средства, реализующие предложенные принципы, методы, методики и модели автоматизации анализа про ектных решений, а именно: • разработан программный модуль лингвистической обработки тексто вых документов с возможностью выбора анализируемых частей речи; • на основе лингвистического модуля разработан программный модуль сравнения двух документов с возможностью варьирования глубины анализа, с помощью которого было проведено исследование эффек тивности пяти наиболее популярных информационно-поисковых сис тем; • разработан программный модуль перевода содержания таблиц баз данных заданного формата в html-форму; • разработан программный комплекс автоматизированной оценки сте пени новизны любого текстового документа, результатом работы ко торой является список найденных в Интернет аналогов и степень их совпадения с этим документом; • разработан программный комплекс автоматизированного синтеза экс пертного заключения по инновационным проектам программы "СТАРТ" Фонда содействия развитию малых форм предприятий в на учно-технической сфере.8. Проведена апробация (внедрение) программных средств на несколь ких наборах текстов определённого формата и на текстах по живым системам в рамках научно-исследовательской работы в ВИНИТИ

9. Проведена апробация (внедрение) системы автоматизированного син теза экспертного заключения по инновационным проектам программы "СТАРТ" Фонда содействия развитию малых форм предприятий в на учно-технической сфере на большом количестве заявок по данной программе.10. Результаты диссертационной работы внедрены в учебный процесс в рамках учебного курса "Информационные системы" на кафедре "Вы числительная техника" МИЭМ. П. За, счёт разработанных методик автоматизации анализа проектных решений осуществлено совершенствование процессов проектирова ния новых объектов, в частности: уменьшено время принятия решения программным комплексом или экспертом, пользующимся результата ми работы программного комплекса, расширено поле поиска аналогов проектных решений за счёт привлечения контента сети Интернет, число просматриваемых аналогов проектного решения увеличено в несколько раз, полностью автоматизировано рассмотрение и вынесе ние экспертного мнения и оценки отдельных разделов проектного ре шения благодаря созданию базы правил оценок.12. Поведены многочисленные эксперименты с реальными файлами зая вок программы "СТАРТ" Фонда содействия развитию малых форм предприятий в научно-технической сфере, доказывающие эффектив ность разработанных методик автоматизированного анализа проект ных решений.13. Модуль сравнения терминологических портретов двух документов за регистрирован в Роспатенте в сентябре 2008 года (С №2008614408).

Список литературы диссертационного исследования кандидат технических наук Макаров, Сергей Львович, 2009 год

1. / Коллектив разработчиков и пользователей википедии. URL: http://ru.wikipedia.org/wiki/CnriP

2. Turban. Е. Decision support and expert systems: management support systems./Englewood Cliffs, N.J.: Prentice Hall. 1995. P. 887.

3. Конструктивная блочная геометрия — Википедия Электронный ресурс. /Коллектив разработчиков и пользователей википедии. URL: http://ru.wikipedia.org/wikiЯCoнcтpyктивнaя_блoчнaя_гeoмeтpия

4. Физическое моделирование — Википедия Электронный ресурс. / Коллектив разработчиков и пользователей википедии. URL: http://ru.wikipedia.org/wiki/OH3H4ecKoe моделирование

5. Математическое моделирование — Википедия Электронный ресурс. /Коллектив разработчиков и пользователей википедии. URL: http://ru.wikipedia.org/wiki/MaTeMaTH4ecKoe моделирование

6. Шарипов Р.Х. Функционально-стоимостный анализ (ФСА). Краткая информация для руководителей производственных предприятий Электронный ресурс. / Самара : 0 0 "ТРИЗ-Самара", 2004. URL: http://www.metodolog.ru/00940/00940.html

7. МиВа - бизнес-планирование Электронный ресурс. / Группа разработчиков сайта компании МиВа. - 0 0 0 "МиВа", 2004. URL: http://wvvw.miva-consult.ru/bp.html

8. Дюк В., Самойленко A. Data Mining: учебный курс / СПб. : Питер, 2001.368 с.

9. Hearst Marti A. Untangling Text Data Mining Electronic resource. / URL:http:/Avw^,.sims.berkelev.edu/%7Ehearst/papers/acl99/acl99-tdm.html

10. Data Mining Electronic resource. URL:http://mwv.megaputer.com/dm/dml 01 ,php3

11. Berson Alex, Smith Stephen, Thearling Kurt. An Overview of Data MiningTechniques Electronic resource. / URL: http://v/w\v.thearling.com/text/dmtechniques/dmtechniques.htm

12. Data Mining Systems Electronic resource. / group of editors of Megaputer Intelligence Inc. URL: http://\vw\v.megaputer.com/dm/svstems.php3

13. Система Артефакт компании Интергум Электронный ресурс. / группаразработчиков компании "Интегрум". URL: http://www.integrum.ru/

14. Система Галактика ZOOM Электронный ресурс. / группа разработчиковкорпорации "Галактика". URL: http://zoom.galaktika.ru

15. Принципы работы поисковой машины Рамблер. Скорость поиска Электронный ресурс. / группа разработчиков компании Рамблер. URL: http://www.rambler.ru/doc/architecture.shtml

16. Информационно-поисковая система "Задачи" Электронный ресурс. /группа разработчиков Московского Центра Непрерывного Математического Образования и Московской государственной Пятьдесят седьмой школы. URL: http://zadachi.mccme.ru/

17. Информационно-поисковая система "Роспатент" Электронный ресурс. /группа разработчиков сайта Федеральной Службы по Интеллектуальной Собственности, Патентам и Товарным Знакам (РосПатент). URL: http ://www. fips.ru/russite/default.htm

18. Козлов А.В. Повышение эффективности автоматизированного документального поиска в гипертекстовых ресурсах Интернет : Диссертация к.т.н. по специальности 05.13.11. М. : ПроСофт-М, 2005. 138 с. РГБ ОД, 61:055/2272.

19. Информационно-поисковая система "Артефакт" Электронный ресурс. /группа разработчиков компании "Интегрум". URL: http://www.integrum.ru/

20. Мальцева СВ. Научно-методические основы автоматизации проектирования информационной архитектуры Web-ресурсов Интернет : Диссертация д.т.н. по специальности 05.13.12. М. : ПроСофт-М, 2005. 488 с. РГБ ОД, 71:05-5/314.

21. Аннотатор SDK 1.0 - автоматическое аннотирование документов на русском и английском языках Электронный ресурс. / группа разработчиков ЗАО "МедиаЛингва". URL: http://www.medialingua.ru/products.asp7category id=8800&product id=8806

22. Система автоматического реферирования документов TextReferent Электронный ресурс. / группа разработчиков компании МПИЦ "Микросостемы". XJKL: http://www.analyst.ru

23. Дилъман В.М. Болыпие биологические часы Электронный ресурс. /URL: http://www.inventors.ru/index.asp?mode=2343

24. Карташев В.А. Система систем. Очерки общей теории и методологии. М.: Прогресс-Академия, 1995.

25. Емельянов В.В., Ясиновский СИ. Введение в интеллектуальное имитационное моделирование сложных дискретных систем и процессов. Язык РДО.М. :АНВИК, 1998.

26. Акофф Р., Эмери Ф. О целеустремлённых системах. М. : Советское радио,1974.

27. Андрейченкова О. Н. Новый подход к проблеме коллективного выбора набазе удовлетворения взаимных требований сторон : Статья / "Программные продукты и системы"; №3, 2001.

28. Осипов Г. Динамика в системах, основанных на знаниях / Изв. РАН.Сер. "Теория и системы управления"; №5, 1998.

29. Абовский Н.П. Творчество: системный подход, законы развития, принятие решений. М. : СИНТЕГ, 1998.

30. Ивахненко А.Г. Непрерывность и дискретность. Киев: Наукова думка,1990.

31. Клир Дж. Системология. Автоматизация решения системных задач. М. :Радио и связь, 1990.

32. Бугайченко Д. Ю. План лекций "Формальные методы описания интеллектуальных агентов". СПб. : СПГУ, 2005.

33. Кузин Ф. А. Диссертация: Методика написания. Правила оформления.Порядок защиты. Практическое пособие для докторантов, аспирантов и магистрантов. М. : "Ось-89", 2000. 320 с.

34. Кузин Ф. А. Кандидатская диссертация. Методика написания, правилаоформления и порядок защиты. Практическое пособие для аспирантов и соискателей ученой степени. / 5-е изд., доп. М. : "Ось-89", 2000. 224 с.

35. Радаев В. В. Как организовать и представить исследовательский проект:75 простых правил М. : ГУ - ВШЭ: Инфра - М, 2001. 203 с.

36. Hearst Marti A. What Is Text Mining? Electronic resource. / URL:http://www.sims.berkelev.edu/%7Ehearst/text-mining.html

37. Introduction to Web Data Mining Electronic resource. URL:http ://www.megaputer. com/products/wa/intro.php3

38. Thearling Kurt. Some Thoughts on the Current State of Data Mining SoftwareApplications Electronic resource. / URL: http://www.thearling.com/text/dsstar/top 10.htm

39. Thearling Kurt, Frawley Andrew.Data Mining Can Bring Pinpoint Accuracyto Sales Electronic resource. / URL: http://www.thearling.com/text/masshightech.htm

40. Thearling Kurt. Increasing customer value by integrating Data Mining andCampaign Management software Electronic resource. / URL: httr)://www.thearling.com/text/integration/integration.htm

41. Berson Alex, Smith Stephen, Thearling Kurt. Customer Acquisition and DataMining Electronic resource. / URL: http://www.thearling.com/text/chapterl O/chapterl O.htm

42. Thearling Kurt. Data Mining and Privacy: A conflict in the making? Electronic resource. / URL: http://www.thearling.com/text/dsstar/privacy.htm

43. Greening Dan R. Data Mining on the Web: There's Gold in that Mountain ofData Electronic resource. / URL: http://www.webtechniques.com/archives/2000/01/greening/

44. Thearling Kurt. An Introduction to Data Mining: Discovering Hidden Value inyour Data Warehouse Electronic resource. / URL: http://www.thearling.com/text/dmwhite/dmwhite.htm

45. Slynko Yuri, Ananyan Sergei. WebAnalyst Server™ - universal platform forintelligent e-business Electronic resource. / URL: http://www.megaputer.com/tech/wp/wm.php3

46. Ananyan Sergei, Kharlamov Alexander. Automated Analysis of Natural Language Texts Electronic resource. / URL: http://vvww.megaputer.com/tech/wp/tm.php3

47. Text Mining and the Knowledge Management Space Electronic resource. /Semio Corporation. URL: http://www.dmreview.com/whitepaper/paper sub. cfm?whitepaperld=l 0080

48. Market Basket Analysis Electronic resource. / group of editors of Megaputer1.telligence Inc. URL: http://www.megaputer.com/tech/wp/mba.php3

49. Bugher Grant. Market Basket Analysis of the Sales Data for a Client of Cambridge Technology Partners Electronic resource. / URL: http://www.megaputer.com/companv/cases/cambridge mba.php3

50. Kiselev Mikhail, Ananyan Sergei. Symbolic Knowledge Acquisition Technology Electronic resource. / URL: http://www.megaputer.com/tech/wp/skat.php3

51. Ananyan Sergei. Data Mining Components for Direct Marketing: The tale oftwo DMs Electronic resource. / URL: http://www.megaputer.com/tech/wp/com.php3

52. Slynko Yuri, Ananyan Sergei. COM and OLE in data mining: Perspectives,benefits and implementations Electronic resource. / URL: http://www.megaputer.com/tech/wp/com ole.php3

53. Maturana H., Varela H. F., Uribe R. Autopoiesis: The organisation of livingsystems, its characterization and a model. 1974. P. 187-196. ("Biosystems" magazine; №5 (Issue 4)).

54. Wooldridge M. J. Intelligent agents (Multiagent systems). 2001. P. 27-29.

55. Петренко А.И., Семенков О.И. Основы построения систем автоматизированного проектирования. Киев : Высшая школа, 1984. 294 с.

56. Дружинин В.В., Канторов Д.С.Системотехника. М. : Радио и связь, 1985.

57. Майкевич Н. В. Исследование методов анализа Интернет-ресурсов и реализация на этой основе мульти-агентной системы поиска информации : Диссертация к.т.н. по специальности 05.13.11. Переславль-Залесский, 1999.

58. Вермишев Ю.Х. Основы автоматизации проектирования. М. : Радио иСвязь, 1988.

59. Норенков И.П. Основы автоматизированного проектирования. М. : МГТУим. Н.Э. Баумана, 2000.

60. Андрейчиков А.В, Андрейчикова О.Н. Интеллектуальные информационные системы. М. : "Финансы и статистика", 2004.

61. Тарасов В. Б. От многоагентных систем к интеллектуальным организациям: философия, психология, информатика. М.: Эдиториал УРСС, 2002

62. Brooks R. A. Intelligence without Representation. "Artificial Intelligence"; No.47, 1991.

63. Трахтенгерц Э. А. Взаимодействие агентов в многоагентных системах."Автоматика и телемеханика"; № 9, 1998.

64. Городецкий В. И. Многоагентные системы: основные свойства и моделикоординации поведения. "Информационные технологии и вычислительные системы"; № 1, 1998.

65. Лефевр В. Конфликтующие структуры. М.: Советское радио, 1973.

66. Zlotkin G., Rosenschein J. S. Mechanisms for Automated Negotiation in StateOriented Domain. "Journal of Artificial Intelligence Research"; # 5, 1996.

67. Варшавский В. И., Поспелов Д. А. Оркестр играет без дирижёра. М.: Наука, 1984.

68. Цетлин М. Л. Исследования по теории автоматов и моделированию биологических систем. М.: Наука, 1969.

69. Georgeff М. P., Rao S. Social Plans: Preliminary report : Proceedings of 3rdEuropean Workshop on Modeling Autonomous Agents and Multi-Agent Worlds. North Holland, 1992.

70. Wooldridge M. J. The Logical Modeling of Computational Multi-Agent Systems: phd thesis. Manchester, 1992. 153 p.

71. Wooldridge M. J., Jennings N. R. Intelligent Agents: Theory and Practice : Article. "The Knowledge Engineering Review"; 10(2), June 1995.

72. Нили Мэт. Создание мобильных агентов .NET для взаимодействия по сети. MSDN Magazine Русская Редакция, Февраль 2006.

73. Аветисян Р. Д. Разработка и исследование механизмов динамическоговзаимодействия различных стратегий поиска информации : Диссертация к.т.н. по специальности 05.13.06. М., 1996.

74. Бойцов И. Системы поиска по массивам неструктурированной информации : Статья. СПб. и др. : "Компьютер-Информ"; №19 (4-17 ноября) 2002. URL: hUp://www.relib.com/articles/article.asp?id=216

75. ПО RCO Semantic Network 2.0 для автоматического анализа текста Электронный ресурс., / Компания "Гарант-Парк-Интернет". URL: www.parking.ru

76. Нежданов И. Анализ неструктурированной информации, или правиламедленного чтения. ООО "Р-Техно"."

77. Зенькевич Н. Интеллектуальные агенты в Интернете Электронный ресурс. : статьи и ссылки на примеры систем. URL: http://webagents.report.ru/ 5FolderID 265 .html

78. Информационно-аналитическая система "Медиалогия" Электронный ресурс. / группа разработчиков ООО "Медиалогия". URL: http://www.medialogia.ru/about/

79. Логичев В. Каталог лингвистических программ и ресурсов в СетиЭлектронный ресурс. / URL: http://vvww.rvb.m/soft/catalogue/catalogue.html

80. ГОСТ Р 7.0.5-2008. Национальный стандарт Российской Федерации. Система стандартов по информации, библиотечному и издательскому делу. Библиографическая ссылка. Общие требования и правила составления. Издание официальное. М. : Стандартинформ, 2008.