Курносов Ю.В., Конотопов П.Ю. Аналитика

Подождите немного. Документ загружается.

391

Осознанная же потребность в коммуникации (мне нужен совет Петровича) при

ведении ИАР - это уже "почти ответ" на вопрос, так как вопрос является

способом реализации активной стратегии добывания знаний, а отсутствие

результата беседы с "Петровичем" способно повлечь за первым актом

коммуникации и последующие. По этой причине неинтеллектуальная

телекоммуникационная среда может повысить

эффективность ИАР лишь

в части, касающейся активных стратегий добывания знания.

А как быть с неосознанными, не сформулированными или еще не

возникшими вопросами? Существуют ли пассивные стратегии добывания

знаний? - Если считать, что ожидание новых данных - это стратегия, то,

пожалуй, существуют. Сосредоточенное ожидание новых данных - это тоже

вопрос, но вопрос "самого общего

плана". В таком вопросе еще нет самого

вопросительного слова - ни "что", ни "где", ни "когда".

Увы, очень часто вопрос, не спровоцированный внешними

обстоятельствами, в принципе не может быть сформулирован на этапе

ИАР. Это означает, что в неявном виде он переходит и в конечную

информационную продукцию аналитика. В результате за рамками внимания

руководителя остаются, возможно, наиболее существенные аспекты

проблемы...

Какие механизмы выявления "незаданных вопросов" известны

человеку? - Один из методов борьбы с такими "незаданными вопросами" - это

диалог. Диалог - это эффективный способ "визуализации" системы

рассуждений и сопоставления их с другой моделью мира.

Деятельность же аналитика "монологична" - в большинстве случаев

аргументы и контраргументы формулируются им

самим. При логическом

анализе активно используется "более молодая" вторая сигнальная система,

устойчивость функционирования которой намного ниже, нежели у первой

сигнальной системы, опирающейся на рефлексы. Поэтому сам процесс ИАР

обладает слабой устойчивостью по отношению к нерегулярным внешним

раздражителям (тому, что не может быть "подавлено" на уровне автоматизма).

Для многих, если не

для большинства аналитиков при ведении напряженной

аналитической работы даже поступление новой (а иногда и релевантной

потребностям аналитика) информации может явиться тем раздражителем,

который способен снизить его работоспособность.

Соответственно, возникает противоречие между потребностью в диалоге

(раздражителе) и потребностью в изоляции от раздражителей. И вот тут,

похоже, начинает проясняться суть проблемы: видимо,

надо рассмотреть какие

типы и режимы проявления раздражителей могут восприниматься как

желательные, учредить некий регламент общения, а уж далее попытаться

подчинить ему всю систему ведения диалога.

Деятельность человека подчиняется так называемому "закону

колоколообразных кривых" (их вид показан на рисунке 4.4). Смысл этого

392

закона заключается в том, что любое изменение ситуации приводит к

временному снижению эффективности в результате возникновения

дезадаптационного стресса.

Е - эффективность

Т - время

смена

инструментария

восстановление

эффективности

Рисунок 4.4 - Иллюстрация закона колоколообразных кривых

Если рассматривать, например, процесс внедрения новой техники,

программного обеспечения, призванных повысить эффективность решения тех

или иных задач, то на протяжении некоторого времени, требующегося для

адаптации, система снижает свою эффективность и процесс наращивания

эффективности происходит с некоторой задержкой. Когда степень новизны

слишком высока, то система после

такого стресса может и не вернуться к

прежним показателям эффективности (это происходит, когда исходный

тезаурус принципиально несовместим с новым и не позволяет системе

приспособиться к происшедшим изменениям). Но в целом, если последнее

замечание учтено и преемственность тезауруса соблюдена, процесс роста

эффективности системы подчиняется закону S-кривых. Аналогичные явления

наблюдаются и в

момент смены обстановки или появления новой

информации.

Однако порог возникновения дезадаптационного стресса может быть

повышен за счет специальных мероприятий. Отрицательный эффект от

появления новых данных может быть снижен при выполнении следующих

условий:

- данные релевантны текущим информационным потребностям аналитика;

- момент появления данных предсказуем;

- проблема интеллектуальной изолированности аналитика преодолена

благодаря

наличию мощной телекоммуникационной компоненты,

обеспечивающей возможность получения доступа к дополнительным

информационным массивам и консультаций коллег.

393

Обеспечить эти условия можно только при условии, что

телекоммуникационная среда является "интеллектуальной", то есть, способна

отслеживать текущие информационные потребности аналитика. Такая среда

должна, по возможности, протоколировать логику рассуждений аналитика по

некоторым внешним проявлениям и в фоновом режиме осуществлять поиск и

отбор аргументов и контраргументов, потребность в которых еще только

назревает.

В настоящее время для интеллектуализации рабочей среды аналитика

чаще всего используются экспертные системы, но при анализе процессов,

протекающих в организационных, организационно-технических, социальных и

экономических системах, обладающих высокой динамикой, полнота эвристик,

заложенных в экспертную систему (ЭС), не может быть обеспечена. Для того

чтобы обеспечить необходимый уровень интеллектуальной поддержки ИАР,

подход

к построению баз знаний должен быть пересмотрен: из систем,

предназначенных для хранения неизменяемых во времени знаний, они должны

превратиться в системы, предназначенные для накопления эволюционирующих

знаний.

При этом знания в таких системах должны проходить все этапы

эволюции: от выявления факта повторяемости некоторых, еще не имеющих

интерпретации, признаков - до установления их

семантики и области

применимости. Это очень важно, поскольку в обычных базах знаний

экспертных систем свое отражение находят лишь те повторяющиеся сценарии,

которым сопоставлена некоторая интерпретанта. Как правило, первый

прецедент повторения некоторого сценария остается за рамками внимания

эксперта, а тем более - неприспособленной для этого ЭС. Поэтому существует

феномен латентной (скрытой, не обнаруженной

) повторяемости, которую

не могут выявить экспертные системы. Вероятно, читатель здесь вспомнит о

системах data mining - это вполне логично: именно здесь они были бы весьма

кстати.

Это значит, что следует идти по пути интеграции в

коммуникационные среды систем искусственного интеллекта,

хоть и не способных интерпретировать наблюдаемые явления, но

способных распознать повторение некоторого сценария

оповестить об этом аналитика. Нечто похожее делают системы

интеллектуального анализа данных при обнаружении отклонений от нормы. В

худшем случае такая система лишь укажет аналитику на необходимость

инициировать диалог, на существование потребности в консультациях, которые

могут быть получены только в результате непосредственного общения с

экспертом, а в лучшем - позволит аналитику самостоятельно

сопоставить

информационный контекст (интерьеры) событий и выдвинуть гипотезу о

значении повторно наблюдаемого процесса.

394

В рамках разработок в области автоматизированных систем поддержки

электронного бизнеса класса B2B (Business to Business - уровень

взаимодействия корпоративных субъектов экономической деятельности)

постепенно начинает формироваться комплекс подходов и технологий,

приближающих момент решения этой проблемы. Имеются в виду

интеллектуальные приложения на базе автономных программных агентов и

языков гипертекстовой разметки, пытающихся учесть специфику поведения и

интересов посетителей

электронных торговых площадок в ГСТК Интернет, с

тем, чтобы адаптироваться к их индивидуальным потребностям, поведению и

предоставить им именно те сведения, которые могут потребоваться.

Еще одним немаловажным аспектом ИАР является то, что факт

отсутствия ожидаемых данных также является информацией для

аналитика. Использование сведений такого рода возможно тогда, когда

существует некая

модель, определяющая ожидания аналитика относительно

момента появления данных, подтверждающих те или иные события. Но часто

при построении систем автоматизации ИАР этот аспект работы аналитика

игнорируется, а аналитик, увы, не всегда в состоянии помнить о том, что в тот

или иной момент времени после события А должно наступить событие Б,

сопровождающееся появлением

данных Д(Б) - для этого следует помнить не

только последовательность событий но и их информационный контекст

(интерьеры).

Таким образом, решению проблемы ослабления дезадаптационного

стресса, вызываемого неполнотой знаний аналитика и системы эвристик ЭС,

могут служить именно системы гибридного интеллекта. "Гибридность" таких

систем должна заключаться не только в том, что благодаря

системе

коммуникаций между отдельными субъектами ИАР формируется

коллективный разум, но и в том, что коллективный разум должен включать в

себя и те компоненты, которые обеспечиваются средствами автоматизации в

виде систем искусственного интеллекта и экспертных систем. С одной

стороны, такие системы призваны решать проблему интеллектуальной

изолированности аналитика за счет создания среды информационного

взаимодействия, а с другой - управлять режимом предоставления данных, брать

на себя функции управления поиском и отбором релевантных текущей работе

аналитика.

Как это может быть сделано?

Прежде всего, подобная система (система гибридного интеллекта)

должна быть интегрирована с инструментами типа майнд-мэпперов,

которые должны стать одним из основных инструментов работы

аналитика, за

счет чего может быть осуществлена формализация

системы рассуждений аналитика, включая и ссылки на данные,

положенные в основу аргументации. Впрочем, если бы имели место

395

проговаривание рассуждений, их регистрация, распознавание речи, логико-

лингвистическая обработка высказываний и автоматическое построение

логико-лингвистических структур

101

, отражающих рассуждения аналитика,

было бы и того лучше. Такие модели с применением средств лингвистической

обработки текстов могут быть подвергнуты автоматизированному анализу, за

счет чего система сможет сформулировать поисковые задания для подбора

аргументации, провести поиск ранее отмечавшихся сценариев анализа и

предложить дополнительные массивы данных, а также сведения о возможных

дополнительных источниках

информации. Еще одна возможность,

представляющаяся вполне реализуемой при современном уровне развития

информационных технологий - это возможность отыскания шаблона сценария

анализа, характерного для данного аналитика. Что позволяет предложить ему

для ознакомления группу сценариев анализа, полученных в результате

протоколирования работы других аналитиков.

Кроме того, используя лингвистические технологии, системы гибридного

интеллекта способны регламентировать процесс информационного

взаимодействия между аналитиками как на уровне представления данных, так и

на уровне управления временными параметрами процесса коммуникации.

Благодаря первой группе регламентов может быть снят (или ослаблен) стресс

дезадаптации, вызванный различиями в способах представления данных, а

благодаря введению временных регламентов может быть снижен эффект

неожиданности акта коммуникации, сформирована привычка к разбиению

ИАР

на временные интервалы, посвященные различным видам активности.

Однако и это не все положительные свойства таких систем... Они могут

стать мощным инструментом подготовки аналитиков, их ввода в контекст

текущей ситуации, формирования рабочих групп в распределенных средах, что

очень важно в крупных территориально распределенных информационно-

аналитических службах государственного и ведомственного подчинения,

диспетчирования

информационных потоков по информационным

направлениям и так далее.

101

Подобные задачи уже сейчас решаются в рамках проектов DARPA

(исследовательский центр МО США). Более того, часть разработанных методов

уже реализованы, несмотря на существование ряда технологических проблем. В

этом - 2002 - году, США заявили о завершении разработки системы

тембронезависимого распознавания речи на базе оригинальной нейроподобной

сети (всего 30 специфически построенных "нейронов", основным отличием

которой от

обычных перцептронных сетей является отказ от использования единой

тактовой частоты для всей сети). На нашем же перекошенном "рынке" появляются

неграмотно переделанные программные продукты типа "Горыныч" (переделка

приличного для своего времени продукта фирмы Dragon Software, США), которые,

не будучи на нижнем уровне адаптированы к фонетическому строю русского языка,

просто дискредитируют идею автоматического распознавания

речи.

396

Комментированному перечислению преимуществ такой идеологии

построения систем комплексной поддержки ИАР можно было бы посвятить

еще много страниц. Но мы предоставляем читателям возможность, как-нибудь

на досуге, самостоятельно поразмышлять в этом направлении.

9.7 СРЕДСТВА СНИЖЕНИЯ РАЗМЕРНОСТИ МАССИВА

ИЗМЕРЕНИЙ

Класс инструментальных средств поддержки процессов анализа данных -

это весьма пестрый по составу

класс, объединенный одним свойством

входящих в него средств: все они направлены на преодоление проблемы

большой размерности. Сущность проблемы заключается в том, что человек,

хотя и устроен как мощнейшая система анализа и обработки данных, но

система эта обладает недостаточно мощной подсистемой сбора данных. Она,

эта подсистема сбора данных, обладает относительно низким разрешением

инерционна и обладает множеством иных недостатков. Отсюда это стремление

к созданию все новых инструментальных средств, расширяющих возможности

органов чувств... Но, как только очередная проблема этого сорта решена, так

сразу появляются проблемы коммуникации с очередным созданным

инструментом, преодоления избыточности массива измерений, обеспечения

избирательности и иные - то есть, все то, что порождено

высокой размерностью

массива измерений. Эти проблемы порождены "неинтеллектуальностью"

инструментария сбора данных.

В результате человек концентрируется на изыскании путей снижения

размерности, выделения именно тех фрагментов данных, которые

представляют интерес для решения конкретной проблемы, сведения процесса

анализа к оцениванию минимального числа интегральных показателей,

позволяющих с заданной точностью решать те или иные задачи.

В принципе, весь инструментарий ИАР может быть по ряду признаков

отнесен именно к этому классу, однако лучше всего в этот класс вписываются

средства статистической, корреляционной и спектральной обработки

результатов наблюдений. Наибольшее распространение получили здесь

программные комплексы статистической обработки данных.

Для пользователей, имеющих дело со сверхбольшими объемами данных,

характеризующихся высоким уровнем формализации

представления, серьезной

альтернативы использованию этого класса программного обеспечения пока

нет. Сегодня на этом рынке лидируют профессиональные западные пакеты

статистической обработки и среды математического моделирования. В

большинстве из них реализованы специальные высокоуровневые языки

программирования для реализации собственных алгоритмов обработки данных.

Их разработка осуществляется путем комбинирования готовых подпрограмм,

397

поставляемых с данным программным продуктом в специализированных

библиотеках. При этом задача пользователя состоит, главным образом, в

исследовании информативности и выделении наиболее информативных

признаков функционирования объекта изучения, установлении взаимосвязи

между их изменениями и состоянием объекта. Кроме того, пользователям

предоставляется возможность разработки собственных процедур с

применением встроенных средств разработки или внешних сред

программирования.

Существует условное деление инструментальных средств этого класса на

профессиональные (специализированные) и универсальные, не имеющие

привязки к отрасли исследований программные продукты. Безусловно,

специализированные программные продукты за счет адаптации к классу

решаемых задач обладают большей эффективностью при решении прикладных

задач в заданной области исследований, но при проведении

междисциплинарных исследований универсальным средам

альтернативы нет.

Поэтому на рынке представлены как специализированные системы обработки

данных (например, предназначенные для экономических или социологических

исследований), так и универсальные системы.

Универсальные пакеты обладают несколько меньшими возможностями.

Но, с другой стороны, их стоимость значительно ниже, чем стоимость

профессиональных. Универсальные пакеты во многом схожи по составу

методов обработки, реализованы по модульному

принципу и за счет обращения

к процедурам и функциям операционной системы упрощают работу с графикой

и интерфейсными элементами. Однако, при приобретении таких систем

следует убедиться, что они действительно реализуют требуемые методы и

алгоритмы обработки данных.

Существует около тысячи распространяемых на мировом рынке пакетов,

решающих в том или ином виде задачи

статистического анализа данных, и

реализованные для различных операционных систем.

Среди западных универсальных пакетов наиболее известны и

выделяются высоким качеством системы SAS (SAS Institute), SYSTAT, SPSS

102

(SSPS Inc.), Minitab (MiniTab Inc.), Statgraphics (Manugistics, Inc.), Statistica

(StatSoft, Inc.). Все эти продукты реализованы на высоко профессиональном

уровне, а их производители активно осваивают все новые и новые "ниши"

аналитики, обращаясь к технологиям анализа текстов, интеллектуального

анализа данных, операционному анализу и иным отраслям, связанным с

анализом данных. Заметим, что в последние годы усиливается тенденция к

102

Бююль А., Цефель П. SPSS: искусство обработки информации. Анализ

статистических данных и восстановление скрытых закономерностей. Пер. с нем. -

М.: Диасофт, 2001.

398

специализации по отраслям - на базе основной версии выпускаются

программные продукты, адаптированные к решению задач в медицине,

экономике и т.д.

Особый класс программного обеспечения, представленного на рынке, -

это специализированные библиотеки подпрограмм обработки данных,

предназначенные для встраивания в прикладные программные продукты,

разрабатываемые силами собственных отделов автоматизации организаций,

нуждающихся в проведении тех

или иных исследований. В этом классе

несомненными лидерами являются библиотека численных и статистических

методов IMSL (Visual Numerics) и библиотека S-Plus (AT&T Bell Labs),

сочетающая в себе как библиотеку подпрограмм, разработанных на объектном

языке программирования S, так и интерактивную среду-интерпретатор, которая

обеспечивает возможность полноценного графического анализа данных. Кроме

того, существует масса других библиотек, в том числе, и бесплатно

распространяемых через ГСТК Интернет.

Следует заметить, что в СНГ также интенсивно развивается направление,

связанное с разработкой программного обеспечения для статистической

обработки данных. К классу полу-универсальных могут быть отнесены

российские пакеты STADIA

103

(НПО "Информатика и компьютеры"), ОЛИМП

(ЗАО "CPS") и белорусский пакет РОСТАН (Белорусский Государственный

Университет). Имеются примеры создания специализированных систем для

решения задач классификации и снижения размерности, например: КЛАСС-

МАСТЕР (Научное изд-во "ТВП"), КВАЗАР (ИММ УрО РАН), PALMODA (ВЦ

РАН), Stat-Media (ЗАО "Полихимэкс") и иные. Кроме того, на рынке

представлены и статистические экспертные

системы, например, СТАТЭКС (РМ

и ПК, Казахстан).

Довольно интересный класс программного обеспечения представляют

собой системы, ориентированные на решение задач снижения размерности,

классификации и анализа данных. Эти системы используют комбинацию

методов статистической и нейросетевой

104

обработки данных. В этой области

столь эффективно работают такие гиганты, как SAS (серия продуктов SAS Data

and Text Mining) и SPSS, создающие программные продукты, сочетающие

мощь статистических методов обработки с методами нейрокомпьютинга.

Среди наших разработчиков следует отметить ВЦ РАН (ЛОРЕГ), ЗАО

"Megaputer" (система PolyAnalyst), НПИЦ "Микросистемы" (система

103

Кулаичев А.П. Методы и средства анализа данных в среде Windows. Изд. 3-е,

перераб. и доп. - М: ИнКо, 1999. - 341 с., ил., 3000 экз. ISBN 5-89357-016-2.

104

Каллан Р. Основные концепции нейронных сетей. - М.: ИД Вильямс, 2001.

399

TextAnalyst), фирму "Контекст" (пакет "ДА-система") и "MediaLingua" (система

Классификатор).

Следует помнить, что сами по себе результаты статистической

обработки и статистические данные, без модели их

интерпретации, лишены какой бы то ни было ценности. Для

аналитика крайне важны не просто некоторые наборы величин

(рождаемость ли, стоимость ли "потребительской корзины"), а их

динамика во времени, модель эталона или нормы, используемая при

проведении анализа, точность и тому подобные сведения.

Рассмотренные ранее классы систем, увы, не могут претендовать на роль

аналитика, поскольку таковых моделей не продуцируют. Все эти системы,

сколь бы совершенны они ни были, продуцируют лишь данные. Заметим, что

человечество уже приблизилось к тому

рубежу, когда встала проблема

измерения стоимости информационных продуктов типа "знание" и

"модель". Именно они определяют функциональные возможности

программного обеспечения, стоимость которого на самом деле относительно

легко исчислить. Для продуктов же, именуемых этими словами, такой расчет

произвести крайне сложно - проблем здесь существует масса: от определения

авторства (особенно при коллективной научной

деятельности) - до определения

реального социально полезного времени, затраченного на синтез нового

знания.

В настоящее время на Западе ведутся активные философские (и не

только философские, но и с привлечением менеджеров в области научных

изысканий и информационного бизнеса) дискуссии на эту тему, вызванные

изменением экономических и, прежде всего, социальных приоритетов. Тема,

сама по

себе, интересная, но она лежит за рамками обсуждаемой в этой книге

тематики.

9.8 ИНСТРУМЕНТАЛЬНЫЕ СРЕДСТВА ПРЕДСТАВЛЕНИЯ И

ДОВЕДЕНИЯ РЕЗУЛЬТАТОВ ИАР

Средства представления и доведения результатов ИАР до потребителя

образуют весьма своеобразный класс инструментальных средств, находящихся

"на вооружении" аналитика. С одной стороны, они имеют много общего со

средствами визуализации и

отображения данных, и лишены

"самостоятельности", поскольку часто интегрированы в иные инструменты. Но

если взглянуть на эти средства с другого ракурса, то убеждаешься в том, что

это совершенно самостоятельный комплекс инструментов.

Да если попытаться классифицировать эти системы по типу данных,

которые должны быть представлены посредством этих систем, то получится

400

довольно жалкая картина: получим спектр от видео до аудио с переходом через

мультипликацию, неподвижную графику, текст и бегущую строку.

..Я

Рисунок 4.5 - Вот, собственно, и все многообразие...

Символьные и не символьные данные, статические и динамические…

Становится ясно, что речь идет о предельных возможностях подсистемы

отображения, поскольку именно ее возможности определяют то, в каких

сочетаниях эти данные могут быть представлены потребителю. До изобретения

граммофона, кинематографа и способа построчного считывания графических

данных речи

о динамике и быть не могло. Ну, а когда была изобретена

электронно-лучевая трубка, подвижная графика стала приобретать все большее

значение. Компьютерные системы, сменив принцип отображения данных

(отказавшись от знакосинтеза в пользу графики), позволили совершить резкий

скачок от прежних способов представления результатов анализа к новейшим,

использующим гипертекстовую технологию. Именно они

сделали возможным,

оптимальным способом сочетая все эти типы данных, быстро и дешево

создавать документы, обладающие высокой выразительностью.

Итак, какие инструменты подготовки отчетной документации,

представления и доведения результатов работы до потребителей имеются

в распоряжении аналитика? Перечислим по группам:

1. Средства поиска данных и подбора аргументации:

- поисковые программы (MS Fast Find (поиск файлов), Следопыт,

поисковые машины ГСТК Интернет и т.д.);

- системы сканирования графики и распознавания текстов (сканеры,

ABBY Fine Reader, CuneiForm и др.);

- системы автоматического перевода (Magic Goody, Promt, Socrat, Stylus

и др.);

- системы автоматического реферирования и классификации

(TextAnalyst, TextMiner и др.).

2. Стандартные средства разработки текстовых документов:

- обычные и профессиональные текстовые редакторы и процессоры (MS

Word, TeX, Lexicon, Adobe PageMaker и др.);

- табличные

процессоры (MS Excel, Lotus Notes и др.);