Методы прогнозирования основанные на нейронных сетях

1. ПРОГНОЗИРУЮЩИЕ СИСТЕМЫ. СОСТОЯНИЕ ПРОБЛЕМЫ В данной главе мы обсуждаем некоторые общие аспекты разработки прогнозирующих систем понятие прогноза и цели его использования, основные понятия и определения в области прогнозирования, методы прогнозирования, модели временных последовательностей, критерии производительности прогнозирующих систем и другие общие вопросы касающиеся разработки прогнозирующих систем. 1. Прогноз и цели его использования Прогнозирование - это ключевой момент при принятии решений в управлении.

Конечная эффективность любого решения зависит от последовательности событий, возникающих уже после принятия решения. Возможность предсказать неуправляемые аспекты этих событий перед принятием решения позволяет сделать наилучший выбор, который, в противном случае, мог-бы быть не таким удачным. По-этому системы планирования и управления, обычно, реализуют функцию прогноза.Далее перечислены примеры ситуаций 44 , в которых полезно прогнозирование. Управление материально-производственными запасами.

В управлении запасами запасных частей на предприятии по ремонту самолетов совершенно необходимо оценить степень используемости каждой детали. На основе этой информации определяется необходимое количество запасных частей. Кроме того, необходимо оценить ошибку прогнозирования. Эта ошибка может быть оценена, например, на основе данных о времени, которое понадобилось для доставки деталей, которых не было на складе.Планирование производства.

Для того, чтобы планировать производство семейства продуктов, возможно, необходимо спрогнозировать продажу для каждого наименования продукта, с учетом времени доставки, на несколько месяцев вперед. Эти прогнозы для конечных продуктов могут быть потом преобразованы в требования к полуфабрикатам, компонентам, материалам, рабочим и т.д. Таким образом на основании прогноза может быть построен график работы целой группы предприятий. Финансовое планирование.Финансового менеджера интересует как будет изменяться денежный оборот компании с течением времени.

Менеджер, может пожелать узнать, в какой период времени в будущем оборот компании начнет падать, с тем, чтобы принять соответствующее решение уже сейчас. Разработка расписания персонала. Менеджер почтовой компании должен знать прогноз количества обрабатываемых писем, с тем чтобы обработка производилась в соответствии с расписанием персонала и производительностью оборудования. Планирование нового продукта.Решение о разработке нового продукта обычно требует долговременного прогноза того, каким спросом он будет пользоваться.

Этот прогноз не менее важен, чем определение инвестиций необходимых для его производства. Управление технологическим процессом. Прогнозирование также может быть важной частью систем управления технологическими процессами.Наблюдая ключевые переменные процесса и используя их для предсказания будущего поведения процесса, можно определить оптимальное время и длительность управляющего воздействия.

Например, некоторое воздействие в течение часа может повышать эффективность химического процесса, а потом оно может снижать эффективность процесса. Прогнозирование производительности процесса может быть полезно при планировании времени окончания процесса и общего рассписания производства. На основании вышеизложенного можно сказать, что прогнозирование - это предсказание будущих событий. Целью прогнозирования является уменьшение риска при принятии решений.Прогноз обычно получается ошибочным, но ошибка зависит от используемой прогнозирующей системы.

Предоставляя прогнозу больше ресурсов, мы можем увеличить точность прогноза и уменьшить убытки, связанные с неопределенностью при принятии решений. Эти соображения отображены на рис.1.1. На рисунке показано что стоимость прогноза увеличивается по мере того, как уменьшаются убытки от неопределенности. При некотором уровне ошибки прогнозирования затраты на прогнозирование минимальны.Затраты Общая стоимость Потери из-за неопре- деленности Стоимость прогнозирования Оптимум Уровень ошибки Рис. 3. График иллюстрирующий соотношение и эффективность затрат на прогнозирование. Заметим, что концептуальная модель, изображенная на рис.1.1 основана на асимптотическом снижении убытков при использовании результатов прогнозирования.

Таким образом, каждый дополнительный доллар, потраченный на прогнозирование дает меньшее снижение риска убытков, чем предыдущий.За некоторой точкой, дополнительные затраты на прогнозирование могут вовсе не приводить к снижению потерь.

Это связано с тем, что невозможно снизить среднюю ошибку прогнозирования ниже определенного уровня, вне зависимости от того насколько сложен примененный метод прогнозирования. Поскольку прогнозирование никогда не сможет полностью уничтожить риск при принятии решений, необходимо явно определять неточность прогноза.Обычно, принимаемое решение определяется результатами прогноза при этом предполагается, что прогноз правильный с учетом возможной ошибки прогнозирования.

Сказанное выше предполагает, что прогнозирующая система должна обеспечивать определение ошибки прогнозирования, также как и само прогнозирование. Такой подход значительно снижает риск объективно связанный с процессом принятия решений.Необходимо отметить, что прогнозирование это не конечная цель. Прогнозирующая система это часть большой системы менеджмента и как подсистема, она взаимодействует с другими компонентами системы, играя немалую роль в получаемом результате. 2. Основные понятия и определения проблемы прогнозирования Необходимо отметить, что мы рассматриваем прогнозирование в целях планирования производства или управления запасами.

Таким образом, наш интерес лежит в определении будущих продаж продукта, или использовании материалов.Обычно мы будем ссылаться на интересующую нас переменную, как на требование . Конечно, только такое применение предложенных методов не обязательно и прогнозирование быть проведено для каких-либо других целей и включать другие типы переменных.

Однако, предполагая именно такую направленность, мы сформулируем специальные комментарии описывающие общие принципы решения проблемы прогнозирования. Сформулированные принципы могут быть применены при прогнозировании в других целях. Для того, чтобы определить проблему прогнозирования, рассмотрим ее подробнее. Результаты прогнозирования используются для поддержки принятия решений.Следовательно, природа принимаемых решений определяет большинство желаемых характеристик прогнозирующей системы.

Изучение решаемой проблемы должно помочь ответить на вопросы о том, что нужно прогнозировать, какую форму должен принять прогноз, какие временные элементы включаются и какова желательная точность прогноза. При определении того, что нужно прогнозировать, мы указываем переменные, которые анализируются и предсказываются. Здесь очень важен требуемый уровень детализации.Система проектирования производства может требовать прогноз требуемого количества продукции в единицах по каждому виду конечного продукта производимого предприятием и прогноз по запасным частям для оборудования предприятия.

С другой стороны, менеджер по продаже может потребовать только прогноз общей суммы продажи продукта в долларах, для определения вклада в бюджет. В первом случае прогнозирование построено на единичном базисе, во втором случае прогнозирование построено на обобщенном базисе.Пока от нас требуется результирующая информация первого или второго типа нельзя однозначно выбрать анализируемые переменные.

При планировании производства мы можем прогнозировать на некотором обобщенном уровне, например, на уровне семейства продуктов и потом разбить обобщенный прогноз до единичного уровня, используя дополнительные расчеты.При прогнозировании общей суммы продаж в долларах, мы можем прогнозировать продажу по каждому из продуктов, скажем того же семейства продуктов, результат преобразовать в доллары, используя предсказанные цены и потом оценить общий уровень продаж в долларах.

На используемый уровень детализации влияет множество факторов доступность и точность данных, стоимость анализа и предпочтения менеджера. В ситуациях, когда наилучший набор переменных неясен, можно попробовать разные альтернативы и выбрать один из вариантов, дающий наилучшие результаты. Обычно так осуществляется выбор при разработке прогнозирующих систем, основанных на анализе исторических данных.Второй важный этап при построении прогнозирующей системы - это определение следующих трех параметров периода прогнозирования, горизонта прогнозирования и интервала прогнозирования.

Период прогнозирования - это основная единица времени, на которую делается прогноз. Мы можем пожелать знать требование на продукт через неделю. В этом случае период - неделя. Горизонт прогнозирования - это число периодов в будущем, которые покрывает прогноз.То есть, нам может понадобиться прогноз на 10 недель вперед, с данными по каждой неделе. В этом случае период - неделя, а горизонт - 10 недель.

Наконец, интервал прогнозирования - частота, с которой делается новый прогноз. Часто интервал прогнозирования совпадает с периодом прогнозирования.В этом случае прогноз пересматривается каждый период, используя требование за последний период и другую текущую информацию в качестве базиса для пересматриваемого прогноза. Если горизонт всегда имеет одну и ту же длину Т-периодов и прогноз пересматривается каждый период, говорят что мы работаем на основе движущего горизонта.

В этом случае, мы репрогнозируем требование для Т-1 периода и делаем оригинальный прогноз для периода Т. Выбор периода и горизонта прогнозирования обычно диктуется условиями принятия решений в области для которой производится прогноз.Для того, чтобы прогнозирование имело смысл, горизонт прогнозирования должен быть не меньше, чем время, необходимое для реализации решения принятого на основе прогноза.Таким образом, прогнозирование очень сильно зависит от природы принимаемого решения.

В некоторых случаях, время, требуемое на реализацию решения не определено, например, как в случае поставки запасных частей для пополнения запасов ремонтных предприятий.Существует методы работы в условиях подобной неопределенности, но они повышают вариацию ошибки прогнозирования. Поскольку с увеличением горизонта прогнозирования точность прогноза, обычно, снижается, часто мы можем улучшить процесс принятия решения, уменьшив время, необходимое на реализацию решения и, следовательно, уменьшив горизонт и ошибку прогнозирования.

Интервал прогнозирования часто определяется операционным режимом системы обработки данных, которая обеспечивает информацию о прогнозируемой переменной. В том случае, если уровень продаж сообщается ежемесячно, возможно для еженедельного прогноза продаж этих данных недостаточно и интервал прогнозирования месяц - является более обоснованным.Хотя различие не велико, мы хотели бы обратить внимание на различие между данными за период и точечными данными.

Данные за период характеризуют некоторый период времени. Например, общий уровень продаж за месяц, и средняя температура за день, характеризуют период времени. Точечные данные представляют значение переменной в конкретный момент времени, например, количество запасных частей на конец месяца и температура в полдень.Различие между этими двумя типами данных важно в основном для выбора используемой системы сбора данных, процесса измерений и определения ошибки прогнозирования.

Третьим аспектом прогнозирования является требуемая форма прогноза. Обычно при прогнозировании проводится оценка ожидаемого значения переменной, плюс оценка вариации ошибки прогнозирования или промежутка, на котором сохраняется вероятность содержания реальных будущих значений переменной. Этот промежуток называется предсказуемым интервалом.В некоторых случаях нам не так важно предсказание конкретных значений прогнозируемой переменной, как предсказание значительных изменений в ее поведении.

Такая задача возникает, например, при управлении технологическими процессами, когда нам необходимо предсказывать момент, когда процесс перейдет в неуправляемое состояние. Точность прогноза, требуемая для конкретной проблемы оказывает огромное влияние на прогнозирующую систему. Мы уже показали это на рис. 1.1. Важнейшей характеристикой системы управления является ее способность добиваться оптимальности при работе с неопределенностью.До сих пор, мы обсуждали набор проблем связанных с процессом принятия решения. Существует ряд других факторов, которые также необходимо принимать во внимание при рассмотрении проблемы прогнозирования.

Один из них связан с процессом генерирующим переменную.Если известно, что процесс стабилен, или существуют постоянные условия, или изменения во времени происходит медленно - прогнозирующая система для такого процесса может достаточно сильно отличаться от системы, которая должна производить прогнозирование неустойчивого процесса с частыми фундаментальными изменениями. В первом случае, необходимо активное использование исторических данных для предсказания будущего, в то время как во втором лучше сосредоточиться на субъективной оценке и прогнозировании для определения изменений в процессе.

Другой фактор это доступность данных. Исторические данные необходимы для построения прогнозирующих процедур будущие наблюдения служат для проверки прогноза.Количество, точность и достоверность этой информации важны при прогнозировании. Кроме этого необходимо исследовать представительность этих данных.

Классическим примером, является прогнозирование требования клиентов на производимый продукт, когда компания хранит записи о заказах по времени их доставки.Такой учет не отражает фактического требования, так как в нем не учитываются заказы, поставленные раньше срока, и заказы отмененные из-за неудовлетворительного срока поставки. Компания должна установить специальную процедуру сбора данных, если ее интересует информация о том, сколько же ее клиенты на самом деле желают приобрести продукции.

Проблемы подобного типа возникают также, когда не учитываются потери продаж из-за ограниченных возможностей производства. Источником ошибок при прогнозировании продаж является различие между прогнозом того, что может быть продано и тем, что будет продано . Первая задача оценивает реальную возможность для компании продать свой продукт, без учета ограничений по объему.Такой прогноз необходим при определении доли продукта в общем производстве.

Вторая задача отражает ограничения объема производства, решение менеджеров, а также план или цель. Такой прогноз, скорее, следует назвать бюджетом. Здесь мы предполагаем, что прогноз продажи, в большинстве случаев, будет коррелировать с бюджетом продажи - ведь цель менеджера бороться за то, чтобы повысить уровень продаж. Необходимо отметить вычислительные ограничения прогнозирующих систем.Если изредка прогнозируется несколько переменных, то в системе возможно применение более глубоких процедур анализа, чем если необходимо часто прогнозировать большое число переменных.

В последней ситуации, необходимо большое внимание уделить разработке эффективного управления данными. И, наконец, два важных фактора проблемы прогнозирования - возможности и интерес людей, которые делают и используют прогноз.В идеале, историческая информация анализируется автоматически и прогноз представляется менеджеру для возможной модификации.

Введение эксперта в процесс прогнозирования является очень важным, но требует сотрудничества опытных менеджеров. Далее прогноз передается менеджерам, которые используют его при принятии решений.И даже если они говорят, что прогноз это всего-лишь болтовня, они могут получить реальную пользу от его использования. 1.3. Методы прогнозирования Методы прогнозирования можно разделить на два класса квалитативные и квантитативные, в зависимости от того, какие математические методы используются.

Квалитативные процедуры производят субъективную оценку, основанную на мнении экспертов. Обычно, это формальная процедура для получения обобщенного предсказывания, на основе ранжирования и обобщения мнения экспертов например на основе методов Делфи . Эти процедуры основываются на опросах, тестах, оценке эффективности продаж и исторических данных, но процесс с помощью которого получается прогноз остается субъективным.С другой стороны, квантиативные процедуры прогнозирования явно объявляют - каким образом получен прогноз.

Четко видна логика и понятны математические операции. Эти методы производят исследование исторических данных для того, чтобы определить глубинный процесс, генерирующий переменную и предположив, что процесс стабилен, использовать знания о нем для того, чтобы экстраполировать процесс в будущее.К квантитативным процедурам прогнозирования относятся методы основанные на статистическом анализе, анализе временных последовательностей, байесовском прогнозировании, наборе фрактальных методов, нейронных сетях.

Сейчас используется два основных типа моделей модели временных последовательностей и причинные модели. Временная последовательность - это упорядоченная во времени последовательность наблюдений реализаций переменной. Анализ временных последовательностей использует для прогнозирования переменной только исторические данные о ее изменении.Таким образом, если исследование данных о ежемесячных продажах автомобильных шин, показывает, что они линейно возрастают - для представления данного процесса может быть выбрана линейная модель тренда.

Наклон и смещение этой прямой могут быть оценены на основе исторических данных. Прогнозирование может быть осуществлено путем экстраполяции подходящей модели, как показано на рис. 1.2. Месячная Прогноз продажа шин Сегодня Будущее Месяцы Рис. 1.2. Прогноз на основе линейного тренда. Иллюстрация к прогнозированию на основе временной последовательности.Причинные модели используют связь между интересующей нас временной последовательностью и одной или более другими временными последовательностями.

Если эти другие переменные коррелируют с интересующей нас переменной и если существуют причины для этой корреляции, модели прогнозирования, описывающие эти отношения могут быть очень полезными. В этом случае, зная значение коррелирующих переменных, можно построить модель прогноза зависимой переменной.Например, анализ может указать четкую корреляцию между уровнем ежемесячной продажи шин и уровнем месячной продажи новых автомобилей 15 месяцев назад.

В этом случае информация о продажах новых автомобилей 14 месяцев назад будет полезной для того, чтобы предсказывать продажу шин в следующем месяце. Это показано на рис. 1.3. Месячная продажа шин Продажа автомобилей 15 месяцев назад Рис. 1.3. Иллюстрация к прогнозированию на основе причинной модели.Серьезным ограничением использования причинных моделей является требование того, чтобы независимая переменная была известна ко времени, когда делается прогноз. Факт, что продажа шин коррелирует с продажей новых автомобилей 15 месяцев назад, бесполезен при прогнозировании уровня продаж шин на 18 месяцев вперед.

Аналогично, знание о том, что уровень продаж шин коррелирует с текущими ценами на бензин, нам ничего не дает - ведь мы не знаем точных цен на бензин на месяц, для которого мы делаем прогноз. Другое ограничение причинных методов - большое количество вычислений и данных, которое необходимо сравнивать.Практически, прогнозирующие системы часто используют комбинацию квантитативных и квалитативных методов.

Квантитативные методы используются для последовательного анализа исторических данных и формирование прогноза. Это придает системе объективность и позволяет эффективно организовать обработку исторических данных.Данные прогноза далее становятся входными данными для субъективной оценки опытными менеджерами, которые могут модифицировать прогноз в соответствии с их взглядами на информацию и их восприятие будущего.

На выбор соответствующего метода прогнозирования, влияют следующие факторы, большинство которых было описано в предыдущем разделе требуемая форма прогноза - горизонт, период и интервал прогнозирования - доступность данных - требуемая точность - поведение прогнозируемого процесса - стоимость разработки, установки и работы с системой - простота работы с системой - понимание и сотрудничество управляющих. 1.4. Модели временных последовательностей Используемые для наших целей временные последовательности представляют собой последовательность наблюдений за интересующей переменной.

Переменная наблюдается через дискретные промежутки времени. Анализ временных последовательностей включает описание процесса или феномена, который генерирует последовательность. Для предсказания временных последовательностей, необходимо представить поведение процесса в виде математической модели, которая может быть распространена в будущем.Для этого необходимо, чтобы модель хорошо представляла наблюдения в любом локальном сегменте времени, близком к настоящему.

Обычно нет необходимости иметь модель, которая представляла бы очень старые наблюдения, так как они скорее всего не характеризуют настоящий момент. Также нет необходимости представлять наблюдения в далеком будущем, т.е. через промежуток времени, больший чем горизонт прогнозирования.После того, как будет сформирована корректная модель для обработки временной последовательности, можно разрабатывать соответствующие средства прогнозирования. Xt Xt a t b t Xt Xt c t d t Xt Xt e t f t Рис. 1.4. Примеры временных последовательностей. a константный процесс b линейный тренд c сезонный процесс d импульс e шаговое изменение f рамп. Образцы временных последовательностей показаны на рис. 1.4, где Хi это наблюдения за период t. На рис. 1.4а, показан процесс, остающейся с течением времени на постоянном уровне, но обладающий разной вариацией в разные периоды. На b изображен тренд с изменяющимся уровнем процесса.

На c приведен пример циклического процесса, как например в случае продажи сезонных продуктов.

Сезонные изменения могут возникать из-за таких причин как погода и, следовательно, потребность в прохладительных напитках обычаи Рождественские открытки и т.д. Большинство моделей прогнозирования временных последовательностей разрабатываются для представления этих вариантов последовательностей константных, тренда, периодических циклических , или их комбинаций.Кроме этих моделей существуют их варианты, появляющиеся, когда в процессе, генерирующем переменную, возникают глубинные изменения.

Образец импульсной модели показан на d . На один период процесс перешел на более высокий уровень, а потом ввернулся на предыдущий уровень. Примером может быть кратковременное увеличение продаж из-за забастовки на заводе конкурентов. В примере e , переход на новый уровень остается постоянным, о таком процессе мы будем говорить, как о процессе с шаговым изменением.Причиной такого изменения, например, может быть приобретение нового клиента.

И, наконец, f показывает пример последовательности, которая некоторое время находилась на постоянном уровне, а потом неожиданно перешла в тренд.Так как эти три типа изменений достаточно часто встречаются на практике, мы хотим, чтобы наша прогнозирующая система идентифицировала постоянные изменения и подстраивала модель прогнозирования под изменения в процессе. 1.5. Критерии производительности Существуют ряд измерений, которые могут быть использованы для оценки эффективности прогнозирующей системы.

Среди них наиболее важными являются точность прогнозирования, стоимость системы, результирующая польза, свойства стабильности и отзывчивости.Точность метода прогнозирования определяется на основе анализа возникшей ошибки прогнозирования. Если Xt это реальное наблюдение за период t и Xt это сделанный ранее прогноз, ошибка прогнозирования за период t et Xt - Xt 1.1 Для конкретного процесса и метода прогнозирования ошибка прогнозирования рассматривается как случайная величина со средним E e и вариацией Ge. Если при прогнозировании отсутствует систематическая ошибка, то E e 0. Поэтому для определения точности прогнозирования используется ожидаемая квадратичная ошибка E et E Xt-Xt 1.2 или ожидаемая квадратичная ошибка E et2 E Xt-Xt 2 1.3 Заметим, что ожидаемая квадратичная ошибка обычно называется средней квадратичной ошибкой, и соответствует Ge2, если существует систематическая ошибка прогнозирования.

При анализе ошибки прогнозирования, общепринято каждый период использовать так называемый тест пути сигнала.

Целью этого теста является определение, присутствуют ли систематическая ошибка прогнозирования. Путевой сигнал вычисляется путем деления оцененной предполагаемой ошибки прогнозирования на измеренную вариацию ошибки прогнозирования, определенную как среднее абсолютное отклонение.Если в прогнозе отсутствует систематическая ошибка - путевой сигнал должен быть близок к нулю. Конечно, стоимость является важным элементом при оценке и сравнении методов прогнозирования.

Ее можно разделить на одноразовые затраты на разработку и установку системы и затраты на ее эксплуатацию. Что касается затрат на эксплуатацию, то разные прогнозирующие процедуры могут очень сильно отличаться по стоимости получения данных, эффективности вычислений и уровню действий, необходимых для поддержания системы.Польза прогноза в улучшении принимаемых решений зависит от горизонта прогнозирования и формы прогноза также как и от его точности.

Прибыль должна измеряться для всей системы управления как единого целого и прогнозирование - только один элемент этой системы. Мы можем также сравнивать методы прогнозирования с точки зрения реакции на постоянные изменения во временной последовательности, описывающей процесс, и стабильности при случайных и кратковременных изменениях.ВЫВОДЫ При определении интервала прогнозирования необходимо выбирать между риском не идентифицировать изменения в прогнозируемом процессе и стоимостью прогноза.

Если мы используем значительный период прогнозирования, мы можем работать достаточно длительное время в соответствии с планами, основанными на, возможно, уже бессмысленном прогнозе.С другой стороны, если мы используем более короткий интервал, нам приходиться оплачивать не только стоимость прогнозирования, но и затраты на изменение планов, с тем, чтобы они соответствовали новому прогнозу.Наилучший интервал прогнозирования зависит от стабильности процесса, последствий использования неправильного прогноза, стоимости прогнозирования и репланирования. Посредством данных, необходимых для прогнозирующей системы, в систему может подаваться и ошибка, поэтому необходимо редактировать входные данные системы для того, чтобы устранить очевидные или вероятные ошибки.

Конечно, небольшие ошибки идентифицировать будет невозможно, но они обычно не оказывают значительного влияния на прогноз.Более значительные ошибки легче найти и исправить.

Прогнозирующая система также не должна реагировать на необычные, экстраординарные наблюдения. Если мы прогнозируем требование на продукт - любые продажи, которые рассматриваются как нетипичные или экстремальные, конечно должны быть занесены в записи, но не должны включаться в данные используемые для прогнозирования. Например, производитель, который обслуживает ряд поставщиков, получает нового клиента.Первые заказы этого клиента, скорее всего, не будут типичными для его более поздних заказов, так как в начале он находился на этапе исследования нового товара. Симуляция является полезным средством при оценке различных методов прогнозирования.

Метод симуляции основан на ретроспективном использовании исторических данных. Для каждого метода прогнозирования берется некоторая точка в прошлом и начиная с нее вплоть до текущего момента времени проводится симуляция прогнозирования.Измеренная ошибка прогнозирования может быть использована для сравнения методов прогнозирования. Если предполагается, что будущее отличается от прошлого, может быть создана псевдоистория, основанная на субъективном взгляде на будущую природу временной последовательности, и использована при симуляции.

Исторические данные Генерация прогноза Управление Прогноз прогнозом Текущие наблюдения Мнение менеджера Модифицированный прогноз Рис. 1.5. Соотношения между генерацией прогноза и управлением прогнозом. На основании анализа материала данной главы можно сделать вывод, что прогнозирующая система должна выполнять две основные функции генерацию прогноза и управление прогнозом.

Генерация прогноза включает получение данных для уточнения модели прогнозирования, проведение прогнозирования, учет мнения экспертов и предоставление результатов прогноза пользователю. Управление прогнозом включает в себя наблюдение процесса прогнозирования для определения неконтролируемых условий и поиск возможности для улучшения производительности прогнозирования.Важным компонентом функции управления является тестирование путевого сигнала, описанное в разделе 1.5. Функция управления прогнозом также должна периодически определять производительность прогнозирования и предоставлять результаты соответствующему менеджеру.

Соотношения между генерацией прогноза и управлением прогнозом показано на рис. 1.5 2. НЕЙРОННЫЕ СЕТИ. СОСТОЯНИЕ ПРОБЛЕМЫ В данной главе мы обсуждаем известные модели НС модель Маккалоха и Питтса модель Розенблата модели Хопфилда и Больцмана модель на основе обратного распространения.

Рассмотрена структура и особенности каждой из моделей.Перечислены основные задачи решаемые на основе НС, описаны способы реализации НС. Проведен анализ известных моделей НС с точки зрения решения решения задачи прогнозирования. 2.1. Нейронные сети - основные понятия и определения В основу искусственных нейронных сетей 2-4, 8 положены следующие черты живых нейронных сетей, позволяющие им хорошо справляться с нерегулярными задачами - простой обрабатывающий элемент - нейрон - очень большое число нейронов участвует в обработке информации - один нейрон связан с большим числом других нейронов глобальные связи - изменяющиеся по весу связи между нейронами - массированная параллельность обработки информации.

Прототипом для создания нейрона послужил биологический нейрон головного мозга.Биологический нейрон имеет тело, совокупность отростков - дендридов, по которым в нейрон поступают входные сигналы, и отросток - аксон, передающий выходной сигнал нейрона другим клеткам.

Точка соединения дендрида и аксона называется синапсом 13,47 . Упрощенно функционирование нейрона можно представить следующим образом 1 нейрон получает от дендридов набор вектор входных сигналов 2 в теле нейрона оценивается суммарное значение входных сигналов. Однако входы нейрона неравнозначны. Каждый вход характеризуется некоторым весовым коэффициентом, определяющим важность поступающей по нему информации.Таким образом, нейрон не просто суммирует значения входных сигналов, а вычисляет скалярное произведение вектора входных сигналов и вектора весовых коэффициентов 3 нейрон формирует выходной сигнал, интенсивность которого зависит от значения вычисленного скалярного произведения.

Если оно не превышает некоторого заданного порога, то выходной сигнал не формируется вовсе - нейрон не срабатывает 4 выходной сигнал поступает на аксон и передается дендридам других нейронов.Поведение искусственной нейронной сети зависит как от значения весовых параметров, так и от функции возбуждения нейронов.

Известны три основных вида 17 функции возбуждения пороговая, линейная и сигмоидальная. Для пороговых элементов выход устанавливается на одном из двух уровней в зависимости от того, больше или меньше суммарный сигнал на входе нейрона некоторого порогового значения. Для линейных элементов выходная активность пропорциональна суммарному взвешенному входу нейрона.Для сигмоидальных элементов в зависимости от входного сигнала, выход варьируется непрерывно, но не линейно, по мере изменения входа.

Сигмоидальные элементы имеют больше сходства с реальными нейронами, чем линейные или пороговые, но любой из этих типов можно рассматривать лишь как приближение.Нейронная сеть представляет собой совокупность большого числа сравнительно простых элементов - нейронов, топология соединений которых зависит от типа сети. Чтобы создать нейронную сеть для решения какой-либо конкретной задачи, мы должны выбрать, каким образом следует соединять нейроны друг с другом, и соответствующим образом подобрать значения весовых параметров на этих связях.

Может ли влиять один элемент на другой, зависит от установленных соединений. Вес соединения определяет силу влияния. 2.2. Модели нейронных сетей 2.2.1. Модель Маккалоха Теоретические основы нейроматематики были заложены в начале 40-х годов.В 1943 году У. Маккалох и его ученик У. Питтс сформулировали основные положения теории деятельности головного мозга 9 . Ими были получены следующие результаты - разработана модель нейрона как простейшего процессорного элемента, выполняющего вычисление переходной функции от скалярного произведения вектора входных сигналов и вектора весовых коэффициентов предложена конструкция сети таких элементов для выполнения логических и арифметических операций - сделано основополагающее предположение о том, что такая сеть способна обучаться, распознавать образы, обобщать полученную информацию.

Несмотря на то, что за прошедшие годы нейроматематика ушла далеко вперед, многие утверждения Макклоха остаются актуальными и поныне.

В частности, при большом разнообразии моделей нейронов принцип их действия, заложенный Макклохом и Питтсом, остается неизменным. Недостатком данной модели является сама модель нейрона - пороговой вид переходной функции. В формализме У. Маккалоха и У. Питтса нейроны имеют состояния 0, 1 и пороговую логику перехода из состояния в состояние.Каждый нейрон в сети определяет взвешенную сумму состояний всех других нейронов и сравнивает ее с порогом, чтобы определить свое собственное состояние.

Пороговый вид функции не предоставляет нейронной сети достаточную гибкость при обучении и настройке на заданную задачу.Если значение вычисленного скалярного произведения, даже незначительно, не достигает до заданного порога, то выходной сигнал не формируется вовсе и нейрон не срабатывает . Это значит, что теряется интенсивность выходного сигнала аксона данного нейрона и, следовательно, формируется невысокое значение уровня на взвешенных входах в следующем слое нейронов. 2.2.2. Модель Розенблата Серьезное развитие нейрокибернетика получила в работах американского нейрофизиолога Френсиса Розенблата Корнелльский университет . В 1958 году он предложил свою модель нейронной сети. Розенблат ввел в модель Маккаллока и Питтса способность связей к модификации, что сделало ее обучаемой.

Эта модель была названа персептроном 11, 12, 46, 47 . Первоначально персептрон представлял собой однослойную структуру с жесткой пороговой функцией процессорного элемента и бинарными или многозначными входами.

Первые персептроны были способны распознавать некоторые буквы латинского алфавита.Впоследствии модель персептрона была значительно усовершенствована 47 Персептрон применялся для задачи автоматической классификации, которая в общем случае состоит в разделении пространства признаков между заданным количеством классов. В двухмерном случае требуется провести линию на плоскости, отделяющую одну область от другой.

Персептрон способен делить пространство только прямыми линиями плоскостями 6, 11 . Алгоритм обучения персептрона выглядит следующим образом 1 системе предъявляется эталонный образ 2 если выходы системы срабатывают правильно, весовые коэффициенты связей не изменяются 3 если выходы срабатывают неправильно, весовым коэффициентам дается небольшое приращение в сторону повышения качества распознавания. Серьезным недостатком персептрона является то, что не всегда существует такая комбинация весовых коэффициентов, при которой имеющееся множество образов будет распознаваться данным персептроном.

Причина этого недостатка состоит в том, что лишь небольшое количество задач предполагает, что линия, разделяющая эталоны, будет прямой. Обычно это достаточно сложная кривая, замкнутая или разомкнутая.Если учесть, что однослойный персептрон реализует только линейную разделяющую поверхность, применение его там, где требуется нелинейная, приводит к неверному распознаванию эта проблема называется линейной неразделимостью пространства признаков . Выходом из этого положения является использование многослойного персептрона, способного строить ломаную границу между распознаваемыми образами.

Описанная проблема не является единственной трудностью, возникающей при работе с персептронами - также слабо формализован метод обучения персептрона.Персептрон поставил ряд вопросов, работа над решением которых привела к созданию более разумных нейронных сетей и разработке методов, нашедших применение не только в нейрокибернетике например, метод группового учета аргументов, применяемый для идентификации математических моделей 2.2.3. Модель Хопфилда В 70-е годы интерес к нейронным сетям значительно упал, однако работы по их исследованию продолжались.

Был предложен ряд интересных разработок, таких, например, как когнитрон, способный хорошо распознавать достаточно сложные образы иероглифы и т.п. независимо от поворота и изменения масштаба изображения.Автором когнитрона является японский ученый И. Фукушима.

Новый виток быстрого развития моделей нейронных сетей, который начался 8-9 лет тому назад, связан с работами Амари, Андерсона, Карпентера, Кохена 24, 28, 29 и других, и в особенности, Хопфилда 17, 37-40 , а также под влиянием обещающих успехов оптических технологий 1, 26 и зрелой фазы развития СБИС 29 для реализации новых архитектур.Начало современному математическому моделированию нейронных вычислений было положено работами Хопфилда в 1982 году, в которых была сформулирована математическая модель ассоциативной памяти на нейронной сети с использованием правила Хеббиана 36 для программирования сети. Но не столько сама модель послужила толчком к появлению работ других авторов на эту тему, сколько введенная Хопфилдом функция вычислительной энергии нейронной сети. Это аналог функции Ляпунова в динамических системах. Показано, что для однослойной нейронной сети со связями типа все на всех характерна сходимость к одной из конечного множества равновесных точек, которые являются локальными минимумами функции энергии, содержащей в себе всю структуру взаимосвязей в сети. Понимание такой динамики в нейронной сети было и у других исследователей.

Однако, Хопфилд и Тэнк 17 показали как конструировать функцию энергии для конкретной оптимизационной задачи и как использовать ее для отображения задачи в нейронную сеть. Этот подход получил развитие и для решения других комбинаторных оптимизационных задач.

Привлекательность подхода Хопфилда состоит в том, что нейронная сеть для конкретной задачи может быть запрограммирована без обучающих итераций.

Веса связей вычисляются на основании вида функции энергии, сконструированной для этой задачи.Развитием модели Хопфилда для решения комбинаторных оптимизационных задач и задач искусственного интеллекта является машина Больцмана, предложенная и исследованная Джефери Е. Хинтоном и Р. Земелом 20-23 . В ней, как и в других моделях, нейрон имеет состояния 1, 0 и связь между нейронами обладает весом.

Каждое состояние сети характеризуется определенным значением функции консен суса аналог функции энергии . Максимум функции консенсуса соответствует оптимальному решению задачи. Имеется следующая информация о результатах моделирования на ЭВМ работы нейронной сети. Моделировалась асинхронная работа сети Хопфилда. Сеть работает хорошо, т.е. без ошибок восстанавливает эталонные образы из случайных, если в нее записывается не более 15 эталонных образов.Испытания проводились для 30 нейронов и для 100 нейронов в сети. Бралось некоторое количество случайных векторов в качестве эталонных и строилась соответствующая матрица весов связей.

Моделирование при 100 нейронах было существенно более медленным процессам, чем при 30 нейронах, хотя качественная картина и в том и в другом случаях была одна и та же. Приблизительно 88 испытаний заканчивались в эталонных состояниях, 10 - в устойчивых состояниях, близких к эталонным.При расстоянии 5 между начальным и эталонным векторами, эталонное состояние достигалось в 90 случаев.

С увеличением расстояния, вероятность попадания в наиболее близкое эталонное состояние гладко падала. При расстоянии 12 вероятность была равна 0.2. Устойчивые состояния, слишком близкие друг к другу, имеют тенденцию сливаться , они попадают в одну впадину на энергетической поверхности. Программировалась задача коммивояжера на основе сети Хопфилда.Сетью из 100 нейронов для 20 различных случайных начальных состояний были определены маршруты, 16 из которых были приемлемыми, 50 попыток дали 2 пути 2.83 и 2.71 цифры приводятся, чтобы показать как они близки при кратчайшем 2.67. Это результаты моделирования работы сети с непрерывной моделью нейрона.

Моделировалась также задача коммивояжера, но для сети типа машина Больцмана, проводилась при следующих значениях управляющих параметров A 0.95, L 10, M 100 A - положительное число меньше единицы, но близкое к ней, L - число испытаний, которые проводятся без изменений, M - число последовательных испытаний, не приводящих к изменению состояния машины, как критерия завершения процесса . Процесс запускался 100 раз для n 10 всего в сети N n 2 нейронов и 25 раз для n 30 при различных нормальных состояниях машины Больцмана.

Для n 10 получился оптимальный результат, для n 30 - решение на 14 хуже оптимального.Отметим, что вероятностный механизм функционирования машины Больцмана дает возможность получить на ней несколько лучшие результаты оптимизации, чем на модели Хопфилда 2.2.4. Модель сети с обратным распространением Способом обратного распространения back propogation называется способ обучения многослойных НС. В таких НС связи между собой имеют только соседние слои, при этом каждый нейрон предыдущего слоя связан со всеми нейронами последующего слоя 5, 8, 16, 27, 30, 42, 48, 49 . Нейроны обычно имеют сигмоидальную функцию возбуждения.

Первый слой нейронов называется входным и содержит число нейронов соответствующее распознаваемому образу.Последний слой нейронов называется выходным и содержит столько нейронов, сколько классов образов распознается.

Между входным и выходным слоями располагается один или более скрытых теневых слоев. Определение числа скрытых слоев и числа нейронов в каждом слое для конкретной задачи является неформальной задачей.Принцип обучения такой нейронной сети базируется на вычислении отклонений значений сигналов на выходных процессорных элементах от эталонных и обратном прогоне этих отклонений до породивших их элементов с целью коррекции ошибки.

Еще в 1974 году Поль Дж. Вербос 5 изобрел значительно более эффективную процедуру для вычисления величины, называемой производной ошибки по весу, когда работал над своей докторской диссертацией в Гарвардском университете.Процедура, известная теперь как алгоритм обратного распространения, стала одним из наиболее важных инструментов в обучении нейронных сетей 5, 16, 27, 30, 42, 48, 49 . Однако этому алгоритму свойственны и недостатки, главный из которых - отсутствие сколько-нибудь приемлемых оценок времени обучения.

Понимание, что сеть в конце концов обучится, мало утешает, если на это могут уйти годы. Тем не менее, алгоритм обратного распространения имеет широчайшее применение. Например, успех фирмы NEC в распознавании букв, был достигнут именно благодаря алгоритму обратного распространения.Подробнее метод обратного распространения описан в главе 3 2.3. Задачи, решаемые на основе нейронных сетей В литературе 33, 41, 43 встречается значительное число признаков, которыми должна обладать задача, чтобы применение НС было оправдано и НС могла бы ее решить - отсутствует алгоритм или не известны принципы решения задач, но накоплено достаточное число примеров - проблема характеризуется большими объемами входной информации - данные неполны или избыточны, зашумлены, частично противоречивы.

Таким образом, НС хорошо подходят для распознавания образов и решения задач классификации, оптимизации и прогнозирования.Ниже приведен перечень возможных промышленных применений нейронных сетей, на базе которых либо уже созданы коммерческие продукты, либо реализованы демонстрационные прототипы 7, 10, 18, 25, 35, 45, 50 . Банки и страховые компании - автоматическое считывание чеков и финансовых документов - проверка достоверности подписей - оценка риска для займов - прогнозирование изменений экономических показателей.

Административное обслуживание - автоматическое считывание документов - автоматическое распознавание штриховых кодов.

Нефтяная и химическая промышленность - анализ геологической информации - идентификация неисправностей оборудования - разведка залежей минералов по данным аэрофотосъемок - анализ составов примесей - управление процессами.Военная промышленность и аэронавтика - обработка звуковых сигналов разделение, идентификация, локализация, устранение шума, интерпретация - обработка радарных сигналов распознавание целей, идентификация и локализация источников - обработка инфракрасных сигналов локализация - обобщение информации - автоматическое пилотирование.

Промышленное производство управление манипуляторами - управление качеством - управление процессами - обнаружение неисправностей - адаптивная робототехника - управление голосом. Служба безопасности - распознавание лиц, голосов, отпечатков пальцев.Биомедицинская промышленность - анализ рентгенограмм - обнаружение отклонений в ЭКГ. Телевидение и связь - адаптивное управление сетью связи - сжатие и восстановление изображения.

Представленный перечень далеко не полон. Ежемесячно западные средства массовой информации сообщают о новых коммерческих продуктах на базе нейронных сетей. Так, фирма LIAC выпускает аппаратуру для контроля качества воды. Нейросистемы фирмы SAIC находят пластиковые бомбы в багаже авиапассажиров.Специалисты инвестиционного банка Citicomp Лондон с помощью программного нейропакета делают краткосрочные прогнозы колебаний курсов валют. 2.4. Способы реализации нейронных сетей Нейронные сети могут быть реализованы двумя путями первый - это программная модель НС 2, 3, 15, 34 , второй - аппаратная 14, 31, 34, 45, 50 . На современном рынке изделия, основанные на использовании механизма действия НС, первоначально появились в виде нейроплат.

В качестве типичного примера нейроплаты можно назвать плату МВ 86232 японской фирмы Fujitsu.На плате размещены процессор цифровой обработки сигналов и оперативная память емкостью 4 Мбайт, что позволяет использовать такую плату для реализации НС, содержащих до тысячи нейронов.

Есть и более совершенные платы. Основными коммерческими аппаратными изделиями на основе НС являются и, вероятно, в ближайшее время будут оставаться нейро- БИС. Сейчас выпускаются более 20 типов нейроБИС, параметры которых порой различаются на несколько порядков. Среди них - модель ETANN фирмы Intel. Эта БИС, выполненная по микронной технологии, является реализацией НС с 64т нейронами и 10240 синапсами.Ее цена 2000 долл. К числу самых дешевых нейроБИС 41 долл. относится модель MD 1220 фирмы Micro Devices.

Эта БИС реализует НС с 8 нейронами и 120 синапсами.Среди разрабатываемых в настоящее время нейроБИС выделяются модели фирмы Adaptive Solutions США и Hitachi Япония . Нейро- БИС фирмы Adaptive Solutions, вероятно, станет одной из самых быстродействующих объявленная скорость обработки составляет 1,2 млрд. соединений с. НС содержит 64 нейрона и 262144 синапса . НейроБИС фирмы Hitachi позволяет реализовать НС, содержащую до 576 нейронов.

Эти нейроБИС, несомненно, станут основой новых нейрокомпьютеров и специализированных многопроцессорных изделий. Большинство сегодняшних нейрокомпьютеров представляют собой просто персональный компьютер или рабочую станцию, в состав которых входит дополнительная нейроплата. К их числу относятся, например, компьютеры серии FMR фирмы Fujitsu.Такие системы имеют бесспорное право на существование, поскольку их возможностей вполне достаточно для разработки новых алгоритмов и решения большого числа прикладных задач методами нейроматематики. Однако наибольший интерес представляют специализированные нейрокомпьютеры, непосредственно реализующие принципы НС. Типичными представителями таких систем являются компьютеры семейства Mark фирмы TRW первая реализация персептрона, разработанная Розенблатом, называлась Mark I . Модель Mark III фирмы TRW представляют собой рабочую станцию, содержащую до 15 процессоров семейства Motorola 68000 с математическими сопроцессорами.

Все процессоры объединены шиной VME. Архитектура системы, поддерживающая до 65 000 виртуальных процессорных элементов с более чем 1 млн. настраиваемых соединений, позволяет обрабатывать до 450 тыс. межсоединений с. Mark IV - это однопроцессорный суперкомпьютер с конвейерной архитектурой.

Он поддерживает до 236 тыс. виртуальных процессорных элементов, что позволяет обрабатывать до 5 млн. межсоединений с. Компьютеры семейства Mark имеют общую программную оболочку ANSE Artificial Neural System Environment , обеспечивающую программную совместимость моделей.

Помимо указанных моделей фирмы TRW предлагает также пакет Mark II - программный эмулятор НС Другой интересной моделью является нейрокомпьютер NETSIM, созданный фирмой Texas Instruments на базе разработок Кембриджского университета.Его топология представляет собой трехмерную решетку стандартных вычислительных узлов на базе процессоров 80188. Компьютер NETSIM используется для моделирования таких моделей НС, как сеть Хопфилда - Кохонена и НС с обратным распространением.

Его производительность достигает 450 млн. межсоединений с. Фирма Computer Recognitiion Systems CRS продает серию нейрокомпьютеров WIZARD CRS 1000, предназначенных для обработки видеоизображений. Размер входной изображения 512 x 512 пикселей. Модель CRS 1000 уже нашла применение в промышленных системах автоматического контроля. Сегодня на рынке представлено много моделей нейрокомпьютеров.На самом деле их, видимо, гораздо больше, но наиболее мощные и перспективные модели по-прежнему создаются по заказам военных.

К сожалению, не имея достаточной информации о моделях специального назначения, трудно составить представление об истинных возможностях современных компьютеров. ВЫВОДЫ НС принадлежат классу коннекционистских моделей обработки информации. Основная их черта - использовать взвешенные связи между обрабатывающими элементами как принципиальное средство запоминания информации.Обработка в таких сетях ведется одновременно большим числом элементов, благодаря чему они терпимы к неисправностям и способны к быстрым вычислениям.

Задать НС, способную решить конкретную задачу это значит определить модель нейрона, топологию связей, веса связей. Нейронные сети различаются между собой меньше всего моделями нейрона, а в основном топологией связей и правилами определения весов или правилами обучения, программирования.По структуре связей сети делятся на два больших класса однослойные и многослойные. К однослойным относятся модель Хопфилда 1, 21, 30, 42-44 и последующие разработки 38 , некоторые типы модели нейронной сети, известной под названием машина Больцмана 28, 29 . Многослойная сеть имеет входной, выходной и скрытые слои, на входной подается информация, с выходного снимается от вет, скрытые слои участвуют в обработке 31 . В настоящее время существует два подхода к решению задачи обучения НС решению задачи распознавания образов, оптимизации и т.д. Один, исторически более ранний, состоит в постепенной модификации весовых коэффициентов в процессе обучения.

Подходы к обучению однослойных и многослойных сетей различны.

Обучение многослойных сетей состоит в том, что на основе набора примеров входное состояние - выходное состояние постепенно подбираются веса всех связей так, чтобы каждое входное состояние вызывало соответствующее выходное. Обучающие алгоритмы представляют собою итерационные процедуры с медленным приближением к окончательным значениям весов связей.Этот способ впервые был реализован в персептроне Розенблата и локальных правилах обучения на основе модели Хебба. В последующие годы этот подход получил дальнейшее развитие в алгоритмах типа обратного распространения.

В однослойных сетях часто удается выразить веса связей через параметры задачи так обстоит дело с моделью Хопфилда и однослойной машиной Больцмана . Подход состоит в вычислении значений синаптический весов на основе заданного описания функционирования нейронной сети как черного ящика . Если сеть должна реализовать заданную функцию, ее рассматривают как набор элементов пороговой логики и задача сводится к кусочно-линейной аппроксимации этой зависимости и синтезу соответствующего автомата.

Для общего случая, когда описание поведения сети задано в виде набора векторов возможных состояний, поиск синаптических весов сводится к решению соответствующей системы нелинейных уравнений. Такое решение было впервые найдено Хопфилдом.Появление этой работы около 10 лет назад продемонстрировало эффективность применения аналитических методов для интерпретации поведения нейронных сетей и привело к разработке проекционного алгоритма, позволяющего вычислять значения синаптических весов, сократив тем самым затраты времени на обучение.

Исследования проекционного алгоритма показывают, что при очевидных достоинствах ему свойственен ряд недостатков, в частности склонность сети к ложным реакциям и низкая эффективность при доучивании, когда необходимо ввести новые данные, не разрушая информации, запомненной ранее.

Кроме того, до настоящего времени принято считать, что данный алгоритм пригоден лишь для полносвяз ных нейронных сетей и неприменим в сетях другой архитектуры.Указанные недостатки и малая изученность таких вопросов, как структура и частота появления ложных реакций, реализация итеративных процедур доучивания и применение в неполносвязных сетях, затрудняет использование проекционного алгоритма в исследованиях по нейробионике и при проектировании нейропроцессоров.

Недостатком проекционного алгоритма с точки зрения решения задачи прогнозирования является то, что при обучении необходимо с начала сформировать эталоны распознаваемых образов. В задаче прогнозирования это либо вовсе невозможно, либо чрезвычайно затруднено. Эталоны должны формироваться в самой сети на основе анализа исторических данных. Исходя из вышеизложенного, можно заключить, что для решения задач прогнозирования наиболее подходит сеть с обратным распространением.Она позволяет формальным образом обучить сеть прогнозировать изменение требования на основе исторических данных о требовании. 3. ПРОГНОЗИРОВАНИЕ НА ОСНОВЕ НЕЙРОННЫХ СЕТЕЙ В данной главе описан способ прогнозирования с помощью НС, основанный на методе окон. Также приведен обзор применения НС в финансовой сфере. 3.1. Общий подход к прогнозированию с помощью нейронных сетей На НС задача прогнозирования формализуется через задачу распознавания образов.

Данных о прогнозируемой переменной за некоторый промежуток времени образуют образ, класс которого определяется значением прогнозируемой переменной в некоторый момент времени за пределами данного промежутка т.е. значением переменной через интервал прогнозирования.

Метод окон предполагает использование двух окон Wi и Wo с фиксированными размерами n и m соответственно.Эти окна, способны перемещаться с некоторым шагом по временной последовательности исторических данных, начиная с первого элемента, и предназначены для доступа к данным временного ряда, причем первое окно Wi, получив такие данные, передает их на вход нейронной сети, а второе - Wo - на выход.

Получающаяся на каждом шаге пара Wi - Wo 3.1 используется как элемент обучающей выборки распознаваемый образ, или наблюдение . Например, пусть есть данные о еженедельных продажах режущего инструмента k 16 100 94 90 96 91 94 95 99 95 98 100 97 99 98 96 98 3.2 Весь ряд смотри приложение 1. Зададим n 4, m 1, s 1. С помощью метода окон для нейронной сети будет сгенерирована следующая обучающая выборка 100 94 90 96 - 91 94 90 96 91 - 94 90 96 91 94 - 95 3.3 96 91 94 95 - 99 91 94 95 99 - 95 и т.д. Каждый следующий вектор получается в результате сдвига окон Wi и Wo вправо на один элемент s 1 . Предполагается наличие скрытых зависимостей во временной последовательности как множестве наблюдений.

Нейронная сеть, обучаясь на этих наблюдениях и соответственно настраивая свои коэффициенты, пытается извлечь эти закономерности и сформировать в результате требуемую функцию прогноза P. Прогнозирование осуществляется по тому же принципу, что и формирование обучающей выборки.

При этом выделяются две возможности одношаговое и многошаговое прогнозирование. МНОГОШАГОВОЕ ПРОГНОЗИРОВАНИЕ. Используется для осуществления долгосрочного прогноза и предназначено для определения основного тренда и главных точек изменения тренда для некоторого промежутка времени в будущем.При этом прогнозирующая система использует полученные выходные данные для моментов времени k 1, k 2 и т.д. в качестве входных данных для прогнозирования на моменты времени k 2, k 3 и т.д. Предположим, система обучилась на временной последовательности 3.2 . Затем она спрогнозировала k 1 элемент последовательности, например, равный 95, когда на ее вход был подан последний из известных ей образов 99, 98, 96, 98 . После этого она осуществляет дальнейшее прогнозирование и на вход подается следующий образ 98, 96, 98, 95 . Последний элемент этого образа является прогнозом системы.

И так далее.

ОДНОШАГОВОЕ ПРОГНОЗИРОВАНИЕ. Используется для краткосрочных прогнозов, обычно - абсолютных значений последовательности.Осуществляется прогноз только на один шаг вперед, но используется реальное, а не прогнозируемое значение для осуществления прогноза на следующем шаге. Для временной последовательности 3.2. На шаге k 1 система прогнозирует требование 95, хотя реальное значение смотри приложение 1 должно быть 96. На шаге k 2 в качестве входного образа будет использоваться образ 98, 96, 98, 96 . Как было сказано выше, результатом прогноза на НС является класс к которому принадлежит переменная, а не ее конкретное значение.

Формирование классов должно проводиться в зависимости от того каковы цели прогнозирования. Общий подход состоит в том, что область определения прогнозируемой переменной разбивается на классы в соответствии с необходимой точностью прогнозирования.Классы могут представлять качественный или численный взгляд на изменение переменной. 3.2. Применение нейронных сетей в финансовой сфере Характерный пример успешного применения нейронных вычислений в финансовой сфере - управление кредитными рисками.

Как известно, до выдачи кредита банки проводят сложные статистические расчеты по финансовой надежности заемщика, чтобы оценить вероятность собственных убытков от несвоевременного возврата финансовых средств.Такие расчеты обычно базируются на оценке кредитной истории, динамике развития компании, стабильности ее основных финансовых показателей и многих других факторов.

Один широко известный банк США опробовал метод нейронных вычислений и пришел к выводу, что та же задача по уже проделанным расчетам подобного рода решается быстрее и точнее. Например, в одном из случаев оценки 100 тыс. банковских счетов новая система, построенная на базе нейронных вычислений, определила свыше 90 потенциальных неплательщиков.Другая очень важная область применения нейронных вычислений в финансовой сфере - предсказание ситуации на фондовом рынке.

Стандартный подход к этой задаче базируется на жестко фиксированном наборе правил игры , которые со временем теряют свою эффективность из-за изменения условий торгов на фондовой бирже. Кроме того, системы, построенные на основе такого подхода, оказываются слишком медленными для ситуаций, требующих мгновенного принятия решений. Именно поэтому основные японские компании, оперирующие на рынке ценных бумаг, решили применить метод нейронных вычислений.В типичную систему на базе нейронной сети ввели информацию общим объемом в 33 года деловой активности нескольких организаций, включая оборот, предыдущую стоимость акций, уровни дохода и т.д. Самообучаясь на реальных примерах, система нейронной сети показала большую точность предсказания и лучшее быстродействие по сравнению со статистическим подходом дала улучшение результативности в целом на 19 . Следующий пример, довольно близкий к области финансового рынка оценка стоимости недвижимости.

Решение этой задачи зависит в основном от опыта сотрудника риэлтерской фирмы, учитывающего множество таких неравноценных факторов, как доля собственности, качество постройки, окружающая обстановка и т.д. Группа исследователей из университета г.Портсмут Великобритания заложила в вычислительную систему на базе нейронной сети данные по оценке недвижимости из обзоров риэлтеровских фирм и списков аукционных цен. Результат показал, что самообучившаяся система дает оценки стоимости, хорошо коррелируемые с экспертными заключениями специалистов этого профиля.

Пример удачного прогнозирования динамики биржевых курсов по заказу Chemical Bank продемонстрировала фирма Logica.

На технической базе Sun SPARCstation LX с помощью нейронных вычислений моделировались рынки валютных курсов доллар швейцарский франк и немецкая марка швейцарский франк.Выбор именно этих валют объяснялся высоким уровнем подвижности первого соотношения и малым - второго до кризиса в 1993 году . Данные о динамике кросс-курсов этих валют собирались с 1 октября 1992 года по 1 октября 1993 года, при этом ценовые прогнозы характеризовались пятью категориями большой рост, малый рост, без изменений, малый спад, большой спад. В итоге нейронная система предсказала за вышеупомянутый годовой период 55 реальных данных по первому соотношению валют и 23 - по второму.

Лондонская фондовая биржа ЛФБ начала внедрение автоматизированной системы с элементами искусственного интеллекта на базе нейронных вычислений для контроля внутреннего дилинга.Первый этап инсталляции этой системы, разработанной лондонской фирмой SearchSpace и получившей кодовое наименование MonITARS Monitoring Insider Trading and Regulatory Surveillance , успешно завершен.

По оценкам экспертов, бум вокруг систем искусственного интеллекта в финансовой индустрии пришелся на период 1984 - 1989 гг. В основном он затронул США и в меньшей степени Великобританию, где разработчики сложных имитационных систем для военных типа программы Звездные войны решили попытать счастья на Уолл-стрит.

Многие разработчики действительно обогатились, чего нельзя сказать о финансовых структурах, чьи завышенные ожидания эффекта от внедрения подобных систем не оправдались. Так, один крупный инвестиционный банк на Уолл-стрит потратил более 1 млн. долл. на разработку системы искусственного интеллекта для финансовых операций, но спустя некоторое время вынужден был вернуться к старой, неинтеллектуальной . Одной из причин неудачи был недостаточный по сравнению с ожидаемым уровень производительности системы, полученный в результате ее внедрения.

Американская фондовая биржа в Нью-Йорке пошла по аналогичному пути, запустив в 1987 году автоматизированную систему Stockwatch Alert Terminal SWAT II. Ее расширенная версия - SWAT III - сейчас проходит бета-тестирование и, видимо, будет внедрена в начале года. Правда, фирма SearchSpace утверждает, что выбрала другую технологию в отличие от SWAT , называемую генетическими алгоритмами , и ведет переговоры о ее внедрении с рядом бирж Европы и Дальнего Востока.

В настоящее время банки пришли к выводу, что прикладные системы, разработанные на базе нейронных сетей, могут принести им пользу. На рынке уже предлагаются продукты подобного рода, определяющие вероятность риска при выдаче кредита, а также пакеты моделирования и прогнозирования банкротства, анализа портфеля ценных бумаг и торговли акциями.Нейронные сети заменяют традиционные системы в таких научно-технических областях, как статистические методы, распознавание образов, линейный и нелинейный математический анализ. Mellon equity Associates - подразделение Mellon Bank в Питтсбурге США - достаточно давно применяло собственную систему анализа линейной регрессии для распределения фондов и специальной селекции акций.

В ходе работы они обнаружили, что между различными оценочными параметрами существуют нелинейные связи, не поддающиеся точному учету с помощью имеющегося у них инструментария.Поскольку данное направление работ составляет примерно половину всего бизнеса компании под управлением находится около 2.5 млрд. долл. инвестиций , то поиск более точных средств стал жизненно важной задачей.

После тщательного анализа разных систем разработок ПО с помощью нейронных сетей Mellon Equity Associates выбрала пакет Neural-Works Professional II Plus 5.0 фирмы Neural- Ware Питтсбург . Основанием для этого послужило наличие у него таких возмо.