Назначение, задачи и особенности применения технологии оперативного анализа данных в АС АДППР “Аналитика 2000”

 

 

Заключение

 

 

Дальнейшее  развитие программного комплекса «Аналитика»  планируется осуществлять в следующих  основных направлениях:

- расширение  функциональных возможностей комплекса  — заключается в реализации анализа новых размерностей и показателей не только в интересах УТСиА, но и других подразделений ГТК России;

• использование Web-технологий для доступа к аналитическому инструментарию — это направление может найти применение не только в рамках ГТК России, но и для организации доступа правительственных структур и иных государственных организаций к агрегированным данным таможенной информации;
• разработка приложений высокого уровня. Пользовательский интерфейс программного комплекса «Аналитика» реализован стандартными средствами Oracle Express Analyser и ориентирован на пользователей-аналитиков, знакомых с общими положениями организации Windows-интерфейса. Однако для руководителей высшего уровня управления целесообразно с помощью 
  Oracle Express Objects разработать специальные приложения, максимально упрощенные в части организации пользовательского интерфейса;
• оптимизация комплекса в анализе возможностей и реализации сокращения времени загрузки баз агрегированных данных и их объемов;
• решение задачи распространения комплекса. После разработки и внедрения систем динамического анализа данных для центрального аппарата встает задача обеспечения регионального уровня подобным механизмом. При решении этой задачи предлагается подход, при котором на уровне регионов использовались бы Витрины Данных, созданные на верхнем уровне — в ГТК России (рис. 5).

Поскольку ЦБД  ГТД представляет собой объединение  региональных БД ГТД, то задачи «Аналитики», решаемые на целевых базах данных Витрин Данных, полученных из ЦБД ГТД, могут быть применимы и для использования в регионах.

Для обеспечения такого подхода прежде всего необходимы скоростные каналы передачи данных в звене «центр-регион». Телекоммуникационная среда ЕАИС уже сегодня- наиболее развита именно в этом звене и в дальнейшем звено «центр — регион» будет развиваться на базе использования выделенных высокоскоростных цифровых каналов связи. Предложенный подход имеет следующие преимущества перед подходом, при котором в каждом регионе создавались бы свои Витрины Данных:

• централизованное использование Витрин Данных, как, 
  впрочем, и любая централизация, сводит к нулю возможные разночтения данных (на уровнях региона и центра) при их подготовке к анализу и собственно при их анализе;
• поскольку целевые базы данных Витрин Данных требуют значительных ресурсов дисковой памяти, при их централизованном 
  использовании необходимые дисковые ресурсы будут меньше.

Изложенный  подход к организации анализа  данных в регионах не отрицает создания на уровне регионов специализированных Витрин Данных для анализа данных, которые присутствуют на уровне региона и по какой-либо причине отсутствуют в центре. Однако при принятии решения о проектировании региональных Витрин Данных необходимо тщательно анализировать состав данных с целью недопущения информационной избыточности множества Витрин Данных регионов и центра.

 

 

Список используемых литературных источников

 

1. Данилин Н.С., Ю.А. Чеботов, Г.В. Каширский. Проектирование и разработка систем, ориентированных на динамический анализ данных в АЭИС ГТК России: Учебное  пособие . - М.: РИО РТА, 2001
2. Сахаров А.А. Концепция построения и реализации информационных систем, ориентированных на анализ данных//Системы управления базами данных, 1996, №4
3. Чеботов Ю.А. Автоматизация деятельности таможенных органов России. _ М,: РИО РТА, 1998.

 

Система поддержки принятия решений: СППР "Аналитика - 2000"

"Спроектированная и разработанная  совместными усилиями специалистов  ГНИВЦ ФТС России и компании  РДТЕХ система "Аналитика 2000" представляет собой реальное  воплощение современной концепции  системы анализа данных и поддержки принятия решений, построенной с использованием современных информационных технологий", - Александр Хотько, первый заместитель директора ГНИВЦ ФТС России.

 

Заказчик: Федеральная таможенная служба.

 

Отрасль: Государственная структура.

 

Информация о заказчике:

Федеральная таможенная служба является уполномоченным федеральным органом  исполнительной власти, осуществляющим в соответствии с законодательством  Российской Федерации функции по выработке государственной политики и нормативному правовому регулированию, контролю и надзору в области таможенного дела, а также функции агента валютного контроля и специальные функции по борьбе с контрабандой, иными преступлениями и административными правонарушениями.

 

Предпосылки создания системы:

В течение 1992-2007 г.г. в целях автоматизации таможенной деятельности, повышения эффективности таможенного оформления и таможенного контроля были проведены опытно-конструкторские работы по созданию автоматизированных систем и комплексов программных средств, входящих в состав Единой автоматизированной информационной системы (ЕАИС) таможенных органов.

 

В базах данных ЕАИС таможенных органов  хранятся и обрабатываются огромные объемы информации, превышающие несколько  терабайт, по различным аспектам таможенной деятельности, включая электронные копии грузовых таможенных деклараций и таможенных приходных ордеров, оформленных таможнями России, начиная с 1991 года. Ежедневное поступление данных составляет от 6 до 8 тысяч записей.

 

Значительные объемы информации о  внешнеэкономической деятельности России потребовали эффективных средств их обработки для обеспечения процессов поддержки принятия решений по управлению таможенной деятельностью.

 

Цели проекта:

Система поддержки принятия решений, получившая наименование "Аналитика 2000", создавалась с целью обеспечения оперативного анализа данных о внешнеэкономической деятельности России, стран Евросоюза и СНГ, а также подготовки и формирования публикаций таможенной статистики внешней торговли России и Союзного государства.

 

При этом СППР "Аналитика 2000" способствует оптимизации деятельности ФТС России:

Сокращается время и трудозатраты, необходимые для получения оперативной  агрегированной информации.

Повышается производительность труда  сотрудников ФТС России.

Улучшается качество аналитических  данных, выдаваемых по запросам вышестоящих организаций.

Руководители высшего и среднего звена, а также аналитики могут  легко ориентироваться в огромных объемах данных и выбирать информацию, необходимую для принятия решений.

Обеспечивается возможность графического представления данных, а также получения отчетов сводной информации.

 

 

Задачи проекта 

Создание системы поддержки  принятия решений "Аналитика 2000" обеспечивает решение следующих  задач:

Оперативный анализ агрегированных данных статистики внешней торговли, региональной и специальной таможенной статистики.

Оперативный сопоставительный анализ агрегированных данных ЕАИС и стран-контрагентов (страны ЕС).

Подготовка и формирование публикаций таможенной статистики внешней торговли.

Оперативный анализ данных таможенных приходных ордеров.

Оперативный анализ данных по товарообменным и бартерным операциям, а также  по принадлежности транспортных средств.

Оперативный анализ данных статистики внешней торговли за счет реализации технологии анализа данных "от агрегата к детали".

Оперативный анализ агрегированных данных по безвозмездной и гуманитарной помощи.

 

 

Ход проекта 

CППР "Аналитика-2000" находится  в опытной эксплуатации в составе  ЕАИС таможенных органов с  1998 года. В период с 1998 по 2008 год  выполнялись работы по расширению ее функциональных возможностей и модернизации в соответствии с изменениями нормативно-правовой базы ФТС России.

 

В качестве платформы для реализации системы было выбрано семейство  продуктов для оперативной аналитической  обработки данных (OLAP) Oracle Express. Семейство включает в себя сервер OLAP Oracle Express Server, клиентские приложения Oracle Analyzer, а также среду разработки Oracle Objects и дополнительные модули. В Oracle Express реализуется подход, основанный на хранении анализируемых данных в многомерной базе данных. Для доступа к детальным данным из многомерных кубов используется продукт Oracle Discoverer.

 

 

Структура СППР "Аналитика" представляет собой классическую систему с  хранилищем данных и зависимыми витринами  данных. Информационные массивы СППР "Аналитика" делятся на три основные группы:

База данных системы оперативной  обработки информации (внутренние источники  информации)

Базы данных внешних источников

Хранилище и Витрины Данных

 

 

Центральная база данных грузовых таможенных деклараций, функционирующая под управлением СУБД Oracle (в 2008 году осуществлена миграция на версию Oracle Database 10g) связана с витринами данных через промежуточную технологическую базу данных (прототип корпоративного хранилища данных).

 

В технологическую базу данных загружаются подмножества необходимых для анализа реквизитов деклараций и приходных ордеров, хранящихся в центральной базе данных. Из технологической базы данные после предварительной обработки и агрегации загружаются в витрины данных, построенные по гибридной технологии.

 

Каждая витрина данных состоит  из многомерной базы агрегированных данных под управлением Oracle Express, в  которой хранятся наиболее часто  используемые данные, и реляционной  базы агрегированных данных, в которой  содержится более подробная информация. Загрузка данных в витрины занимает несколько часов и производится в соответствии с установленным регламентом. Для аналитика, работающего с клиентским программным обеспечением Express Analyzer, доступ к данным "прозрачен" и не зависит от источника информации.

 

В рамках модернизации 2008 года состав данных хранилища и витрин расширен для обеспечения возможности  анализа данных таможенной статистики внешней торговли России на уровне детализированных кодов товаров  по товарной номенклатуре внешнеэкономической деятельности, а также обработки статистических данных, предоставляемых Международным валютным фондом в ФТС России.

 

Результаты проекта 

В результате введения в промышленную эксплуатацию СППР "Аналитика 2000" удалось существенно, на несколько порядков, уменьшить время и одновременно значительно повысить качество решения аналитических задач.

 

Время выполнения нерегламентированных запросов к данным таможенных деклараций сократилось с часов и дней до секунд и минут. В процессе разработки и оптимизации удалось существенно повысить эффективность системы по сравнению с первоначальной реализацией, сократив время загрузки информации и уменьшив объемы памяти, необходимые для хранения агрегированных данных.

 

Полностью изменился характер работы аналитика ? теперь он занимается анализом данных, а не их "добычей".

 

Появилась ранее недостижимая гибкость проведения анализа. Анализируемые  агрегированные данные представляются в виде последовательности интерактивных  динамических отчетов (таблиц и диаграмм), позволяющих пользователю изменять уровни агрегации анализируемых измерений и срезы данных в рамках определенных размерностей и форм представления статистических показателей.

 

В итоге, СППР "Аналитика 2000" признана корпорацией Oracle крупнейшей реализацией OLAP-системы в Европе.

 

Сопровождение и ежегодная модернизация СППР "Аналитика 2000" позволяют  своевременно приводить информационное и программное обеспечение в  соответствие с требованиями новых  нормативных правовых документов ФТС  России, определяющих порядок заполнения грузовой таможенной декларации и транзитной декларации. Так, в 2008 году был обеспечен доступ внешних подсистем из состава ЕАИС таможенных органов к информационным массивам со статистическими данными, предоставляемыми Международным валютным фондом в ФТС России, а также другим информационным массивам СППР "Аналитика-2000".

 

Почему Oracle?

Программная платформа Единой автоматизированной информационной системы таможенных органов, в рамках которой функционирует  СППР "Аналитика 2000", базируется на реляционной СУБД Oracle. Выбор платформы обусловлен возможностями СУБД Oracle по хранению очень больших объемов информации и обеспечению высокой скорости выполнения запросов при большом количестве одновременно работающих пользователей.

 

При выборе платформы для СППР "Аналитика 2000" учитывалась такое важное достоинство семейства продуктов Oracle Express, как возможность реализации гибридных решений, сочетающих достоинства ROLAP и MOLAP-технологий. При этом определенная часть анализируемых данных (например, соответствующая верхним уровням агрегирования) хранится в многомерной базе данных, а другие - в реляционной базе данных, связанной с многомерной базой данных динамическими связями.

 

Обратная связь 

По всем вопросам Вы можете обратиться в Департамент маркетинга.

 

http://www.rdtex.ru/win/root/analitika.html

 

http://softsearch.ru/programs/54-822-analitika-2000-download.shtml

 

¹ Единое интегрированное хранилище детальных данных, относительно статичное, поддерживающее хронологию и согласованность данных, служащее единым источником для предметно-ориентированных баз данных, которые, в свою очередь, позволяют группа качественных пользователей самостоятельно и эффективно выполнять нерегламентированные запросы и проводить анализ данных  (1)

² Множество тематических баз данных, содержащих информацию, относящихся к отдельным аспектам деятельности предприятия (организации), там же

³ Все схемы и рисунки в работе использованных из источника (1)