Система автоматизированной обработки статистической информации

Проектирование  КЭОИ с использованием ППП "Форма" сводится к составлению настроечной  информации двух типов: справочников, жестко привязанных к структуре  первичных и сводных отчетов, и различных каталогов и справочников, не зависящих от этих структур. Настроечные  массивы первого типа индивидуальны  для конкретного КЭОИ, а второго  являются общими для многих КЭОИ.

Множество настроечных массивов, используемых в каждом КЭОИ, представляет собой  формализованное описание на входном  языке ППП "Форма" постановки соответствующей конкретной регламентной статистической задачи.

Обобщая традиционный набор программных  модулей и основываясь на вышеизложенных концепциях создания и функционирования программного обеспечения, в ППП "Форма" разработаны следующие типовые  программные модули, полностью реализующие  решение регламентных задач с  использованием сводно-группировочных методов обработки данных: ввод, контроль и запись первичных отчетов; корректировка первичных отчетов; формирование сводов; печать сводных  отчетов.

Взаимосвязь программных модулей ППП "Форма" и информационных (настроечных) массивов при решении регламентных задач  показана на рис.

Для ввода, контроля и записи первичных  отчетов на машинные носители используется программа ВКЗ. С ее помощью осуществляется ввод исходных массивов АХВ, подготовленных на различных носителях (перфолента, магнитная лента) , или прямо с  терминалов. Исходные массивы готовятся  пачками. В первой строке указываются  код КЭОИ, номер пачки и количество отчетов в пачке; во второй — идентификатор  отчета (регистрационный номер объекта  по ОКПО) ; в третьей — строки отчета (код строки и содержание ее граф) . После последней строки отчета ставится знак — разделитель отчета.

Программой  ВКЗ выявляются отклонения, вызванные  нарушением различных видов арифметического  и логического контроля, которые  выдаются в форме протокола ошибок. Данные записываются на магнитные диски  в виде массива ВХВ Описанные  действия программы ВКЗ выполняются  с помощью следующих заранее  подготовленных настроечных массивов: описание оглавления формы-файла НХВ, описание структуры первичного отчета СТРХВ и описание каталога первичных  отчетов КАТХЗ.

Форма-файл — это машинная форма представления  исходных данных в виде последовательности записей, где каждому первичному отчету соответствует одна запись. Оглавление формы-файла содержит его  такие основные физические и логические характеристики, как код КЭОИ, длина  одной логической записи, код территории, количество реквизитов-признаков и  реквизитов-оснований, максимальная размерность  массива, признак отсортированности  отчетов, количество и номер цикла  обработки отчетности, модуль упаковки и распаковки массива и др.

Использование ППП "Форма" позволяет для всех первичных отчетов пользоваться единым описанием их структуры, которое  содержит следующие основные элементы: описание параметров; описание разделов отчета; описание строк отчета; описание контроля. В описании параметров указывается: признак структуры отчета (фиксированная, переменная или комбинированная) ; количество фиксированных строк и граф; максимальное количество переменных строк и количество граф в переменных строках.

Описание  разделов выполняется для фиксированных  строк, где указывается количество фиксированных разделов, количество фиксированных строк и количество граф в каждом разделе.

В описании строк дается код строки и перечисляются все коды граф, относящиеся к каждой строке.

Описание  контроля отчетов состоит из совокупности описаний однотипных операций контроля и включает следующие типы: балансовый контроль строк; балансовый контроль граф; сравнение допустимого отклонения от ожидаемых данных по различным  строкам и графам с фактическими данными; контроль пографной увязки данных; проверка построчных и постраничных контрольных сумм; проверка недопустимых пустых строк и закрещенных граф.

Формула для каждой перечисленной типовой  операции контроля имеет свою уникальную конструкцию.

Каталог первичных отчетов в основном используется для контроля полноты  записи отчетов, а также определяет перечень используемых кодов. Унифицированный  каталог (для многих КЭОИ) в рамках отрасли статистики состоит из заголовка  и карточек каталога на каждый первичный  отчет.

Заголовок определяет параметры каталога, в  который включаются: максимальный номер  карточки и количество признаков  в каталоге, номер ключевого признака (обычно регистрационный номер объекта) каталога и максимальная его длина.         18 В каждых последующих карточках отражаются реквизиты-признаки объекта обследования. Для промышленных предприятий это будет порядковый номер карточки, регистрационный номер объекта по ОКПО, код отрасли по ОКОНХ, код министерства по СООГУ, код промышленного объединения, код территории по СОАТО и другие используемые коды.

Корректировка исходных массивов ВХВ по программе  КОР выполняется только в том  случае, если при вводе данных протокол ошибок содержит сведения о нарушениях различных типов контроля. С этой целью предварительно составляется массив корректур АХВ и используется описание структуры первичного отчета СТРХВ и каталог первичных  отчетов КАТХВ. Корректировка осуществляется до тех пор, пока не прекратятся сообщения  в протоколе ошибок, при этом исходный массив ВХВ преобразуется в откорректированный массив СХВ.

Программа корректировки допускает следующие  типы корректур: замена реквизитов-признаков; замена реквизитов-оснований; удаление отчета; перевод отчета из списка ошибочных  в список правильных.

Для первого типа корректур указывается  регистрационный номер объекта  по ОКПО, номер и новое значение корректируемого признака, а также  контрольная сумма предыдущих трех чисел.

Для последующих типов корректур  применяется структура бланка корректур  со следующими графами: регистрационный  номер объекта по ОКПО, код строки, код графы, новое значение (или  приращение с соответствующим знаком) и контрольная сумма. Для перевода отчета из списка ошибочных в список правильных в бланке корректур коды строки, графы и новое значение должно равняться нулю, а для удаления отчета код строки должен равняться  нулю, код графы — единице, новое  значение — нулю. После окончания  корректировки переходят к программе  формирования сводных итогов ФСВ. Исходными  данными для ее функционирования являются откорректированный массив СХВ, каталог первичных отчетов КАТХВ, определяющий список сводных отчетов, к которым принадлежит первичный  отчет, и специально подготовленный массив вхождения МВХВ, предназначенный  для описания схемы формирования сводных отчетов иерархической  структуры. В результате работы этой программы получаем выходной массив ЕХВ, содержащий накопленные итоги  сводного отчета.

Массив  вхождения определяет порядок вхождения  первичных отчетов в соответствующие  сводные отчеты. Он состоит из заголовка  и элементов массива вхождения.

Заголовок в основном используется для формирования оглавления массива сводного отчета и кроме этих характеристик включает максимальную глубину вхождения (число  разрезов, в которые войдет первичный  отчет) , количество и порядковые номера реквизитов-признаков в каталоге первичных отчетов, используемых для  определения их входимости в сводные  отчеты и другие признаки.

Элементы  массива вхождения определяют конкретные значения реквизитов-признаков и  правила формирования сводных отчетов. В каждом элементе массива вхождения, соответствующем одному сводному отчету, сначала определяются списки реквизитов-признаков, определяющих входимость показателей  первичного отчета в сводный отчет, а затем перечисляются номера граф этих признаков в каталоге первичных  отчетов КАТХВ с указанием  алгебраического сложения или вычитания  показателей.

Заключительным  этапом реализации ППП "Форма" является печать сводных отчетов с помощью  программы ПСВ. Исходными данными  для работы этой программы является полученный массив сводных итогов ЕХВи предварительно подготовленные каталог сводных отчетов КАТСХВ и описание выходных таблиц ТАБХВ.

Каталог сводных отчетов применяется  для определения перечня выдаваемых сводных отчетов, и он получается на основе массива вхождений МВХВ, из которого берутся только списки реквизитов-признаков, определяющих входимость показателей в сводный отчет. Отчеты, не указанные в этом каталоге, исключаются из процесса обработки.

Описание  выходной таблицы состоит из четырех  разделов: раздел параметров заголовочной части таблицы; раздел текстов; раздел получения производных граф; раздел параметров содержательной части таблиц.

В разделе параметров заголовочной части  таблицы дается характеристика размещения заголовков, подзаголовков, рамки с  кодами и шапки (наименование и номера граф содержательной части) таблицы.

Раздел  текстов служит для оформления выходных таблиц и содержит описания символьных текстов, которые включают заголовки, рамки кодов, шапки, боковики и т.д.

Раздел  производных граф описывается в  том случае, если их значение можно  вычислить, используя исходные графы. Для этого указываются номера исходных граф и тип групповой  арифметической операции, выполняемой  для получения производной графы.

В разделе параметров содержательной части таблицы дается описание боковика, строк таблицы и расчет производных  строк. Описание расчета производных  строк составляется аналогично описанию производных граф.

На  основе ППП "Форма" разработаны  и внедрены рабочие проекты системных  и локальных КЭОИ для автоматизированного  решения около100 (ста) регламентных статистических задач. Его использование  позволяет сократить в 2-3 раза трудовые затраты и значительно уменьшить  стоимостные затраты на проектирование новых КЭОИ, а также упростить  эксплуатацию КЭОИ за счет внедрения  типовых проектных решений по основным процедурам технологического процесса обработки статистической информации на ЭВМ.

3. Организация решения статистических  задач с помощью комплекса  средств новой технологии для  обработки статистической информации.

Одной из главных особенностей автоматизированной обработки статистической информации является новая технология, обеспечивающая более эффективную обработку  на основе достижения технической, программной, информационной и методологической совместимости.

Новая технология разрабатывается в качестве единой и типовой для всех срочной  и почтовой статистической отчетности. Она предполагает постепенный переход  от технологии функционирования относительно самостоятельных отраслей статистики (на базе отдельных трудоемких статистических работ, выполняемых с помощью  КЭОИ) к построению интегрированной  информационной системы, охватывающей не только систему государственной  статистики, но и информационные базы предприятий и организаций, а  также различных отраслевых и  региональных органов.

Новая технология намечает изменение традиционных потоков информации, способов формирования статистической отчетности на первичных  объектах статистического наблюдения и представления ее в органы государственной  статистики. Предполагается в отчитывающихся организациях создание автоматизированных банков данных и включение в них  интегрированных систем статистических показателей, которые по каналам  связи либо на технических носителях  должны поступать в органы государственной  статистики.

Новая технология ориентирована на активное участие экономистов и статистиков  в процессе обработки данных в  регламентированном режиме и в режиме информационно-справочного обслуживания. При этом обеспечивается не только разработка текущей статистической отчетности, но и выполнение комплекса  аналитических работ, связанных  с составлением бюллетеней, докладов, справок и т.п.

Комплекс  средств новой технологии включает системные комплексы сбора, обработки  и передачи по каналам связи статистических данных, созданные по новой технологии (КНТ) , базы данных (БД) , разработанные  по единой логической структуре в  среде АБД, автоматизированные рабочие  места экономиста-статистика для  выдачи аналитической информации во взаимодействии с базами данных (АРМ) . Он обеспечивает автоматизацию обработки  статистической информации на всех этапах технологического процесса: сбор данных, их контроль и подготовка для обработки, обработка, выдача результатов и  передача на вышестоящий уровень. Состав комплекса средств новой технологии единый для регионального и федерального уровней ГКС РФ. Составные части, входящие в комплекс средств новой  технологии, взаимоувязаны между  собой и разработаны в единой программно-технологической среде, т.е. фактически происходит интеграция различных программно-технологических  средств решения задач.