Обработка экспертных оценок. Сертификация продукции

1. Обработка экспертных оценок при  прогнозировании  развития объекта

     Задачи  прогнозирования, решаемые с помощью методов экспертных оценок, включают два формально не связанных между собой элемента: определение возможных вариантов развития объекта прогнозирования и их оценку. Анализ экспертных методов показывает целесообразность применения «мозговых атак» для определения возможных вариантов развития. Сущность этого метода состоит в актуализации творческого потенциала специалистов при «мозговой атаке» проблемной ситуации, реализующей вначале генерацию идей и последующее деструирование (разрушение, критику) этих идей с формулированием контридей. Работа с методом «мозговой атаки» предполагает реализацию следующих шести этапов.

     Первый  этап - формирование группы участников «мозговой атаки» (по численности и составу). Оптимальная численность группы участников находится эмпирическим путем: наиболее продуктивными признаны группы в 10-15 человек. Состав группы участников предполагает их целенаправленный подбор: 1) из лиц примерно одного ранга, если участники знают друг друга; 2) из лиц разного ранга, если участники не знакомы друг с другом (в этом случае следует нивелировать каждого из участников присвоением ему номера с последующим обращением к участнику по номеру). Что же касается необходимости специализации участника в области проблемной ситуации, то это условие не является обязательным для всех членов группы. Более того, весьма желательно, чтобы в группе были специалисты других областей знания, обладающие высоким уровнем общей эрудиции и понимающие смысл проблемной ситуации.

     Второй  этап - составление проблемной записки участника мозговой атаки. Она составляется группой анализа проблемной ситуации и включает описание этого метода и описание проблемной ситуации. Данное описание содержит: принцип, на котором основан метод; условия, обеспечивающие наибольшую эффективность «мозговой атаки», авторство результатов атаки; основные правила проведения атаки. Описание проблемной ситуации содержит: причины возникновения проблемной ситуации; анализ причин и возможные последствия возникшей проблемной ситуации (целесообразно гиперболизировать последствия, с тем чтобы острее ощущалась необходимость разрешения противоречий); анализ мирового опыта разрешения подобной проблемной ситуации (если он имеется); классификацию (систематизацию) существующих путей разрешения проблемной ситуации, формулировку проблемной ситуации в виде центрального вопроса с иерархией подвопросов.

     Третий  этап - генерация идей. Она начинается с того, что ведущий раскрывает содержание проблемной записки. Предсказывая описание метода, ведущий концентрирует внимание участников на правилах проведения мозговой атаки: 1) высказывания участников должны быть четкими и сжатыми; 2) скептические замечания и критика предыдущих выступлений не допускаются; 3) каждый из участников имеет право выступать много раз, но не подряд; 4) не разрешается зачитывать подряд список идей, который может быть подготовлен участниками заранее. Пересказывая содержание проблемной ситуации, ведущий концентрирует внимание участников на основном вопросе. Свое выступление ведущий должен строить таким образом, чтобы пробудить психологическую восприимчивость участников, заставить их почувствовать потребность сделать то, о чем он их просит. Желаемый отклик участников - воля к целеустремленности мышления, направленного на решение проблемной ситуации.

     Активная  деятельность ведущего предполагается только в начале «мозговой атаки». После того как участники достаточно возбудились, процесс выдвижения новых идей идет спонтанно. Ведущий в этом процессе играет пассивную роль, регламентируя участников согласно правилам проведения атаки. Следует помнить, что, чем разнообразнее и больше количество высказываний, тем шире и глубже охватывается рассматриваемый вопрос и тем больше вероятность появления ценных высказываний. Учитывая изложенное обстоятельство, ведущий при проведении атаки должен руководствоваться следующими правилами:

     - сосредоточивать внимание участников  на проблемной ситуации, задавая  рамки специфическими её требованиями  и терминологической строгостью  высказываемых идей;

     - не объявлять ложной, не осуждать  и не прекращать исследование ни одной идеи, т.е. рассматривать любую идею независимо от её кажущейся уместности или осуществимости;

     - приветствовать усовершенствование  или комбинацию идей, предоставляя слово в первую очередь тому, кто хочет высказаться в связи с предыдущим выступлением;

     - оказывать поддержку и поощрение  участникам, столь необходимые для того, чтобы освободить их от скованности;

     - создавать непринужденность обстановки, способствуя, таким образом, активизации  участников атаки. 

     Продолжительность мозгового штурма рекомендуется не менее 20 минут и не более 1 часа в зависимости от активности участников. Целесообразно вести запись высказываемых идей.

     Четвертый этап - систематизация идей, высказанных на этапе генерации. Систематизацию идей группа анализа проблемной ситуации осуществляет в такой последовательности: составляется номенклатурный перечень всех высказанных идей; каждая из идей формулируется в общеупотребительных терминах; определяются дублирующие и дополняющие идеи; дублирующие и (или) дополняющие идеи объединяются и формулируются в виде одной комплексной идеи; выделяются признаки, по которым идеи могут быть объединены; идеи объединяются в группы согласно выделенным признакам; составляется перечень идей по группам (в каждой группе идеи записываются в порядке их общности: от более общих к частным, дополняющим или развивающим более общие идеи).

     Пятый этап - деструирование (разрушение, критика) систематизированных идей (специализированная процедура оценки идей на практическую реализуемость в процессе мозговой атаки, когда каждая из них подвергается всесторонней критике со стороны участников мозговой атаки).

     Основное  правило этапа деструирования - рассматривать каждую из систематизированных идей только с точки зрения препятствий на пути к её осуществлению, т.е. участники атаки выдвигают доводы, опровергающие систематизированную идею. Особенно ценным является то обстоятельство, что в процессе деструирования может быть генерирована контридея, формулирующая имеющиеся ограничения и выдвигающая прещщложение о возможности снятия этих ограничений.

1. Группа участников мозговой атаки этого этапа состоит из высококвалифицированных специалистов в обсуждаемой области, численность её достигает 20-25 человек, а продолжительность - 1,5 часа. Процесс деструирования продолжается до тех пор, пока каждая из систематизированных идей перечня не подвергнется критике. Высказанные критические замечания и контридеи записываются на магнитофон. [ 1,ст. 225 – 237]

     Шестой  этап - оценка критических замечаний и составление списка практически применимых идей. Реализацию этапа осуществляет группа анализа проблемной ситуации:

     1. Составляется перечень всех критических  замечаний, полученных на этапе  деструирования. При необходимости критические замечания уточняются, отбрасываются дублирующие.

     2. Составляется сводная таблица  этапов систематизации и деструирования идей, а также список показателей практической применимости идей (эти показатели в каждом конкретном случае специфичны и зависят от конкретной проблемной ситуации). Первая графа таблицы - результаты этапа систематизации идей; вторая - критические замечания, опровергающие идеи; третья – показатели практической применимости идей; четвертая - контридеи, высказанные на этапе деструирования.

     3. Оценивается каждое критическое  замечание и контридея:

     а) вычеркивается из таблицы, если опровергается  хотя бы одним показателем практической применимости;

     б) не вычеркивается, если оно не опровергается  ни одним показателем.

     4. Составляется окончательный список  идей; переносятся в список только  те идеи, которые не опровергнуты  критическими замечаниями и остались  в таблице, а также контридеи.

     Метод коллективной генерации идей апробирован  на практике и позволяет находить групповое решение при определении  возможных вариантов развития объекта  прогнозирования, исключая путь компромиссов, когда единое мнение нельзя считать результатом беспристрастного анализа проблемы.

     Метод «Дельфи» построен на следующем принципе: в неточных науках мнения экспертов и субъективные суждения в силу необходимости должны заменить точные законы причинности, отражаемые естественными науками. Он позволяет обобщать мнения отдельных экспертов в согласованное групповое мнение. Метод «Дельфи» характеризуется тремя особенностями, которые отличают его от обычных методов группового взаимодействия экспертов. К таким особенностям относятся: а) анонимность экспертов; б) использование результатов предыдущего

     Сущность  методов экспертных оценок для разработки прогнозов состоит в определении согласованности мнений экспертов по перспективным направлениям развития объекта прогнозирования, сформулированным ранее отдельными специалистами, а также в оценке аспектов развития объекта, которая не может быть определена другими методами (например, аналитическим расчетом, экспериментом и т.д.).

     Содержание  методов экспертных оценок заключается в следующем:

     I. Создание групп. Для организации  проведения экспертных оценок  создаются рабочие группы, в функции  которых входят проведение опроса, обработка материалов и анализ  результатов коллективной экспертной  оценки. Рабочая группа назначает  экспертов, которые дают ответы  на поставленные вопросы, касающиеся  перспектив развития данной отрасли. Количество экспертов, привлекаемых для разработки прогноза, может колебаться от 10 до 150 человек, в зависимости от сложности объекта.

     II. Формулирование глобальной цели  системы. Перед тем, как организовать  опрос экспертов, необходимо уточнить основные направления развития объекта, а также составить матрицу, отражающую генеральную цель, подцели и средства их достижения. При этом в ходе предварительного анализа совместно с группой специалистов определяются наиболее важные цели и подцели для решения поставленной задачи. Под средствами достижения цели понимаются направления научных исследований и разработок, результаты которых могут быть использованы для достижения цели. При этом направления научных исследований и разработок не должны пересекаться друг с другом.

     III. Разработка анкеты. Заключается  в разработке вопросов, которые будут предложены экспертам. Форма вопроса может быть разработана в виде таблиц, но содержание их должно определяться спецификой прогнозируемого объекта или отрасли. При этом вопросы должны быть составлены по определенной структурно-иерархической схеме, т.е. от широких вопросов к узким, от сложных к простым.

1. IV. Расчёт экспертных оценок. Необходимо провести обработку материалов экспертных оценок, которые характеризуют обобщенное мнение и степень согласованности индивидуальных оценок экспертов. Обработка данных оценок экспертов служит исходным материалом для синтеза прогнозных гипотез и вариантов развития отрасли. [2, ст. 534 – 540]

     Вывод: в настоящее время все шире применяются различные методы экспертных оценок. Они незаменимы при решении сложных задач оценивания и выбора технических объектов, в том числе специального назначения, при анализе и прогнозировании ситуаций с большим числом значимых факторов  всюду, когда необходимо привлечение знаний, интуиции и опыта многих высококвалифицированных специалистов-экспертов. 
 
 
 

2. Сертификация на международном и региональном уровне