Красноярский край в системе международных и региональных рейтингов экономического и социального развития

Методы  исследования:

1. Анализ специальной литературы по методу рейтинговых оценок

2. Анализ вторичных данных социологических исследований

3. Анализ статистических данных

4. Анализ данных массовых опросов

5. Анализ данных экспертных опросов

1 Теоретические  основы рейтингового оценивания

1.1 Рейтинг как  универсальная форма оценки

 

В специальной  литературе понятие рейтинга редко  рассматривается вне контекста. Рейтинги городов, банков, изобретательских решений, рейтинги в экономике и учебном процессе,  то есть определения даются в соответствии с теми объектами, к которым рейтинговая оценка применяется, и сферами деятельности, где данный метод используется. В первой главе мы рассмотрим рейтинг в наиболее общем подходе, как один из видов оценки.

Теоретические и методологические корни оценивания лежат в теории  ценностей –  аксиологии. Согласно определению, оценка – это сопоставление объекта, процесса или субъекта оценивания с некой заданной шкалой, с помощью адекватных инструментов, по определенным процедурам в соответствии с нормированной системой показателей и индикаторов [3]. В данном определении заключены основные элементы структуры оценки [11]:

• субъект, решающий определенную задачу;
• объект с конкретными признаками;
• предмет оценивания – связь субъекта и объекта;
• «базисный» объект с идеальными свойствами-характеристиками (образец, норма);
• процесс сравнения.

Классифицировать  оценки можно по нескольким параметрам: отношению к предмету и источнику оценивания, характеру суждений, времени оценивания и форме выражения оценок. Подробнее рассмотрим последнюю классификацию, здесь необходимо выделить три ключевых, наиболее применимых вида оценки: качественная, количественная и рейтинговая.

 Качественное  суждение относится к категории  вербальных (словесных) оценок, не  вписанных в регламентированную  шкалу. Такие суждения чаще  всего не упорядочены ни по  составу используемых оценок, ни  по их рангу. Качественные суждения определяются смыслом высказываемых оценок. Использование качественных оценок вызывает ряд трудностей, связанных с сопоставлением оценок и изначально предъявленных требований.

Количественные  оценки, выраженные в числовом виде, также имеют многостороннюю, недостаточно нормированную структуру. Числовые показатели могут быть как размерными, выраженными в определенных единицах измерения, так и безразмерными, относительными. Следует отметить, что наряду с однозначной оценкой, представленной единственным числом, допустимы интервальные, «вилочные» оценки с указанием нижней и верхней границ и вероятностные.

Рейтинговая оценка – это присвоение объекту определенного  места в группе аналогичных объектов согласно величине качественного или  количественного показателя, отвечающего выбранному для сравнения критерию, или совокупности критериев [50].  Итак, выделим основные характеристики рейтинга:

1. Рейтинг – это вид оценки;
2. Рейтинг – это место среди однородных объектов;
3. Рейтинг может быть построен на основе как количественной, так и качественной информации;
4. Вычисление рейтинговой оценки производится на основе выбранных характеристик объекта (критерии);
5. Возможность оценить динамику показателей [55].

Последняя характеристика рейтинга, позволяющая анализировать  развитие объекта оценки, включает в себя два обязательных параметра: регулярность и повторяемость. Регулярность – составление рейтинга через определенный период времени.

Однако недостаточно регулярно проводить рейтинг  для возможности мониторинга  состояния объекта, необходима точное воспроизведение методики рейтинга – повторяемость (показатели и критерии, весовые коэффициенты, процедуры сбора данных, процедуры свертки, форма представления итогового результата).

Таким образом, рейтинг обладает свойствами динамичности, прогнозируемости и корректируемости, то есть позволяет оценить динамику показателя, спрогнозировать оценку объекта для будущего временного периода и внести корректировки в прогнозную оценку, на основе фактических данных. Также преимущество рейтинговой оценки состоит в возможности оценить как количественные, так и качественные характеристики объекта. Можно сделать вывод, что благодаря сочетанию вышеперечисленных особенностей рейтинга, он является универсальной формой оценки.

В данной работе в качестве инструмента оценки объекта исследования – социальных и экономических характеристик Красноярского края – мы выбрали метод рейтингования, именно по причине того, что считаем рейтинг наиболее приемлемой формой оценки общего регионального положения и сравнения региона с другими субъектами страны. Специфические особенности метода и соблюдение определенных требований к построению рейтинга позволяют, по нашему мнению, осуществить наиболее качественный и достоверный анализ положения регионов и мониторинг происходящих в регионах социально-экономических процессов.

 

1.2 Методология  и методические проблемы построения  рейтинга

 

При составлении  отдельных рейтингов используются различные методы сбора и анализа  данных, критерии и показатели. В  данном параграфе мы конкретизируем базовые этапы и методы рейтингования, которые остаются неизменными практически для всех рейтингов.

Этапы построения рейтинга

Мы выделили семь основных уровней построения рейтинга, рассмотрим каждый из них более подробно [53].

Первоначальным  действием, предшествующим собственно составлению рейтинга, является определение уровня рейтингования. Под уровнем принято понимать территориальный масштаб совокупности объектов, сравниваемых в рейтинге. Выделяют такие уровни как локальные, региональные, национальные, глобальные.

 

 

 

 

 

 

 

 

 

 

 

Рисунок 1 − Алгоритм построения рейтинга

Следующий этап заключается в выборе объекта  рейтингования. В рейтинге между  собой могут сравниваться государства, учебные заведения, политики и т.д.

Далее необходимо определить критерии и показатели рейтинга. Критерии – это те характеристики объекта сравнения, которые планируется измерять. Выбор критериев осуществляется на основе целей исследования. Показатели рейтинга – это те количественные переменные, которые позволяют оценить объект сравнения по заданным критериям. При подборе показателей рейтинга учитываются следующие требования:

1. релевантность – соответствие показателя критерию;
2. наполняемость – возможность сбора значений показателя по всей совокупности объектов сравнения;
3. измеримость – возможность измерить показатель по порядковой, интервальной или количественной шкале;
4. стабильность – слабая изменяемость показателя во времени.

Ряд требований имеется также для группы показателей  в рамках одного критерия. Во-первых, это ограниченное число показателей в группе, отражающих соответствующие характеристики объекта рейтинга. Во-вторых, значения показателей должны быть упорядочены по одному вектору, например, чем больше значение, тем выше позиция. Оптимальный перечень показателей должен быть структурно выдержанным, то есть не содержать сильных диспропорций в количестве и качестве показателей. 

Если для  характеристики одного из заданных критериев  используется несколько показателей, то возникает необходимость подбора  весовых коэффициентов этих показателей. Под весовым коэффициентом принято понимать относительную значимость конкретного показателя в сравнении с другими. Как правило, сумма весовых коэффициентов всех показателей, характеризующих критерий рейтинга, составляет 100% или 1. Например, если весовой коэффициент одного показателям составляет 40%, а другого – 20%, то это значит, что первый показатель является в два раза более значимым при составлении рейтинга, чем второй. Для подбора весовых коэффициентов показателей специалисты используются как количественные, так и качественные методы. Среди количественных стоит выделить факторный анализ, наиболее распространенным качественным методом является экспертный опрос [10].

Следующим уровнем  построения рейтинга является непосредственно  сбор данных. К методам сбора данных относятся анкетирование, экспертные опросы, получение статистической информации и т.д.

   Наличие нескольких показателей для подсчета заданного критерия и соответствующих весовых коэффициентов предполагает использование процедуры свертки. При составлении рейтинга наиболее часто используются две процедуры свертки: аддитивная и мультипликативная. Аддитивная свертка предполагает арифметическое сложение показателей с соответствующими весовыми коэффициентами. Мультипликативная свертка предполагает перемножение показателей с учетом весовых коэффициентов.

Завершающий этап рейтингования – презентация  результатов рейтинга. Основное внимание здесь уделяется форме представления  результатов, фактически она определяется еще до начала составления рейтинга, однако реально форма представления рейтинга зависит от полученных в ходе исследования данных.   Выделяют три основные формы презентации результатов рейтинга:

1. Составление таблицы лиг – разбиение совокупности объектов на несколько групп (обычно не менее трех). В рамках каждой группы все сравниваемые объекты получают одинаковый статус. Различия между группами определены по порядковой шкале.
2. Рэнкинг, ранжирование – упорядочивание совокупности объектов, при котором каждый из них имеет свой порядковый номер (в некоторых случаях – несколько объектов имеют одинаковый ранг). Используется порядковая шкала.
3. Рейтингование, рейтинг – упорядочивание совокупности объектов, при котором каждый из них имеет свое количественное значение. Используется количественная шкала [9].

Методы построения рейтинга

Для построения объективного рейтинга чрезвычайно  важно использовать проверенные  на практике и научно-обоснованные методы оценивания. Мы выделим четыре основных метода рейтингования, которые  могут быть применены по отношению к объекту, как в отдельности, так и в совокупности [53].

1. Метод создания  рейтинга с помощью ряда показателей.

Метод создания рейтинга с помощью ряда показателей  относительно прост и основан  на ранжировании объектов в соответствии со значениями отобранных ключевых показателей. При таком способе оценивания широко используются количественные шкалы, показатели, рассчитываемые на основе статистической данных, математические и статистические методы анализа и обработки информации. Более обоснованным в применении данного метода является системный комплексный подход к оценке объекта сравнения.

При создании рейтинга необходимо выбрать способ ранжирования показателей. Ранжирование может быть прямым, когда места определяются непосредственно по величине показателя, и косвенным, когда места объектов определяются по отклонениям от стандарта – баллам и другим относительным показателям. Также выделяют сплошное и интервальное ранжирование. Наиболее распространенным является сплошное ранжирование, когда места «присуждаются» подряд − от первого к последнему.  Более точным является интервальное ранжирование, предполагающее определение интервала изменения конкретного показателя в группе и тождественное стандартизации к максимальному значению показателя. Использование интервалов позволяет учитывать отсутствие значений показателей, соответствующих, например, второму месту и наличие нескольких значений, соответствующих третьему месту.

2. Метод кластерного  анализа.

Метод кластерного  анализа позволяет разбить по определенным критериям изучаемую совокупность объектов на группы, называемые кластерами. Кластеры соответствуют отобранным показателям. Аномальные объекты, имеющие значительные отклонения от нормы, можно выделить в отдельный кластер и анализировать среди совокупности подобных объектов. Если объект занимает по какому-либо критерию соответствующего показателя 1-е место в кластере, то ему присваивается 1 балл, если 2-е место - 2 балла и т. д. В совмещенном итоговом кластере объекты располагаются по принципу минимума набранных баллов.

  3. Метод экспертных оценок.

Данный метод  рейтингования характеризуется  тем, что экспертам предлагается в зависимости от значимости того или иного признака объекта, приписать  каждому из них номер в порядке  убывания или возрастания степени  проявления оцениваемого признака у каждого из объектов. Каждый эксперт приписывает ранги независимо от других, входящих в группу. В дальнейшем вычисляется групповой ранг. При этом предполагается, что усредненная оценка снижает уровень субъективизма.

Метод экспертных оценок применим при непосредственном взаимодействии экспертов, дискуссии между ними. Однако, при такой процедуре возможно проявление вынужденного согласия с мнением авторитетов, возникновения конфликтов. Исключить этот недостаток возможно, используя метод Дельфи. В данном методе обеспечивается обмен информацией между экспертами без их непосредственного взаимодействия.

4. Метод сопоставления  с эталоном.

Данный метод построения рейтинга предполагает сравнение объекта  с определенным эталоном. Основное назначение эталона в рейтинговании состоит в том, что содержащаяся в нём информация служит для оценки аналогичной информации в других объектах. Сравниваемые объекты должны быть качественно сходны. Это сходство и измеряется путем сопоставления  с эталоном. Поэтому наиболее сложной процедурой в этом методе является правильный выбор измерительного эталона. Эталон может быть сформирован либо на основе мнений экспертов, либо максимальных или средних значений показателей. Объекты в рейтинге будут располагаться относительно близости к эталону.