Методы оценки конкурсных предложений

 

Таким образом, победителем  является предложение поставщика №3, а не №4, который оказался бы победителем  благодаря эффекту компенсации.

 

 Мягкий рейтинг.

В случае рассмотренной выше “умелости” участника конкурса, интересы заказчика может защитить метод мягкого рейтинга, согласно которому предложения ранжируются при помощи балльной оценки или иного метода, затем из нескольких лучших(обычно трех) предложений комиссия выбирает победителя на основании экспертной оценки ее членов.

Вариантом мягкого рейтинга является проведение переговоров с"тройкой лидеров", и определение победителя исходя из их результатов.

Пока подобный подход применяется  достаточно редко, в первую очередь  из-за непрозрачности принятия решений.

 

Экспертно-балльный метод.

В случае, когда оцениваемые  критерии сложно формализуемы (например, квалификация персонала поставщика) используется метод экспертно-балльной оценки, по которому легко формализуемые критерии (цена, финансовые показатели и т. п.)  оцениваются аналогично методу балльной оценки, а остальные определяются в баллах экспертами.

Этот метод, также как  и мягкий рейтинг, менее “прозрачен” чем методы оценочной стоимости и балльный. Кроме того, провести адекватную числовую оценку параметров конкурсных предложений иногда бывает довольно затруднительно.

 

Проблема экспертов: "добрый" и "злой"

Еще одна проблема работы экспертов- разные шкалы и системы личных оценок, используемые ими. Например, для одного из них ("доброго") - лучшая оценка 10 баллов (из 10 возможных), но он никогда не ставит меньше5, да и разница между оценками у него обычно составляет один-два балла. Другой ("злой") - считает, что 10 баллов может получить за свою работу только господь бог, 9 - он сам, а лучший из простых смертных - 8. И разница в его оценках может превышать 2-3 балла.

В результате получается, что  фактически оценивает все предложения  только один из экспертов - "злой", так его оценки сильно различаются,тогда как оценки"доброго" всегда высокие и близкие друг к другу.

Поясним это на примере:

Таблица 3.9. "Добрый" и "Злой" эксперты

 

Эксперты	Поставщик 1		Поставщик 2		Поставщик 3
	Закупка 1
"Добрый"	7		6		8
"Злой"		8		3		5
Средняя оценка		7,5		4,5		6,5
		Закупка 2
"Добрый"		9		7		8
"Злой"		5		8		6
		7		7,5		7

И действительно, получается, что во всех рассмотренных выше случаях  оценка "доброго" эксперта никакого значения в принятии решений не играет - "коллегиальный выбор", отражающийся в средней оценке, соответствует решению "злого" эксперта.

Поэтому оценки экспертов  нельзя сразу усреднять, как это  обычно делают многие организаторы конкурсов! Предварительно они должны быть обработаны с целью придания им одинаковой весомости. Скажем все оценки "доброго" эксперта при расчетах нужно умножить на 1.2 (точное значение коэффициента определяется на основании анализа экспертных предпочтений)

 

Шкалы качественных критериев.

В работе эксперты могут  использовать самые разнообразные  шкалы. Чаще всего для оценки качественных критериев используют балльную шкалу, от 0 до 10.

При формировании шкал необходимо выбрать форму шкалы и число  позиций.

Как правило, используются формы  шкал четырех видов (см. пример 3.12):

• числовая;
• частотная;
• абсолютная оценочная;
• относительная оценочная.

 

Пример 3.12. Примеры  форм шкал

 

	Частотная шкала	Абсолютная шкала	Относительная шкала
	Всегда	Вне конкуренции	Превосходит
			требования
	Как правило	Хорошее	Соответствует
			требованиями
	Часто	Приемлемое	Частично
			соответствует
			требованиям
	Иногда	Нуждается в улучшении	Не соответствует
			требованиям
	Редко	Не приемлемое
	Никогда

 

Что касается числа позиций  шкалы, то можно выделить три основных подхода:

• число позиций соответствует числу участников сравнения;
• позиции - целые числа от 1 (0) до 5 (10) (реже - иные целочисленные интервалы);
• позиции - любые числа в интервале от 1 (0) до 5 (10), включая дробные.

В работе экспертов важна  также их независимость- если речь идет не о подготовке обобщенных рекомендаций, они не должны совещаться и обмениваться мнениями. Совещания и дискуссия возможны на этапе формирования итогов экспертизы.

 

Оценка на основании величины Индекса  оптимальности конкурсного предложения.

Оценка конкурсных предложений  осуществляется на основании величины Индекса оптимальности конкурсного  предложения (ИОКП), определяемого Конкурсной комиссией на основании конкурсной заявки участника конкурса.

В соответствии с условиями  проведения конкурса конкурсная заявка участника конкурса содержит, в числе  прочего, информацию о величине показателей, используемых в качестве критериев  оценки проектов. ИОКП характеризует  величину заявленных конкурсантом значений технических и финансовых критериев  оценки в соотношении с предельными (максимально и минимально допустимыми) значениями критериев.

Предельные значения критериев  устанавливаются техническими консультантами конкурса, при этом минимально допустимым значением критерия должно являться значение, соответствующее существующей величине критерия на территории муниципальных  образований – организаторов  конкурса, а максимально допустимым значением критерия должно являться значение, соответствующее лучшему  технически и технологически достижимому  значению критерия.

Определение величины ИОКП для каждого из конкурсантов осуществляется в несколько этапов.

1. Определение Индекса  оптимальности технических критериев

Для каждого проекта, включенного  в конкурсное предложение, по каждому  конкурсанту определяется Индекс оптимальности  технического критерия, для определения  которого заявленное значение технического критерия соотносится с установленными минимально и максимально допустимыми  значениями.

Для технических критериев, характеризующих гарантийный срок безаварийной работы, а также коэффициент  полезного действия оборудования, то есть для тех критериев, по которым  лучшим значением является максимальное значение, величина индекса оптимальности  технического критерия (ИОТК) определяется  по нижеследующей формуле:

         ТК_i – ТК _min

ИОТК_i = -------------------------- ;

            ТК_max -TK _min

 

где

ИОТК_i – Индекс оптимальности технического критерия по проекту

ТК_i – значение технического критерия по проекту, заявленное конкурсантом

ТК_min – минимально допустимое значение технического критерия по проекту

ТК_max – максимально допустимое значение технического критерия по проекту

Для технических критериев, характеризующих удельный расход энергетических и иных ресурсов на единицу коммунального  ресурса, а также численность  персонала, то есть для тех критериев, по которым лучшим значением является минимальное значение, величина индекса  оптимальности технического критерия определяется  по нижеследующей  формуле:

        ТК _max - ТК_i

ИОТК_i = -------------------------- ;

           ТК_max -TK _min

где

ИОТК_i – Индекс оптимальности технического критерия по проекту

ТК_i – значение технического критерия по проекту, заявленное конкурсантом

ТК_min – минимально допустимое значение технического критерия по проекту

ТК_max – максимально допустимое значение технического критерия по проекту

 

2. Определение Индекса  оптимальности технического предложения  конкурсанта

По результатам расчета  индексов ИОТК определяется Индекс оптимальности  технического предложения конкурсанта (ИОТП), который представляет собой  среднее арифметическое от произведений величины ИОТК на весовой коэффициент, характеризующий важность этого  критерия для организатора конкурса:

 

ИОТП = ИОТК₁ * КТ₁+ ИОТК₂ * КТ₂+ … + ИОТК_n * КТ_n ;

 

 

где

ИОТП – Индекс оптимальности  технического предложения конкурсанта  по всем проектам конкурса

ИОТК – Индекс оптимальности  технического критерия конкурсанта

КТ – весовой коэффициент, характеризующий важность технического критерия для организатора конкурса

N –количество технических критериев в сумме по всем проектам

КТ₁ + КТ₂ +… + КТ_n = 1

 

3. Определение Индекса  оптимальности финансового критерия

Для каждого проекта, включенного  в конкурсное предложение, по каждому  конкурсанту определяется Индекс оптимальности  финансового критерия, для определения  которого заявленное значение финансового  критерия (стоимость реализации проекта), как и в расчете индекса  оптимальности финансового критерия, соотносится с установленными минимально и максимально допустимыми значениями.

Величина индекса оптимальности  финансового критерия определяется  по нижеследующей формуле:

       ФК _max - ФК_i

ИОФК_i = -------------------------- ;

           ФК_max -ФK _min

где

ИОФК_i – Индекс оптимальности финансового критерия по проекту

ФК_i – значение финансового критерия по проекту, заявленное конкурсантом

ФК_min – минимально допустимое значение финансового критерия по проекту

ФК_max – максимально допустимое значение финансового критерия по проекту

 

 

 

 

4. Определение Индекса  оптимальности финансового предложения  конкурсанта

По результатам расчета  индексов ИОФК определяется Индекс оптимальности  финансового предложения конкурсанта (ИОФП), который представляет собой  среднее арифметическое от произведения ИОФК_i на поправочный коэффициент Д_i.

 

ИОФП = ИОФК₁ * Д₁ + ИОФК₂ * Д₂ + … + ИОФК_n * Д_n ;

где

ИОФП – Индекс оптимальности  финансового предложения конкурсанта  по всем проектам конкурса

ИОФК – Индекс оптимальности  финансового критерия конкурсанта

Д_i – поправочный коэффициент

N –количество финансовых критериев в сумме по всем проектам

Поправочный коэффициент Д вводится в целях корректного учета в ИОФП индексов оптимальности финансовых критериев по проектам, значительно различающимся по стоимости их реализации. Поправочный коэффициент Д определяется как доля стоимости реализации конкретного проекта в среднем по всем конкурсным заявкам в суммарной стоимости реализации всех проектов в среднем по всем конкурсным заявкам.

 

5. Определение Индекса  оптимальности конкурсного предложения  конкурсанта

По результатам расчета  индексов ИОТП и ИОФП определяется итоговый Индекс оптимальности конкурсного  предложения конкурсанта (ИОКП), который  рассчитывается как сумма произведений указанных индексов на соответствующие  весовые коэффициенты, характеризующие  важность технического и финансового  предложения для организатора конкурса

 

ИОКП = ИОТП * КТП * + ИОФП * КФП :

 

 

где

ИОТП – Индекс оптимальности  технического предложения конкурсанта  по всем проектам конкурса

ИОФП – Индекс оптимальности  финансового предложения конкурсанта  по всем проектам конкурса

КТП – весовой коэффициент, характеризующий важность технического предложения для организатора конкурса

КФП – весовой коэффициент, характеризующий важность финансового  предложения для организатора конкурса

КТП + КФП = 1

Победителем конкурсного  отбора признается конкурсант с наибольшей величиной Индекса оптимальности  конкурсного предложения.