Как сделать интегральную оценку

20.03.202313.04.2023 admin 0 Комментариев

Как провести интегральную оценку KPI?

Интересный комментарий появился в записи о среднем арифметическом и средневзвешенном. На мой взгляд, вопрос поднятый в комментарии довольно интересный и заслуживает отдельного внимания.

Итак, сам комментарий звучал так:

Казалось бы не испытываю сложностей при выборе средневзвешенного или среднеарифметического, но вот столкнулся с дилеммой, – применимы ли средневзвешенные величины для оценки показателей эффективности?
Вот что имеется в виду:
Имеется месячный план по обслуживанию клиентов, скажем 800 шт, но фактически было обслужено 720 шт, т.е. 90% от плана. Также имеется план по продаже 1600 литров продукции, но по факту продано 1200 литров, т.е. 75% от плана.
Вопрос, как вычислить общий показатель эффективности? (90+75)/2=82,5% или (720+1200)/(800+1600)=80%
Склоняемся больше в сторону средневзвешенного, но смущает тот факт, что приходится складывать Клиентов с Литрами. Поэтому интересно мнение эксперта. Заранее спасибо.

Мой ответ на этот комментарий выглядел так:

У меня была аналогичная проблема. Решал я ее выводом интегрального показателя, который, например приведен к выручке. В вашем случае необходимо оценить 2 показателя и привести его к одному с точки зрения выручки (возможно Вы приведете в будущем к марже).
Оцениваете единицу стоимости продукции и единицу стоимости литров и весь план переводите в выручку, а выполнение оцениваете именно по выручке. Если маржинальность единицы продукции разная, то лучше в Вашем случае привести к маржинальной прибыли. Тогда продажники будут заточены на продажу более маржинальной продукции, так как при одинаковом усилии более маржинальный продукт будет давать больший вес в выполнении плана. Надеюсь натолкнул на мысль. Я уже упоминал этот кейс здесь. Удачи! Но я думаю в ближайшее время опубликую пост на эту тему, так как эта тема заслуживает отдельного более детального описания.

Автора комментария такой ответ не совсем удовлетворил:

Идея ясна, мы пытались реализовать нечто подобное в свое время, но зашли в тупик, – природа некоторых промежуточных коэффициентов не позволяет привести их к единому интегральному показателю. Взять тот же «план по обслуживанию клиентов» (коэффициент, косвенно отражающий уровень сервиса), – соотнести его с выручкой, на наш взгляд, не вполне корректно.
На практике, задача еще усложняется тем, что промежуточных показателей, само собой более 2-ух, кроме того, вес вхождения каждого показателя в расчет различен.
P.S. С нетерпением ожидаем поста по теме, в надежде на поиск ответа на вселенский вопрос, – единый универсальный показатель эффективности, это возможно?

Настало время попробовать ответить на этот вопрос развернутее, тем более, что достаточно часто встает проблема подведения итогов по KPI, особенно если они разрозненны по единицам измерения, как в случае описанном комментатором.

Давайте вначале рассмотрим как привести любой показатель, имеющий единицу измерения, к безразмерному показателю. Это делается элементарно, путем деления, например, на максимально возможный показатель, т.е. установить KPI можно не в единицах измерения, а в процентах его выполнения относительно некоего идеального показателя. Давайте на примере автора комментария. Есть план по обслуживанию 800 клиентов. Если речь идет о качестве, то, на мой взгляд, KPI не корректно установлен в принципе. Более корректный показатель будет выглядеть, как обеспечить, например, 95% удовлетворение заявок на обслуживание работниками front офиса. Потому, как устанавливать план в 800 сервисных обращений, это значит, что мы признаем проблему во всех этих случаях. Может тогда улучшить уровень сервиса, чтобы этих обслуживаний было меньше. Хотя, именно в этом случае могла быть заложена другая логика. Возможно, я ошибаюсь. Когда мы все показатели привели к удельным, можно с ними проводить любые арифметические операции, не опасаясь, что мы литры со штуками начнем складывать.

Мне, если честно, этот подход не сильно импонирет, так как ситуации бывают разные.

Давайте рассмотри другой пример, который более изящен и позволяет сравнивать все что угодно.

Если в качестве KPI установлены несравниваемые цели, то можно каждой цели присвоить некий вес. В формировании веса цели Вы можете заложить любую бизнес-логику. Давайте опять же рассмотрим на 1 примере: у нас есть план по обслуживанию 800 клиентов, и есть план по продаже 1600 литров продукции, и, например еще цель по продаже 900 кг другой продукции.

Сумма весов всех целей должна быть равна 100%. Теперь наша задача раскидать все 100% на эти 3 цели.

Как мы можем это сделать:

1. Эмпирически или экспертно. По сути так как душе угодно. Я не люблю такой подход. Например, 40%, 30%, 30%.

2. Эмпирически, но при этом заложить бизнес логику. Например, мы считаем, что для нас обслуживание клиентов в приоритете, тогда можно отдать в 2 раза больше приоритет на обслуживание чем на продажи. Выглядеть в весах это будет так: 50%, 25%, 25%. Если мы считаем, что все эе продажи для нас важнее, тогда можем поступить так: 40%, 40%, 20%. Можем соответственно отдать приоритет более маржинальной продукции и т.д.

3. Рассчитать вес целей, используя, например дополнительную информацию или оценку, сколько каждая единица KPI нам приносит в прибыли. Как раз на это я и делал упор в своем ответе. Даже, если Вы считаете, что утверждение о переводе плана по обслуживанию в маржу спорное, то Вы не совсем правы. Так как и это можно вычислить. Достаточно взять 2 выборки: клиенты, которые были обслужены, клиенты, которые не были обслужены, по ним посчитать среднюю маржу, сравнить и получите монетизацию своего обслуживания. И, соответственно, более математически правильно назначите веса. При этом данные имеют свойство устаревать, соответственно, веса для поддержания корректной KPI системы необходимо постоянно пересчитывать на каждый новый период.

Например, если 1 обслуженный клиент нам приносит дополнительно 3 рубля. 1 литр продается с надбавкой 50 копеек, а один килограмм с наценкой 1 рубль. Тогда, чтобы посчитать веса, мы считаем маржу по каждому из KPI: 800*3 = 2400, 1600*0,5 = 800, 900*1 = 900. И тогда вес 1 = 2400/(2400 + 800 + 900), вес 2 = 800/ (2400 + 800 + 900), вес 3 900/(2400 + 800 + 900).

Веса получились у нас такими: 58%, 20%, 22%. Для простоты округлил. Соответственно, когда мы подводим цели, мы используем веса. 90%*58%+75%*20%+ (например, пусть будет 95%)95%*22%=87% выполнение целей. Соотвественно это уже можно применять.

Но первый взгляд эта система все еще не отвечает, например, на вопрос, а что если одна из целей перевыпонена больше чем на 100%, а другая недовыполнена. Если Вы используете 3 вариант, то Вы смело можете его использовать и для таких случаев, так как веса привязаны к марже и соответвенно, если одна из целей недовыполняется, то она компенсируется другой тоже по марже.

Когда Вы проставляете веса экспертно, приготовьтесь ответить и на этот вопрос, так как порой простое суммирование выполнения целей с весами может привести к самому неожиданному результату.

Когда я изменял систему бюджетирования и переходил от финансовых к натуральным показателям, я еще формировал системы, так называемых стимулирующих интегральных показателей, когда перевыполнение одних показателей могло перекрывать невыполнение других показателей. В целом привязка была к марже по ним. Помимо натуральных показателей, были цели также обеспечивающие выполнение SLA по качеству. Но в данном случае, он входил удельно с определенным весовым коэффициентом, который был заложен на основе оценки простоя сети к марже. По сути это чуть доработанный вариант 3.

Надеюсь, что описанная мною оценка и взвешивание целей при оценке поможет Вам выбрать правильный путь. Если по какой-то причине, Вы считаете, что Ваш случай не подходит под данное описание, то опишите его в комментарии более подробно, а я постараюсь добавить пост необходимыми ответами на вопрос.

Источник

Интегральная оценка проектов

Составление перечня критериев и получение соответствующих ответов на поставленные вопросы служат достаточно простым методом оценки проектов. Он может быть представлен в виде профиля проекта, где каждый фактор получает стандартную оценку (табл. 9.2).

Таблица 9.2 Профиль проекта

В профиле проекта не учитывается то обстоятельство, что каждый фактор имеет разный вес, или значимость. Балльный метод оценки (и сравнения) проектов достаточно прост (табл. 9.3), однако следует очень тщательно относиться к назначению весов каждому фактору, присвоению

числовых значений каждой оценке и собственно осуществлению балльной оценки каждого фактора. Использование любого из методов должно быть защищено от возможной фальсификации оценок, например, посредством применения метода Дельфи.

Таблица 9.3Расчет балльной оценки проекта

При этом следует выделить факторы, которые могут оказать решающее воздействие на решение о судьбе проекта. Так, если оценки по критериям патентной чистоты, безопасности производства, возможных вредных

воздействий продуктов или производственных процессов оценены как «плохо» или «очень плохо», то от реализации проекта следует отказаться. Кроме этого, необходимо избегать отбора проектов, находящихся у нижнего предела эффективности.

Рейтинг потенциальной ценности проекта.

Рейтинг потенциальной ценности проекта основывается на оценке изменения положения предприятия на рынке, если реализация проекта будет иметь успех. Значение оценок приведено ниже.

Потенциальная ценность проекта

5— Компания может стать лидером на сегодняшнем крупном рынке или участвовать в создании большого рынка длительное время

Таким образом, выбор проектов осуществляется на основе матрицы (рис. 9.1), где явно предпочтительны те проекты, которые имеют высокие рейтинги. Проекты, лежащие в «сомнительном районе», следует внимательно изучить с целью возможной их модификации, чтобы сделать более ценными.

Портфельный анализ проекта

Проекты также можно оценивать по двум составляющим (осям; см. рис. 9.2):

· горизонтальная ось показывает привлекательность каждого проекта для фирмы. Для получения оценки используются количественные и качественные показатели, отражающие ценность проекта для компании;

· вертикальная ось показывает вероятность технологического и/или коммерческого успеха каждого проекта. Эту вероятность определяет руководство фирмы по завершении стадии исследования или разработки.

Двухмерная система координат состоит из четырех квадрантов (рис. 9.2), каждый проект изображается в ней в виде круга, диаметр которого пропорционален объему необходимых ресурсов:

окупаемостью и вероятностью успеха.

Такой портфельный анализ проводится в ходе составления очередного годового бюджета и имеет своей целью идентификацию приоритетных проектов. Правила принятия решения могут быть следующими:

. сократить финансирование проектов типа «хлеб с маслом», которые нередко отнимают слишком много времени и ресурсов;

. удалить из портфеля «проигранные дела».

Подобный портфельный анализ также помогает фирме правильно распределить исследовательские усилия, направленные на разработку новых проектов.

Команда проекта

Для практического претворения в жизнь, прежде всего, необходимо обратить внимание на следующее:

· профессиональная компетенция членов команды является хотя и необходимой, но не исчерпывающей предпосылкой;

· руководители проекта являются ведущими специалистами в конкретной области;

· искренность и готовность к критике ускоряют процесс реализации;

· есть спрос на нестандартное мышление.

Основные участники проекта

Заказчик – будущий владелец и пользователь результатов проекта. В качестве заказчика может выступать как физическое лицо, так и юридическое.

Инвестор– физические или юридические лица, вкладывающие средства в проект. Инвестор может быть и заказчиком. Инвесторами в РФ могут быть: органы, уполномоченные управлять государственным и муниципальным имуществом; организации, юридические лица всех форм собственности, международные организации, иностранные юр. лица, физические лица – граждане РФ, иностранные граждане. Одним из основных инвесторов, обеспечивающих финансирование проекта, является банк.

Проектировщик– специализированные проектные организации, разрабатывающие проектно-сметную документацию. Ответственной за выполнение всего комплекса этих работ обычно является одна организация, называемая генеральным проектировщиком.

Поставщик – организации, обеспечивающие материально-техническое обеспечение проекта (закупки, поставки).

Исполнитель (организация-исполнитель, подрядчик, субподрядчик) – юридические лица, несущие ответственность за выполнение работ по контракту. К ним относятся индивидуальные предприниматели, производственные предприятия, вузы и т.д.

Научно-технические советы (НТС) – ведущие специалисты по тематическим направлениям проекта, несущие ответственность за выбор научно-технических решений, уровень их реализации, полноту и комплексность мероприятий для достижения проектных целей; организующие конкурсный отбор исполнителей и экспертизу полученных результатов.

Руководитель проекта (в принятой на Западе терминологии «проект-менеджер») – юридическое лицо, которому заказчик делегирует полномочия по руководству работами по проекту: планированию, контролю и координации работ участников проекта. Конкретный состав полномочий руководителя проекта определяется контрактом с заказчиком.

Команда проекта – специфическая организационная структура, возглавляемая руководителем проекта и создаваемая на период осуществления проекта. Состав и функции команды зависят от масштабов, сложности и других характеристик проекта. Команда проекта вместе с руководителем проекта является разработчиком проекта.

Источник

Приложение 1. Расчет интегральной оценки эффективности инвестиционного проекта

ГАРАНТ:

Приложение 1
к Методике оценки эффективности
использования средств федерального
бюджета, направляемых на капитальные
вложения, утвержденной приказом
Минэкономразвития России
от 27.03.2019 г. N 167

Расчет интегральной оценки эффективности инвестиционного проекта

Оценка соответствия инвестиционного проекта качественным критериям

Допустимые баллы оценки

(или «Критерий не применим»)

Ссылки на документальные подтверждения

Наличие четко сформулированной цели инвестиционного проекта с определением количественного показателя (показателей) результатов его осуществления

Цель и задачи проекта, количественные показатели результатов реализации проекта в соответствии с паспортом инвестиционного проекта и обоснованием экономической целесообразности осуществления капитальных вложений

Соответствие цели инвестиционного проекта приоритетам и целям, определенным в прогнозах и программах социально-экономического развития Российской Федерации, государственной программе вооружения, отраслевых доктринах, концепциях и стратегиях развития на среднесрочный и долгосрочный периоды

Приводятся наименование документа, приоритет и цель, которым соответствует цель реализации инвестиционного проекта

Соответствие цели инвестиционного проекта целям и задачам, определенным в национальных (федеральных) проектах (в случаях, если реализация инвестиционного проекта планируется в рамках национального (федерального) проекта) и (или) государственных программах Российской Федерации (в случаях, если реализация инвестиционного проекта планируется в рамках государственной программы Российской Федерации)

Критерий не применим, если инвестиционный проект не включен ни в национальный (федеральный) проект, ни в государственную программу Российской Федерации

Приводятся наименование документа, цель и задача, которым соответствует цель реализации инвестиционного проекта

Комплексный подход к реализации конкретной проблемы в рамках инвестиционного проекта во взаимосвязи с программными мероприятиями, реализуемыми в рамках федеральных целевых программ, ведомственных целевых программ и соответствующих региональных программ

Для инвестиционных проектов, включенных в целевые программы, указываются цели, задачи, конкретные программные мероприятия, достижение и реализацию которых обеспечивает осуществление инвестиционного проекта.

Для инвестиционных проектов, не включенных в целевые программы, указываются либо реквизиты документа о предоставлении бюджетных ассигнований на реализацию инвестиционного проекта, а также реквизиты документа, содержащего оценку влияния реализации инвестиционного проекта на комплексное развитие территорий соответственно Российской Федерации, субъектов Российской Федерации и муниципальных образований либо наименование национального (федерального) проекта и (или) государственной программы (в случаях, если реализация инвестиционного проекта планируется в рамках национального (федерального) проекта и (или) государственной программы Российской Федерации)

(реконструкции, в том числе с элементами реставрации, технического

перевооружения) объекта капитального строительства либо необходимость приобретения объекта недвижимого имущества, создаваемого

(приобретаемого) в рамках инвестиционного проекта, в связи с осуществлением соответствующими государственными и муниципальными органами полномочий, отнесенных к предмету их ведения

1. Обоснование необходимости строительства (реконструкции, в том числе с элементами реставрации, технического перевооружения) объекта капитального строительства либо необходимость приобретения объекта недвижимого имущества в связи с осуществлением соответствующими государственными и муниципальными органами полномочий, отнесенных к предмету их ведения.

2. Обоснование нецелесообразности или невозможности строительства объекта капитального строительства (в случае приобретения объекта недвижимого имущества).

3. Обоснование выбора данного объекта недвижимого имущества (в случае приобретения конкретного объекта недвижимого имущества).

4. Подтверждение территориального управления Федерального агентства по управлению государственным имуществом отсутствия в казне Российской Федерации объекта недвижимого имущества, пригодного для использования его в целях, для которых он приобретается (в случае приобретения объекта недвижимого имущества в государственную собственность Российской Федерации).

5. Обоснование нецелесообразности или невозможности получения такого объекта во владение и пользование по договору аренды (в случае приобретения объекта недвижимого имущества в государственную собственность Российской Федерации)

Отсутствие в достаточном объеме замещающей продукции (работ и услуг), производимой иными организациями

объемы, основные характеристики продукции (работ, услуг), не имеющей мировых и отечественных аналогов либо замещаемой импортируемой продукции; объемы производства, основные характеристики, наименование и месторасположение производителя замещающей отечественной продукции (работ и услуг)

Обоснование необходимости реализации инвестиционного проекта с привлечением средств федерального бюджета

Критерий не применим для объектов капитального строительства, относящихся к государственной собственности субъектов Российской Федерации (муниципальной собственности)

1. Указывается наименование федеральной целевой программы, ведомственной целевой программы, в которую включен (планируется включить) инвестиционный проект или реквизиты решений Президента Российской Федерации или нормативных правовых актов (проектов нормативных правовых актов) Правительства Российской Федерации, а также решений (проектов решений) главных распорядителей средств федерального бюджета по объектам, не включенным в федеральные целевые программы.

2. Реквизиты документов (договоров, протоколов, соглашений), подтверждающих намерения участников инвестиционного проекта о его софинансировании с указанием планируемого объема капитальных вложений со стороны каждого участника

3. Реквизиты утвержденной инвестиционной программы (проекта инвестиционной программы) государственной компании (корпорации), публично-правовой компании, юридического лица, включающей данный инвестиционный проект

Наличие региональных и муниципальных целевых программ, реализуемых за счет средств бюджета субъекта Российской Федерации (местных бюджетов), предусматривающих строительство,

реконструкцию, в том числе с элементами реставрации, и (или) техническое перевооружение объектов капитального строительства государственной собственности субъектов Российской Федерации (муниципальной собственности) либо приобретение объектов недвижимого имущества в государственную собственность субъектов Российской Федерации (муниципальную собственность), осуществляемых в рамках инвестиционных проектов, или решений высших исполнительных органов государственной власти субъектов Российской Федерации (органов местного самоуправления) о строительстве, приобретении в государственную (муниципальную) собственность объектов капитального строительства, объектов недвижимого имущества, содержащих сведения о ресурсном обеспечении, мощности и сроках реализации инвестиционного проекта в отношении объекта капитального строительства, объекта недвижимого имущества

Критерий не применим для объектов капитального строительства

(объектов недвижимого имущества), не относящихся к государственной собственности субъектов Российской Федерации (муниципальной собственности)

1. Указываются наименование региональной и муниципальной целевой программы, реализуемой за счет средств бюджета субъекта Российской Федерации (местных бюджетов), дата ее утверждения или реквизиты соответствующих решений высших исполнительных органов государственной власти субъектов Российской Федерации (органов местного самоуправления).

2. Реквизиты документов (договоров, протоколов, соглашений), подтверждающих решение участников проекта о его софинансировании с указанием намечаемого объема капитальных вложений со стороны каждого участника

Критерий не применим к инвестиционным проектам, не использующим дорогостоящие строительные материалы, художественные изделия для отделки интерьеров и фасада, машины и оборудование.

Критерий не применим к инвестиционным проектам, подготовка обоснования инвестиций для конкретного объекта капитального строительства, входящего в такой инвестиционный проект, в соответствии с законодательством Российской Федерации является обязательной

1. Наличие обоснования невозможности достижения цели и результатов реализации проекта без использования дорогостоящих строительных материалов, художественных изделий для отделки интерьеров и фасада, машин и оборудования.

2. Документально подтвержденные данные по проекту-аналогу.

3. Обоснование необходимости приобретения такого объекта недвижимого имущества, строительство которого было осуществлено с использованием дорогостоящих строительных материалов, художественных изделий для отделки интерьеров и фасада, машин и оборудования.

Критерий не применим

для случаев приобретения объектов недвижимого имущества. Критерий не применим для объектов капитального строительства в случае, если в соответствии с законодательством Российской Федерации подготовка обоснования инвестиций для такого объекта не является обязательной

1. Реквизиты утвержденного обоснования инвестиций.

2. Реквизиты заключения технологического и ценового аудита обоснования инвестиций.

3. Копию утвержденного задания на проектирование объекта капитального строительства.

4. Письмо, подписанное руководителем заявителя (уполномоченным им на подписание должностным лицом), подтверждающее соответствие утвержденного задания на проектирование обоснованию инвестиций и заключению технологического и ценового аудита обоснования инвестиций.

Наличие положительного заключения государственной экспертизы проектной документации и результатов инженерных изысканий

Критерий не применим

к инвестиционным проектам, по которым планируется предоставление средств федерального бюджета на подготовку проектной документации либо проектная документация будет

разработана без использования средств федерального

бюджета. Критерий не применим

для случаев приобретения объектов недвижимого имущества

1. Реквизиты положительного заключения государственной экспертизы проектной документации и результатов инженерных изысканий (в случае ее необходимости согласно законодательству Российской Федерации).

2. В случае если проведение государственной экспертизы проектной документации не требуется:

а) ссылка на соответствующие части и пункты статьи 49 Градостроительного кодекса Российской Федерации;

б) документальное подтверждение наличия согласования задания на разработку проектной документации с субъектом бюджетного планирования

Обоснование невозможности или нецелесообразности применения экономически эффективной проектной документации повторного использования объекта капитального строительства, аналогичного по назначению и проектной мощности, природным и иным условиям территории, на которой планируется осуществлять строительство

Критерий не применим

к инвестиционным проектам, по которым проектная документация разработана (будет разработана) с использованием проектной документации

повторного использования, соответствующей критериям экономической эффективности, установленным постановлением Правительства Российской Федерации от 12 ноября 2016 г. N 1159 «О критериях экономической эффективности проектной документации»

Российской Федерации, 2016, N 48, ст. 6764; 2017, N 51, ст. 7839; 2018, N 7, ст. 1041). Критерий не применим

для случаев приобретения объектов недвижимого имущества.

Критерий не применим в отношении объектов капитального строительства, подготовка обоснования инвестиций для которых в соответствии с законодательством Российской Федерации является обязательной

1. Обоснование нецелесообразности и невозможности применения экономически эффективной проектной документации повторного использования в случаях, установленных статьей 48.2 Градостроительного кодекса Российской Федерации.