Разработка методики сбора и оценки показателей эффективности реализации. ФЦП «Электронная Россия ( годы)» (стр. 3 )

·  затраты на ИКТ в процентах от выручки;

·  процент простоя (когда компьютеры не доступны);

·  использование процессоров (как процент от максимально возможного);

·  процент ИКТ проектов завершенных вовремя и в рамках бюджета (как часть проектов электронного правительства).

Мягкие методы

Исследователи понимают, что нормативные подходы хоть и теоретически элегантны, несмотря на это, они представляют серьезные операционные трудности в реальных жизненных ситуациях. Более того, важность качественных выгод часто не учитывается, когда оценка проводится только с экономической точки зрения. Это может привести к игнорированию или отклонению многих потенциально новых систем предлагающих большие нематериальные выгоды. Такие выгоды как лучшее принятие решений, удовлетворенность населения или потребителей, влияние на производительность работников и рост уровня деятельности могут оказаться не учтенными. С этой точки зрения усилия по нахождению компромиссного решения для оценки проектов электронного правительства является насущной потребностью.

Мягкие подходы задействуют многомерные характеристики для измерения ценности информации, которая важна в контексте электронного правительства. Одновременное рассмотрение множества характеристик помогает понять ширину и глубину проблемы.

1.  Счетные методы. Счетные методики используются во множестве случаев оценивания, сосредотачиваясь на организационных целях. Для использования счетных методов аналитик в первую очередь идентифицирует все ключевые области деятельности, в которых необходима реализация ИКТ проектов, после чего определяет для каждой из них весовой коэффициент. Далее вычисляется средне взвешенное значение набору характеристик. Направление, набравшее максимальный балл считается лучшим объектом для инвестирования.

Этот подход позволяет учитывать как осязаемые, так и неосязаемые выгоды. Если существует сильная связь между выгодами, возникающими благодаря инвестициям в ИКТ инфраструктуру, это будет влиять на результирующую оценку, даже если эти выгоды не имеют денежного выражения. Таким образом, счетная модель помогает решить проблему оценки нематериальных выгод за счет установления взаимосвязи между оценкой этих выгод с факторами, которые наиболее важны для деятельности. Этот подход также может учитывать риск, за счет использования отрицательных весовых коэффициентов для факторов, снижающих прибыльность, уровень операционной деятельности или удовлетворенность пользователей.

2.  Социологические измерения. Социологические измерения предполагают проведение опросов населения.

3.  Стадии электронного правительства. Авторы [18] выявили следующие стадии роста электронного правительства, применительно к опыту Соединенных Штатов:

I.  Каталогизация:

o  онлайн присутствие;

o  наличие каталога;

o  загружаемые формы;

II.  Трансакции:

o  услуги и формы доступны онлайн;

o  рабочие базы данных поддерживают онлайн трансакции;

III.  Вертикальная интеграция:

o  локальные системы связаны с системами более высокого уровня в рамках одной функции или организации;

IV.  Горизонтальная интеграция:

o  системы интегрированы в рамках различных функций;

o  реализован единый портал для всего населения.

На разных стадиях зрелости электронного правительства будут различаться и приоритеты при выборе систем и критериев оценивания.

Хороший метод оценки требует определения критериев измерения, развития способов измерения переменных, для которых установлены критерии, и испытание для всего этого подходящих исходных данных.

Иерархический подход

Авторы [18] рассматривают три типа оценки:

·  оценка ценности организационной инфраструктуры:

o  коммуникационная сеть;

o  стандартизация при управлении данными;

o  влияние архитектуры ИС на организацию в целом;

·  оценка установленных приложений;

·  оценка на уровне пользователя.

Авторы предлагают использовать похожую иерархию для измерения «Отдачи от электронного правительства», что, в свою очередь так же оказывает влияние на выбор подходов к оценке инвестиций в ИКТ:

Иерархия деятельности		Измеряемые изменения
Уровень 1	Отдача на инвестированный капитал (ROI)	·  В денежном выражении
Уровень 2	Сумма расходов и доходов	·  В денежном выражении
Уровень 3	Улучшение качества планирования и контроля	·  Время, необходимое для планирования ·  Затраты на планирование ·  Время руководителей необходимое для контроля ·  Степень автоматизации ·  Количество предупреждений ·  Затраты на контроль
Уровень 4	Качество принимаемых решений	·  Частота неудач и полного изменения решений ·  Количество рассмотренных альтернатив ·  Время, необходимое для принятия решения ·  Количество решений ·  Доступность систем поддержки принятия решений ·  Стоимость решений
Уровень 5	Ценность информации	·  Полезность (в терминах обоснованности, точности, ясности, частоты, достаточности, своевременности, достоверности, уместности, содержания и стоимости)
Уровень 6	Характеристики системы	·  Необходимое количество людей, оборудования и поддержки ·  Время ответа ·  Частота поломок ·  Входы и выходы ·  Количество форм ·  Количество операций ·  Количество хранилищ и их размер ·  Качество банка данных, размер и качество модели банка ·  Гибкость, простота, степень автоматизации ·  Масштаб бизнес-компонент, связанных с системой ·  Удовлетворенность потребителей ·  Уровень ошибок ·  Области постоянных проблем ·  Простота поддержания и модификации ·  Незапланированное влияние на деятельности компании ·  Экономия и затраты

Представленные выше показатели могут служить одной из отправных точек при формировании системы показателей для оценки результативности инвестиций в ИКТ проекты.

Как уже говорилось выше, основная сложность при оценке результативности инвестиций в ИКТ проекты в рамках создания и развития электронных правительств является ограниченная применимость финансовых методов оценки. Еще одной из методик оценки успешности реализации программ по созданию электронных правительств, учитывающих нефинансовые аспекты оценки, является так называемая Методика измерения ценности [19].

Методика измерения ценности (МИЦ)

Назначение Методики измерения ценности (МИЦ) – определить, зафиксировать и измерить ценность, связанную с электронными услугами (и неисчисляемую традиционными расчетами возврата на инвестированный капитал (Return-on-investment – ROI) и иными финансовыми методами оценки), полностью учесть затраты и идентифицировать и рассмотреть риск. Правильно использованная методика измерения ценности создает развернутую систему, позволяющую выбрать, спроектировать, проанализировать и в дальнейшем управлять инвестициями. Эта система предоставляет следующие выгоды:

·  она предоставляет высшим руководителям необходимую информацию для определения государственных приоритетов или приоритетов в целевых областях, также устанавливает последовательные (устойчивые) показатели для оценки реализуемых или предлагаемых проектов;

·  она дает персоналу, участвующему в реализации программы видение существенных нужд и приоритетов заинтересованных сторон и потребителей;

·  она рассматривает риски и планируемое изменение рисков на стадиях развития процесса, еще до того как определены основные альтернативы;

·  она позволяет определить основные показатели измерения ценности, которые включают ценность конкретного проекта;

·  ею руководствуются при определении альтернатив, она помогает в текущей деятельности и в управлении процессом по достижению результатов.

Методика измерения ценности предоставляет своим пользователям понимание необходимое для создания оснований для принятия решений и для идентификации и оценки альтернатив. В частности, методика:

·  позволяет измерять и сравнивать базовые и текущие оценки ценности, риска и затрат;

·  предоставляет количественное понимание ценности через вычисление конкретных показателей, включая ROI;

·  предоставляет ясную картину того, как ценность и затраты подвержены влиянию риска;

·  позволяет сделать стратегический выбор инициатив для включения в инвестиционный портфель;

·  создает количественные измерители для ценности, затрат и риска, являясь руководством при непрерывном выборе, управлении и оценке инвестиций;

·  улучшает понимание показателей, на которых основывается выбор направлений инвестирования;

·  через анализ альтернатив, обращается к нуждам заинтересованных сторон, включая общество;

·  поддерживает развитие инвестиционного ИКТ портфеля, который балансирует ценностью, затратами и риском.

Методика измерения ценности включает в себя четыре основные стадии (включая подэтапы):

1.  Создание схемы (структуры) принятия решений:

а)  идентифицировать и определить структуру ценности;

б)  идентифицировать и определить структуру риска;

в)  идентифицировать и определить структуру затрат;

г)  начать документирование;

2.  Анализ альтернатив:

а)  идентифицировать и определить альтернативы;

б)  приблизительно оценить ценность и затраты;

в)  провести анализ рисков;

г)  ведется текущее документирование;

3.  Сведение информации воедино:

а)  обобщить оценку затрат;

б)  вычислить возврат на инвестиции (ROI);

в)  посчитать оценку ценности;

г)  посчитать оценку риска;

д)  сравнить ценность, затраты и риск;

4.  Коммуникация и документирование:

а)  сообщить ценность потребителям и другим заинтересованным сторонам;

б)  подготовить документы в обоснование бюджета;

в)  подготовить необходимую отчетность;

г)  использовать полученные уроки для улучшения процесса.

Представленные стадии являются основой методики оценки различных инициатив при реализации программ электронного правительства. Однако на уровне отдельных проектов также существуют достаточно детальные методики формирования систем оценки.

Обзор используемых в мировой практике методик оценки эффективности программ в части информатизации

В качестве отправной точки в исследовании методик сбора и оценки показателей эффективности ФЦП «Электронная Россия ( годы) был взят рейтинг электронный правительств, опубликованный в журнале NetworkEnterprise (September, 2003) [1]составленный компанией Accenture – признанным лидером в области информационного и управленческого консультирования, имеющей более 110 офисов в 48 странах по всему миру. Согласно представленному рейтингу места распределились следующим образом (Схема 1).

Схема 1. Рейтинг электронных правительств, Accenture, Y2003.

Согласно представленному рейтингу, электронные правительства Канады, Сингапура, США, Дании, Австрии, Финляндии, Гонконга и Великобритании имеют самый высокий рейтинг (больше 50%).

Другим основанием для выбора лучшей практики в области оценки программ информатизации был выбран рейтинг «электронной готовности» (e-readiness ranking) составленный ‘Economist Intelligence Unit’ [2] (подразделением Business Economist Group) при содействии IBM Institute for business value, на примере 64-х государств. Согласно этому рейтингу в двадцатку наиболее электронно-развитых вошли следующие страны (Таблица 1):

Таблица 1. Рейтинг электронной готовности (первые 20 стран), 2004г.

2004г. рейтинг электронной готовности	2003г. рейтинг электронной готовности	Страна	2004 оценка электронной готовности (из 10)	2003 оценка электронной готовности
1	2	Дания	8.28	8.45
2	3 (tie)	Великобритания	8.27	8.43
3	1	Швеция	8.25	8.67
4	7	Норвегия	8.11	8.28
5	6	Финляндия	8.08	8.38
6	3 (tie)	США	8.04	8.43
7	12	Сингапур	8.02	8.18
8	3 (tie)	Нидерланды	8.00	8.43
9	10 (tie)	Гонконг	7.97	8.20
10	8	Швейцария	7.96	8.26
11	10 (tie)	Канада	7.92	8.20
12	9	Австралия	7.88	8.25
13	13	Германия	7.83	8.15
14	16	Южная Корея	7.73	7.80
15	14	Австрия	7.68	8.09
16	15	Ирландия	7.45	7.81
17	17 (tie)	Бельгия	7.41	7.78
18	19	Франция	7.34	7.76
19	17 (tie)	Новая Зеландия	7.33	7.78
20	20	Тайвань	7.32	7.41

Все страны, занявшие высшие строчки в рейтинге самых развитых электронных правительств вошли в двадцатку самых электронно-готовых. Этот факт позволяет с уверенностью использовать опыт этих стран при анализе показателей эффективности государственных программ в части информатизации.