Номинация «Инновации в программных продуктах»

Конкурс «Телеком Идея»

Номинация «Инновации в программных продуктах»

Растущий проект (Startup-проект)

РАЗРАБОТКА ПРОГРАММНОЙ СРЕДЫ ДЛЯ ОЦЕНКИ КАЧЕСТВА ВИДЕОИНФОРМАЦИИ

Заявитель проекта

Студентка, Ярославский государственный университет им.

Возраст – 20 лет

Ярославль, 2011

2. АННОТАЦИЯ ПРОЕКТА

Цифровая обработка изображений в настоящее время широко используется в системах телекоммуникаций, видеонаблюдения, радио - и гидролокации, робототехнике, радиоастрономии, системах мониторинга и обнаружения опасных ситуаций, медицине. При синтезе и анализе алгоритмов обработки цифровых изображений и видеопоследовательностей (сжатие, распознавание образов, улучшение) одним из актуальных направлений исследований является оценки качества обрабатываемого изображения или видеосигнала.

Особенную важность данная область приобрела в связи с переходом России к цифровому телерадиовещанию, и в частности к многопрограммному цифровому телевидению (в соответствии с распоряжением Правительства Российской Федерации -р «Об утверждении плана использования полос радиочастот в рамках развития перспективных радиотехнологий в Российской Федерации»).

Программная среда, предназначенная для автоматизированной оценки качества изображений и видеопоследовательностей с помощью эталонных и неэталонных метрик, может использоваться в системах цифрового, мобильного, интернет-телевидения, системах регистрации изображений, распознавания образов и слежения за объектами и в других прикладных задачах цифровой обработки изображений (при разработке устройств анализа качества, передачи, обработки и хранения визуальной информации). Программная среда отличается от существующих аналогов наличием неэталонных метрик, возможностью добавления новых метрик оценки качества и меньшей стоимостью.

Результаты интеллектуальной деятельности в рамках проекта защищены в соответствии с законодательством Российской Федерации (получено свидетельство о регистрации программы для ЭВМ «PicLab – научно-исследовательская среда для обработки цифровых изображений» № 000, весной 2011 года подана заявка на регистрацию программы для ЭВМ PicLab. SQA – программа для проведения субъективной экспертизы оценки качества изображений).

Использование разрабатываемой программной среды позволит улучшать известные алгоритмы обработки изображений, что в конечном итоге приведет к увеличению качества предоставляемых пользователям услуг и снижению издержек.

В настоящее время предварительную заинтересованность в программном продукте обозначили 3 отечественные компании, занятые разработкой алгоритмов/аппаратных средств в области цифровой обработки изображений.

3. ИНФОРМАЦИЯ О ЗАЯВИТЕЛЕ

Фамилия, имя, отчество –

возраст – 20 лет

роль заявителя в реализации заявляемого проекта – руководитель проекта

основное место работы, должность – ЯрГУ им. , студентка

почтовый адрес – 150052, г. Ярославль, ул. Е. Колесовой,

номер телефона – [phone]

адрес электронной почты – *****@***com

4. СОВРЕМЕННОЕ СОСТОЯНИЕ ИССЛЕДОВАНИЙ И РАЗРАБОТОК В ОБЛАСТИ РЕАЛИЗАЦИИ ПРОЕКТА. НОВИЗНА ПРЕДЛАГАЕМОГО ПОДХОДА
ПО СРАВНЕНИЮ С ИЗВЕСТНЫМИ

В настоящее время в области цифровой обработки изображений отсутствует сертифицированный критерий, позволяющий определять качество исследуемых изображений/видеопоследовательностей, что не позволяет эффективно использовать существующие алгоритмы оптимизации при построении новых систем обработки изображений и видео, а также затрудняет сравнение результатов, полученных разными группами исследователей.

В настоящее для оценки качества изображений и видеопоследовательностей наиболее широко используются:

1)  субъективная оценка качества изображений и видеопоследовательностей (согласно рекомендации ITU-R BT.500-11.) с привлечением большого количества экспертов. Основной недостаток такого подхода - высокая стоимость проведения эксперимента;

2)  алгоритмы автоматической оценки качества, такие, например, как ПОСШ (пиковое отношение сигнал/шум), которые недостаточно хорошо коррелированы с субъективно воспринимаемым качеством и не учитывают ряд особенностей, возникающих в процессах искажения изображений.

В результате анализа современной научно-технической литературы также было выявлено следующее:

-  в разработке количественных (объективных) критериев качества изображений за последние десятилетия были достигнуты определенные успехи. Среди наиболее авторитетных авторов в этой области можно выделить А. Бовика, , К. Егиазаряна,
и др.

-  В России уделяется недостаточное внимание рассматриваемой области цифровой обработки изображений с точки зрения инноваций. В области разработки прикладного программного обеспечения практически не применяются современные методы оценки качества изображений, которые рассматриваются по большей части лишь на теоретическом уровне.

Таким образом, проблема разработки и анализа критериев оценки качества визуальной информации является важной, ключевой задачей. За рубежом (например, в США) аналогичные технологии зачастую разрабатываются при участии военных ведомств и помогают сократить издержки (временные, материальные, человеческие) при построении сложных технических систем обработки информации, использующихся в военных целях. Более того, наиболее перспективные технологии (например, разработки Lockheed Martin Corporation - http://www. /) являются полузакрытыми и не подлежат распространению за пределами США.

Наиболее значимые печатные и сетевые источники информации по теме проекта (информация о конкурентных продуктах приведена в п. 7):

1.  Final Report From the Video Quality Experts Group on the Validation of Objective Models of Video Quality Assessment VQEG, Mar. 2000 [Online]. Available: http://www. vqeg. org/

2.  ITU-R Recommendation BT.500-11. Methodology for the subjective assessment of the quality of television pictures. ITU-T, 2002.

3.  Wang Z., Bovik A. Modern Image Quality Assessment. // Synthesis Lectures on Image. Video & Multimedia Processing. Morgan & Claypool, 2006.

4.  , , Радченко индекса структурного подобия (MSSIM) на основе методов непараметрической статистики // Доклады 10-й Междунар. конф. «Цифровая обработка сигналов и ее применение» (DSPA-2008), М., 2008. Т. 2,С. 505-508.

5.  Egiazarian K., Jaakko A., Ponomarenko N., Lukin V., Battisti F., Carli M. Two new full-reference quality metrics based on HVS // Proc. Of the 2nd int. workshop on video process. and quality metrics for consumer electronics, VPQM, Jan. 2006.

6.  , Чобану эталонных критерия оценки качества сжатия изображений // Доклады 10-й Междунар. конф. «Цифровая обработка сигналов и ее применение» (DSPA-2008), М., 2008. Т. 2,С. 521-524.

Основные преимущества предлагаемого проекта:

-  разрабатываемая программная среда позволит осуществлять автоматическую оценку качества изображений и/или видеопоследовательностей;

-  использование неэталонных критериев качества позволит оценивать качество «вслепую», при отсутствии оригинала, что имеет исключительную важность с точки зрения практических приложений;

-  разрабатываемая программная среда может использоваться как для оптимизации систем обработки изображений и видео, так и для сравнения результатов, полученных разными группами разработчиков.

Научные исследования руководителя проекта были отмечены:

-  Стипендией Президента Российской Федерации на 2010/2011 уч. год;

-  Стипендией фонда им. А. Борг компании Google, 2011 г. (The Google Anita Borg Memorial Scholarship: Europe, the Middle East and Africa);

-  Дипломом и грантом в конкурсе «Проекты молодежи – на благо России» по программе У. М.Н. И.К.-2011 фонда Бортника;

-  Дипломом за участие в смене Зворыкинского проекта «Инновации и техническое творчество» на Международном молодежном форуме Селигер-2010;

-  Диплом 2ой степени по результатам XVII международной научно-технической конференции студентов и аспирантов «Радиотехника, электротехника и энергетика» (Москва, МЭИ, 2011).

Полученные научные результаты опубликованы в печати (1 статья в журнале из перечня ВАК - «Успехи современной радиоэлектроники») и обсуждались на 8 научно-технических конференциях, в том числе на трех международных:

1.  20-ая Международная Конференция по Компьютерной Графике и Зрению GraphiCon’2010, Санкт-Петербург;

2.  13-ая международная конференция «Цифровая обработка сигналов и ее применение» (DSPA-2011), Москва;

3.  17-ая международная научно-техническая конференция студентов и аспирантов «Радиотехника, электротехника и энергетика», Москва, МЭИ, 2010;

4.  LХV научная сессия, посвященная Дню радио, Москва, 2010;

5.  Всероссийская научная конференция «Молодые исследователи – регионам», Вологда, 2010;

6.  64-ая региональная научно-техническая конференция студентов, аспирантов и магистрантов высших учебных заведений с международным участием, Ярославль, 2011;

7.  Областная научно-практическая конференция студентов, аспирантов и молодых ученых вузов Ярославской области «Ярославский край. Наше общество в третьем тысячелетии», Ярославль, 2010;

8.  38-ая научная студенческая конференция ЯрГУ, Ярославль, 2010.

5. СУЩНОСТЬ ПРЕДЛАГАЕМОЙ РАЗРАБОТКИ

Классификация современных методов оценки качества изображений и видеопоследовательностей приведена на рис. 5.1.

Рис. 5.1. Классификация современных методов оценки качества

Наиболее точной мерой качества изображений на сегодняшний день является результат субъективного визуального анализа. Однако проведение такого рода экспертиз не всегда удобно, поскольку занимает достаточно много времени и требует привлечения большого количества людей.

Для определения степени корреляции между объективными метриками и субъективными экспертными оценками в рамках исследований был проведен эксперимент по субъективной оценке качества изображений с использованием специализированной программной среды (рис. 5.2), разработанной ЯрГУ в соавторстве с заявителем. Субъективная экспертиза оценки качества производилась в соответствии с методологией
ITU-R BT.500-11.

Проведенное исследование позволило выявить наиболее эффективные эталонные и неэталонные метрики оценки качества.

Рис. 5.2. Интерфейс программной среды для проведения эксперимента по субъективной оценке качества изображений

При разработке программной среды для оценки качества видеоинформации использовались: современные методы цифровой обработки изображений и видеоинформации, математический и функциональный анализ, теория вероятностей, математическая статистика, теория случайных процессов. Для практической реализации применялись методы статистического моделирования, современные численные методы, методы объектно-ориентированного программирования на языке С++.

Основные характеристики разрабатываемой программная среда приведены в таблице 5.1, а интерфейс – на рис. 5.3.

Таблица 5.1

Основные характеристики разрабатываемой программной среды

	PicLab
Сайт проекта	http://www. piclab. ru/
Количество метрик и их тип	10, эталонные и неэталонные (в ближайшее время планируется увеличение количества метрик)
Поддерживаемые форматы данных	Основные форматы цифровых изображений и видеопоследовательностей
Пользовательский интерфейс	Графический
Возможность добавления метрик	Существует
Тип оцениваемого сигнала	Изображения и видео
Экспорт результатов в MS Office	Да
Стоимость	Бесплатно / 499 $

Рис. 5.3. Интерфейс программной среды для оценки качества видеоинформации

Предлагаемый программный продукт позволит:

–  проводить анализ и давать оценки развития инфокоммуникационных систем обработки и передачи визуальной информации;

–  оказывать информационные, консультационные и аналитические услуги в данной области;

–  выявлять возможности коммерциализации результатов научно-исследовательской и инновационной деятельности.

Программная среда для оценки качества видеоинформации найдет применение в разработке систем цифрового, мобильного, трехмерного, интернет-телевидения, устройств регистрации изображений и видеопоследовательностей, систем передачи и хранения визуальной информации. Использование адекватных человеческому восприятию алгоритмов анализа качества визуальной информации позволит улучшать известные алгоритмы сжатия и фильтрации, что в конечном итоге приведет к увеличению качества предоставляемых пользователям услуг и снижению издержек.

6. ПРАВА НА ИНТЕЛЛЕКТУАЛЬНУЮ СОБСТВЕННОСТЬ

Разрабатываемая программная среда зарегистрирована в Федеральной службе по интеллектуальной собственности, патентам и товарным знакам (ФГУ ФИПС) – получено свидетельство о регистрации программы для ЭВМ «PicLab – научно-исследовательская среда для обработки цифровых изображений» № 000.

Весной 2011 года подана заявка на регистрацию программы для ЭВМ PicLab. SQA – программа для проведения субъективной экспертизы оценки качества изображений.

Технических решения, защищенные патентами сторонних организаций или лиц, при разработке программной среды не использовались.

7. КОНКУРЕНТНЫЕ ПРЕИМУЩЕСТВА

В качестве основных конкурентов разрабатываемой среды для оценки качества видеоинформации можно отметить программные продукты MSU Video Quality Measurement Tool, Elecard Video Quality Estimator, Video Quality Studio и PSNR Checker характеристики которых приведены в табл. 7.1.

Таблица 7.1

Основные характеристики конкурентных продуктов

	MSU Video Quality Measurement Tool	Elecard Video Quality Estimator	Video Quality Studio	PSNR Checker
Стоимость	Бесплатно / 999$	220$	Бесплатно	Бесплатно
Сайт проекта	http://pression. ru/video/index_ru. htm	http://www. /en/products/professional/analysis	http:///vqstudio/	http://www. codec. ru/information/psnr_checker. html
Количество метрик и их тип	12, эталонные	8, эталонные	3, эталонные	1, эталонная
Поддерживаемые форматы данных	AVI, MOV, WMV, MP4, MPG и др.	Любой (при наличии совместимого декодера в системе)	AVI	AVI
Пользовательский интерфейс	Графический + командная строка	Графический	Графический	Графический
Возможность добавления метрик	Только для разработчиков
Тип оцениваемого сигнала	Только видеопоследовательности
Экспорт результатов в MS Office	Нет

Приведенные в таблице данные свидетельствуют о превосходстве программы MSU Video Quality Measurement Tool над аналогами. Тем не менее, стоимость данного ПО для коммерческого использования достаточно высокая. Кроме того, недостатком MSU Video Quality Measurement Tool является отсутствие возможности оценки качества неподвижных изображений.

Анализ приведенных данных позволяет сформулировать основные конкурентные преимущества разрабатываемой программной среды (см. табл. 5.1 и 7.1):

-  использование наиболее эффективных эталонных и неэталонных метрик (для этого в рамках исследований был проведен эксперимент по субъективной оценке качества изображений с целью определения корреляции между объективными метриками и субъективными экспертными оценками);

-  возможность добавления новых метрик и экспорта результатов;

-  использование в качестве оцениваемого сигнала как неподвижных изображений, так и видеопоследовательностей;

-  более низкая стоимость.

Использование предлагаемой программной среды (а также дальнейшие работы в рамках проекта) не требует получения специальных разрешений, лицензий и сертификатов, в т. ч. международных.

8. РЫНОК СБЫТА

Основными потребителями предлагаемого программного продукта будут крупные и малые предприятия (отечественные и зарубежные), занимающиеся разработками в области цифровой обработки изображений, в т. ч. научными исследованиями, опытно-конструкторскими работами, отладкой и/или тестированием программных/аппаратных средств. Характеристика целевого рынка программной среды приведена в табл. 8.1.

Таблица 8.1

Целевой рынок предлагаемой программной среды

Места применения	Сфера применения
Компании, занятые разработкой алгоритмов/аппаратных средств в области цифрового телевидения	В рамках проводимых научных исследований и опытно-конструкторских работ в области цифрового телевидения и потребительской телевизионной техники. Оптимизация алгоритмов цифровой обработки изображений в системах цифрового, мобильного и интернет-телевидения.
Глобальный рынок ПО	В качестве средства для классификации изображений в базах данных (например, в социальных сетях или сетевых хранилищах). Для объективного анализа работы алгоритмов сжатия и фильтрации изображений и видео.
Системы распознавания образов и слежения за объектами	Оценка эффективности работы систем регистрации и обработки изображений/видео. Определение необходимых параметров используемых алгоритмов/устройств и их оптимизация
ВУЗы Исследования Учебный процесс	В качестве ПО для отладки/тестирования алгоритмов цифровой обработки изображений. Использование для проведения НИР в Российских ВУЗах.
Системы анализа изображений	Как средство для отбора «хороших» изображений/видеопоследовательностей. Интеграция в поисковые системы (Google, Yandex, Bing)

9. ПОРЯДОК КОММЕРЦИАЛИЗАЦИИ РЕЗУЛЬТАТОВ РАЗРАБОТКИ

Работы над проектом осуществляются в ЯрГУ им. , в состав команды проекта входят 4 человека, (табл. 9.1). Также к работам над проектом дополнительно привлекаются аспиранты и студенты ЯрГУ (до 15 человек).

Таблица 9.1

Команда проекта

№ п/п	ФИО, возраст	Должность, уч. степень, уч. звание	Основные национальные и международные премии и награды в области науки, техники и образования	Роль в реализации проекта
1	2	3	4	5
1.	(заявитель), 20 лет	Электроник кафедры динамики электронных систем ЯрГУ, студентка	Стипендиат Президента РФ на 2010/2011 учебный год (Приказ Минобрнауки РФ от 16 декабря 2010 г., № 000) Победитель программы «Участник Молодежного Научно-Инновационного Конкурса» («УМНИК») 2011 года Стипендиат фонда им. А. Борг компании Google, 2011 г. (The Google Anita Borg Memorial Scholarship: Europe, the Middle East and Africa);	Руководитель проекта
2.	, 28 лет	К. т.н., доцент кафедры динамики электронных систем ЯрГУ	Диплом за участие в смене Зворыкинского проекта «Инновации и техническое творчество» форума Селигер-2010. Диплом участника полуфинала конкурса инновационных проектов «Зворыкинская премия». Стипендиат Intel 2006 года.	Научный руководитель, архитектор программного продукта
3.	, 24 года	Аспирант ЯрГУ	Медаль по итогам открытого конкурса на лучшую работу студентов по естественным, техническим и гуманитарным наукам в Вузах Российской Федерации (Приказ Рособразования РФ от 27 мая 2010 г. № 000). Победитель конкурса “Future? At your service!” компании Intel 2009 г.	Ведущий разработчик
4.	, 22 года	Инструктор региональной сетевой академии Cisco при ЯрГУ	Стипендиат Президента РФ на 2009/2010 учебный год (Приказ Минобрнауки РФ от 13 ноября 2009 г., № 000)	Инновационный менеджер

Календарный план проекта приведен в табл. 9.2.

Таблица 9.2

Календарный план развития проекта

№	Название этапа	Срок	Основные работы по этапу
1.	Этап проектирования	авг. 2010– авг. 2011	Анализ научно-технических источников в области современных алгоритмов оценки качества изображений и видеопоследовательностей
Разработка пользовательского интерфейса и архитектуры программной среды
2.	Этап построения	сент. 2010 – авг. 2011	Реализация программной среды в виде приложения в ОС MS Windows
Разработка и анализ эталонных и неэталонных алгоритмов оценки качества изображений
3.	Этап развития проекта	сент. 2011 – фев. 2012	Составление технической документации
Обеспечение многоязыковой поддержки
Составление рекомендаций по использованию метрик оценки качества в различных задачах обработки изображений: сжатие, фильтрация, распознавание образов
4.	Этап коммерциализации	март 2012 – дек. 2012	Консультации с потенциальными заказчиками
Определение стратегии вывода ПО на рынок
Реализация ПО

10. СОСТОЯНИЕ И ИСТОЧНИКИ ИНВЕСТИРОВАНИЯ В РЕАЛИЗАЦИЮ ПРОЕКТА

В рамках проводимых исследований были получены следующие гранты, направленные на финансирование работ по проекту:

-  Стипендия фонда им. А. Борг компании Google, 2011 г. (The Google Anita Borg Memorial Scholarship: Europe, the Middle East and Africa) (300 тыс. руб);

-  Конкурс «Проекты молодежи – на благо России» по программе У. М.Н. И.К.-2011 (200 тыс. руб*2года);

-  Третьем внутривузовский конкурс «Молодежь и Наука», ЯрГУ (15 тыс. руб.).

В настоящее время планируется сотрудничество с Управлением научных исследований и разработки цифровых систем передачи информации (УНИЦС) при ФГУП «ГРЧЦ» г. Москва (http://www. grfc. ru/grfc/nauka/index. htm) в рамках разрабатываемой Российской системы мобильного видеовещания РАВИС.

Проект принимает участие в конкурсе Зворыкинская премия (Росмолодежь, http://www. innovaterussia. ru/) 2010 и 2011 года.

Участники проекта принимали участие в Global Technology Symposium (Silicon Valley, California, USA) по итогам которого были установлены деловые контакты с Российскими и Американскими венчурными компаниями.

11. ПРЕДСТОЯЩИЕ ЗАТРАТЫ ПО ПРОЕКТУ

№	Название этапа	Срок	Виды деятельности	Оценка затрат
1.	Этап проектирования	авг. 2010– авг. 2011	НИР, НИОКР, разработка ПО, формирование оборотных средств, контакты с венчурными фондами и бизнес-ангелами	300000 руб.
2.	Этап построения	сент. 2010 – авг. 2011	Разработка ПО, сертификация ПО, определение стратегии вывода ПО на рынок,	500000 руб.
3.	Этап развития проекта	сент. 2011 – фев. 2012	Составление технической документации, обеспечение многоязыковой поддержки, кросс-платформенность, консультации с потенциальными заказчиками,	400000 руб.
4.	Этап коммерциализации	март 2012 – дек. 2012	Реализация ПО, реклама проекта	300000 руб.