Ru / En

Новинки:

Сайт подключен к Orphus. Если вы заметили опечатку, выделите слово и нажмите Ctrl+Enter. Спасибо!

ENGLISH VERSION

MSU Perceptual Video Quality tool

Измерение субъективного качества видео

MSU Graphics & Media Lab (Video Group)

Проект, идеи: Дмитрий Ватолин
Реализация: Олег Петров

версия 1.0 (добавлен метод DSCQS type II, bugfixing)
версия 0.9 (добавлены методы DSCQS, DSIS, SAMVIQ, поддержка AviSynth)

“MSU Perceptual Video Quality tool” позволяет измерять субъективное качество видео с использованием мнений экспертов.
Скачать!
Информация о методах субъективного тестирования
FAQ

Основные особенности:

Как проводить субъективные сравнения качества видео

Есть много способов проведения субъективного сравнения. Если ваша цель - сравнение профессионального уровня, то необходимо следовать требованиям стандарта (например, ITU-R BT.500 “Methodology for the subjective assessment of the quality of television pictures”), которые описывают все детали сравнения: в каком окружении оно должно происходить, как видеопоследовательности представляются эксперту и как подсчитываются результаты.
Субъективное сравнение состоит из следующих шагов:

  1. Выберите видеопоследовательности для тестирования (часто называются SRC).
  2. Выберите настройки систем, которые вы хотите сравнить (часто называются HRC).
  3. Выберите метод тестирования (как последовательности показываются экспертам и как собирается их мнение).
  4. Пригласите достаточное число экспертов (рекомендуется не меньше 15).
  5. Основываясь на их мнении, подсчитайте оценки для каждой HRC.

"MSU Perceptual Video Quality tool" поддерживает 6 методов тестирования и 3 способа обработки результатов.

Как использовать

Программа состоит из двух частей.
Первая часть - "MSU Perceptual Video Quality - task manager". Она используется для создания файла задания (.tsk, task) и для усреднения мнения экспертов. Добавьте в задание файлы (.avi, .avs), которые вы хотите сравнить, установите количество тестов (тест-показ видео и сбор оценки), дайте имя заданию (+ несколько дополнительных настроек) и сохраните файл задания.
Скрипты AviSynth должны возвращать значение, то есть иметь в конце строчку "return clip".
Вторая часть - "MSU Perceptual Video Quality - player". Она проигрывает видео файлы из задания (эксперт не знает, какое видео какому файлу соответствует) и записывает мнение эксперта. Эксперт может запустить программу и открыть любой файл с заданием. Можно сгруппировать задания и освободить эксперта от необходимости их открывать, для этого создайте .bat-файл со следующим содержимым:

"MSU perceptual video quality player.exe" "c:\tasks\task1.tsk" "c:\tasks\task2.tsk" ...

Также можно провести тест на цветовосприятие эксперта, для этого добавьте в командной строке параметр -c:

"MSU perceptual video quality player.exe" -c "c:\tasks\task1.tsk" "c:\tasks\task2.tsk" ...

Результаты этого теста (используются таблицы Ишихары) будут добавлены ко всем результатам заданий, пройденных этим экспертом.

Настройки

Task manager settings

Task manager settings

  1. Name of task - Имя задания; Когда эксперт завершает задание, папка с его именем создается в папке, содержащий сам файл задания. В этой папке хранятся результаты всех экспертов. Для каждого из них результаты хранятся в файле "имя_эксперта".csv.
  2. Amount of tests - Общее число тестов. Увеличение числа тестов позволяет программе оценить "надежность" эксперта ("надежность" основана на дисперсии оценок, которые эксперт дает одинаковым парам фильмов).
  3. Add/Remove file - Добавить/удалить файлы из списка. Программа поддерживает .avi и .avs файлы. Обычно все файлы - разные версии одной последовательности (например, сжатые разными кодеками или пропущенные через разные фильтры).
  4. Task type - Можно проводить шесть типов субъективных сравнений.
    См. Информация о методах субъективной оценки
  5. Count results - Доступно три способа усреднения результатов: простое усреднение, усреднение из стандарта ITU-R BT.500 и наше собственное (MSU averaging), использующее показатель "доверия" к экспертам. Результаты от всех методов, которые вы выбрали, сохраняются в файл "average_mark.csv".
  6. Other task options - Более детальное описание этих и других настроек можно найти в Help файле, приложенном к программе.

Имя эксперта

При старте MSU Perceptual Video Quality - player Вам будет предложено ввести имя эксперта. После прохождения теста в той же папке, что и файл теста, создается подпапка, соответствующая названию теста, и в ней файл с именем "имя эксперта".csv. В нем сохраняются результаты тестирования.

Плейер


Player controls
  1. Playback controls - вы можете проиграть/поставить на паузу фильм, а также отмотать его на три секунды назад или начать с начала. Прохождение теста можно прервать или начать с начала в любой момент, при этом ваши результаты будут отменены.
    2. Оценка

  2. Give your mark - Это пример диалога, спрашивающего мнение у эксперта (из метода ‘Double Stimulus Impairment Scale‘)

Download

Инструменты для оценки качества видео

Связаться с нами можно по адресу: 

Другие материалы

Материалы по видео

Выложены:

Общедоступные видеофильтры
Доступные фильтры для VirtualDub и AviSynth. Обычно мы разрабатываем семейства фильтров. Свяжитесь с нами для получения версий, оптимизированных под ASIC/FPGA/DSP. 		Коммерческие видеофильтры
Мы работаем с Intel, Samsung, Real Networks и другими компаниями над адаптацией наших фильтров для специфических видеопотоков и аппаратного обеспечения, такого как телевизоры, видеокарты и т.д. Свяжитесь с нами, если Вам нужна лицензия на такие фильтры.
Сравнения кодеков
Объективные и субъективные сравнения качества
видеокодеков и кодеков изображений.
Call for MPEG4-AVC/H.264 codecs 2012 		Метрики качества видео
Различные реализации объективных и субъективных метрик качества видео.
Проекты по видеокодекам
Проекты по исследованию и разработке видеокодеков. 		Разное
Другая информация.

Статьи по темам

Смотрите также материалы:
- По цветовым пространствам
- По JPEG
- По JPEG-2000

Rambler's Top100 Рейтинг@Mail.ru