The study of images of dynamically changing scenes in the colorimetric space

Ipatov Yurii Arkad'evich PhD in Technical Science Associate Professor of the Department of Informatics at the Volga State University of Technology 424000, Russia, Mari El, Yoshkar-Ola, pl. Lenina, d. 3 philsilver@mail.ru Other publications by this author

Totskii Aleksei Andreevich student, Volga State University of Technology 424000, Russia, Marii El, g. Ioshka-Ola, ul. Lenina, 3, aud. 525 alex.totsky@yandex.ru

Задача обнаружения и анализа объектов на неоднородном фоне на сегодняшний день является одной из центральных при создании автоматизированных систем искусственного зрения. Однако методы и подходы решения поставленных задач могут отличаться и зависят от контекста решаемой задачи и от ряда характеристик, таких как размерность и структура данных, вычислительные и временные ограничения.

Развитие средств современных систем технического зрения и интеллектуальных методов в обработке эволюционирует в сторону динамического анализа сцен ^[1,2]. Как следствие повышаются требования к аппаратной и программной составляющей таких комплексов, но этот позволяет получить принципиально новый инструмент, обладающий качественно новыми показателями ^[3-5].

В настоящее время методы динамического выделения объектов не изучены в полной мере и на данный момент не существует универсальных подходов обработки изображений динамически изменяющихся сцен. Изображения динамически изменяющихся сцен можно часто встретить при исследованиях в различных областях научно-технической деятельности. Обнаружение изменений, сопровождение целей, динамика изменения объектов, вот некоторые примеры задач, с которыми сталкивается исследователь при их анализе. Рассмотрим примеры таких типовых изображений.

Рис. 1. Изображения строительства олимпийских объектов в Сочи

На рис.1. показано визуальное обнаружение изменений при строительстве олимпийских объектов в Сочи ^[6] на снимках K0MPSAT-3(© КАШ 2013,2014; distributed by Satrec Initiative). Первый снимок сделан 2013 году, второй в 2014 году.

Рис. 2. Изображение автоматического сопровождения объекта

На рис. 2. представлен пример динамически изменяющейся сцены, на которой выполнятся сопровождение объекта ^[7]. Характерной особенностью таких сцен является сложный и статистически неоднородный фон при этом объект наблюдения изменяет форму, текстуру, пространственное расположение.

На рис. 3. приведен пример сцены роста растения, которая изменятся во времени, поэтому для данного класса изображений областью интереса, является динамика изменения объектов исследования.

Рис. 3. Изображение динамически изменяющейся сцены во времени

Так под динамически изменяющимися сценами (ДИС) будем понимать изображения с пространственной фиксацией положения, на которых объекты могут изменять положение, форму, текстуру и другие характеристики. В исследовании ставиться задача изучить, колориметрические пространства для определения оптимальных моделей разделения объекта и фона для ДИС.

Современное оборудование для регистрации цифровых изображений обладает качественными характеристиками при регистрации, как цветовой, так и яркостной составляющих. Цвет – это важная информативная составляющая, которую можно учитывать при анализе динамически изменяющихся сцен. В колориметрии цвет определяется как трехмерная векторная величина, характеризующая световое излучение, визуально неразличимые в колориметрических условиях наблюдения ^[8].

Решение большинства прикладных задач в области анализа и распознавании изображений зависит от выбора цветового пространства ^[9-11]. Под цветовым пространством будем пониматьгеометрическую модель цветов, воспринимаемых при наблюдении цветовых стимулов предметов. Такой выбор также определяет набор методов и процедур при последующей обработке исходных данных.

Так модель RGB является в настоящее время самой распространенной и первой, которая появилась в работах В.Д. Райта ^[12] и Дж. Гилда ^[13] на основе которых, был создан стандарт CIE 1931 цветового пространства RGB. Исследуя выборочные распределения цвета для фона и объекта в цветовых пространствах целесообразно использовать понятие кластер. Под кластером трехмерном колориметрическом пространстве, будем понимать объединение множества точек, которое могут рассматриваться как самостоятельная единица, обладающая определёнными свойствами.

Сформированные выборки образуют кластер – , который характеризует объект растительности и кластер статистически неоднородного фона – в пространстве RGB
(рис. 4, а).

а	б
Рис.4. Распределение кластеров фона и объекта в цветовых пространствах: а – RGB, б – CMY

Аппаратно-независимый стандарт CIE XYZ цветового пространства^[14] возник, почти одновременно c RGB, однако цвет её основных «излучений» существует только в колориметрических уравнениях, и получить их физически невозможно. При этом координаты цвета всех возможных световых излучений будут положительными, что облегчает расчёты.

Для получения вектора XYZ существует несколько матриц преобразования систем из RGB ^[15,16]. Выбор матрицы преобразования зависит как от используемых основных цветов, так и от выбранного стандартного источника света, то есть от процентного состава основных цветов, необходимых для получения белого. Преобразования осуществлялся по критерию наибольшей отличительности от базового стандарта CIE XYZ 1931. Этому условию хорошо соответствует модель WideGamutRGB на графике (рис. 5) видно, что коэффициентом корреляции – 0,92, а также максимальное покрытие диаграммы цветности ^[17].

Рис. 5. График корреляции матричного преобразования в XYZ с CIE XYZ 1931

На рис. 6, а показные исследуемые кластеры в пространстве XYZ для модели WideGamutRGB. Результаты построения таких же кластеров для моделей ProPhotoRGB и ECIRGB отличаются в пределах 5%.

а	б
Рис.6. Распределение кластеров фона и объекта в цветовых пространствах: а – XYZ, б – UVW

Аппаратно-зависимый стандарт CMY образуется по принципам субтрактивного синтеза и предназначен для вывода информации ^[18]. Выделится вычислительной простотой и получением проекций кластеров, без дополнительных вычислений на соответствующие плоскости (рис.4, б).

Стандартная равноконтрастная колориметрическая система UVW, характеризуется тем, что во всех участках диаграммы цветности любым парам цветов на одинаковом расстоянии соответствует одинаковый цветовой контраст ^[19]. Результат построения цветовых кластеров представлен на рис. 6.б.

Пространство HSV ^[20] (оттенок (цвет), насыщенность, значение) было создано, как естественное и близкое восприятие для человека цвета. Имеется также ряд вариантов аналогов: HSI, HSB HSL ^[21,22]. Данная группа цветовых пространств имеет ряд уникальных показателей ^[23], при котором оттенок является инвариантом определенных типов освещенности, затемнения и теней, а также при сегментации, выполнения с использованием только одной размерности, приводит в результате к меньшему количеству сегментов, чем при использовании базовых цветов.

а	б	в
Рис.7. Распределение кластеров фона и объекта в цветовых пространствах: а – HSB, б – HSI, в – HSV

На рис. 7 показаны исследуемые кластеры в пространстве тон, насыщенность и значение. Представление кластеров в данных моделях имеет ряд уникальных отличительных особенностей.

Следующий класс аппаратно-независимых и равноконтрастных пространств – это Lab, Luv и LHC ^[24-26]. Так компоненты abявляются нелинейным преобразованием (X,Y) CIE, а uv связаны с (X,Y) – линейным преобразованием. Для LHC цилиндрические координаты этого пространства соответствуют как эмпирической системе Манселла, так и согласуются с физиологической моделью цветного зрения. При расчетах бралась точка равной энергии для Lab и Luv (0,9642, 0,8249, 1), которая является стандартным для D65 источника света.

а	б	в
Рис.8. Распределение кластеров фона и объекта в цветовых пространствах: а – Lab, б – Luv, в – LHC

На рис. 8 показаны исследуемые кластеры в пространстве светлота и двух хроматических составляющих. Кластеры незначительно пересекаются, однако построить алгоритм разделения гиперплоскостью в пространстве будет сложной задачей.

Цветовые пространства класса – Y** представляют собой перцепционные, аппаратно-зависимые пришедшие из телевидения ^[26,27], где есть яркостная составляющая и две цветоразностные составляющие. Так были исследованы модели: YUV, YIQ и YCrYcb. На рис. 9 показаны исследуемые кластеры, которые пересекаются в узкой пространственной области. При этом построить алгоритм разделения на два независимых кластера будет сложной алгоритмической задачей.

а	б	в
Рис.9. Распределение кластеров фона и объекта в цветовых пространствах: а – YCrCb, б – YIQ,в – YUV

Если построить минимальную выпуклую оболочку для отдельно взятых кластеров используя алгоритм QuickHull ^[28], то можно будет получить модель выборочного распределения в колориметрическом пространке. Принимая пространство единичного объем и рассчитав объем модели, введем коэффициент удельного объема кластеров фон/объект. В таблице, представлены результаты вычисления данного коэффициента.

Таблица

Сравнительный анализ по исследованным колориметрическим пространствам позволяет сделать заключение. Цветовое пространство RGB наилучшим образом подходит для синтезируемого алгоритма цветовой сегментации, поскольку представления объектов и фона образуют слабо пересекающиеся кластеры. Пространственные кластеры наиболее симметричны и вытянуты вдоль вектора яркости. Таким образом, яркость для сегментации мало информативна. Эти свойства пространства теоретически должны обеспечить наибольшую точность сегментации изображения и оценки относительной площади проективного покрытия растений. Визуальные характеристики подтверждаются, также объективным показателем коэффициента удельного объема, который имеет максимальное значение для RGB пространства.

Известны алгоритмы распознавания объектов по точечному описанию ^[29-31], однако их вычислительная сложность не позволяет применять для данного класса изображений. Поэтому настоящее исследование определяет оптимальное цветовое пространство для последующего синтеза алгоритма сегментации ДИС.