270 likes | 491 Views
Семантическая классификация JPEG изображений. Результаты экспериментального исследования. Что такое семантика?. Семантика дает ответ на вопрос: Что изображено на картинке? В рамках данного исследования семантика определяется двумя понятиями: Концепт ( Concept) – существительное
E N D
Семантическая классификация JPEG изображений Результаты экспериментального исследования ЛЭТИ'2006
Что такое семантика? • Семантика дает ответ на вопрос: Что изображено на картинке? • В рамках данного исследования семантика определяется двумя понятиями: • Концепт (Concept) – существительное • Модификатор (modifier) – прилагательное • например: «Лесная река» ЛЭТИ'2006
Принципы построения алгоритма семантической классификации • 1. Сегментация изображения • 2. Семантическая классификация сегментов по прецедентам • 3. Нечеткое статистическое отношение: семантика сегмента – семантика образа • 4. Дублирующая семантическая классификация ЛЭТИ'2006
Формирование базы данных • На этапе накопления базы данных, для каждого сегмента и каждого образа оператор вводит концептуальные понятия (concept) и определения к ним (modifier) в виде текстовых слов. Эта пара слов считается семантикой изображения или его сегмента. • Вместе с семантикой в базе данных сохраняется набор количественных признаков ЛЭТИ'2006
JPEG- кодирование изображений ЛЭТИ'2006
Цветовое пространство ЛЭТИ'2006
Косинусное преобразование ЛЭТИ'2006
Первичные информативные признаки • Цветовой фон • Вариабельность цветности • Цветовой контраст ЛЭТИ'2006
Сегментация изображений • Мера различия векторов ЛЭТИ'2006
Пример сегментации ЛЭТИ'2006
Признаковое пространство сегмента • Относительная площадь • Позиция сегмента в поле изображения • Доминирующий фон • Вариабельность цветности: ЛЭТИ'2006
Полигон сегмента ЛЭТИ'2006
Характеристики полигона • Относительная площадь • Относительный диаметр • Фактор формы • Угол ориентации диаметра • Координаты центра масс • Координаты геометрического центра • Угол ориентации главной компоненты ЛЭТИ'2006
Полигон изображения ЛЭТИ'2006
Информативность признаков ЛЭТИ'2006
Агрегирование признаков ЛЭТИ'2006
Нечеткая классификация • Уровень достоверности признака • Функция принадлежности к прецеденту • Функция принадлежности к семантике ЛЭТИ'2006
Нечеткая классификация образов по семантике сегментов n - число сегментов в образе Transit- матрица нечеткого отношения между семантикой сегментов и семантикой образов. ЛЭТИ'2006
Нечеткая классификация образов по параметрам полигона образа • Уровень достоверности признака • Функция принадлежности к прецеденту • Функция принадлежности к семантике ЛЭТИ'2006
Комплексирование результатов ЛЭТИ'2006
Моделирующая программа ЛЭТИ'2006
Характеристика базы данных ЛЭТИ'2006
Эксперимент 1 Паттерн ЛЭТИ'2006
Эксперимент 2 Паттерн ЛЭТИ'2006
Публикации • Дорогов А.Ю., Курбанов Р.Г., Разин В.В • Быстродействующий алгоритм семантической классификации JPEG–изображений. • Электронный журнал «Нейроинформатика» 2006, том 1, № 2 с.124-144. http://www.ni.iont.ru/Journal/N2/ ЛЭТИ'2006