Распознавание лиц на сжатых изображениях
TRANSCRIPT
![Page 1: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/1.jpg)
Распознавание лиц на сжатых изображениях
• Сжатие изображений JPEG-2000 c ROI, где Region of Interest – лицо
• Сжатие изображений JPEG-2000 без ROI
• Сравнение двух вариантов сжатия с точки зрения работы алгоритма распознавания лиц
![Page 2: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/2.jpg)
Визуальное сравнениеROI без ROI
![Page 3: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/3.jpg)
Визуальное сравнениеROI без ROI
![Page 4: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/4.jpg)
Схема эксперимента
![Page 5: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/5.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 6: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/6.jpg)
База изображений
• Всего изображений 900• Всего классов 30• Число изображений на класс 30• Число различных наборов (мест съемки) 5• Число изображений в наборе на класс 6• Разрешение изображений 1024×684• Формат изображений TIFF
• Средний размер лица 150×150
![Page 7: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/7.jpg)
Классы
1 2 3 4 5
6 7 8 9 10
11 12 13 14 15
![Page 8: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/8.jpg)
Классы
16 17 18 19 20
21 22 23 24 25
26 27 28 29 30
![Page 9: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/9.jpg)
Места съемки
![Page 10: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/10.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 11: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/11.jpg)
Выделение лиц
• Алгоритм Viola-Jones alt tree 1,2
• Всего лиц 900• Выделено лиц 653• Процент выделенных лиц 72,6%• Всего изображений 900 (1024×684)• False Positive Rate 162• Выделено лиц случайных прохожих 8• Всего ложных выделений 170
![Page 12: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/12.jpg)
Процент выделенных лиц
87% 97% 73% 77% 80%
70% 93% 50% 77% 60%
80% 70% 70% 87% 77%
![Page 13: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/13.jpg)
80% 67% 53% 57% 70%
50% 53% 50% 57% 90%
97% 70% 67% 90% 80%
Процент выделенных лиц
![Page 14: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/14.jpg)
Ложные выделения
![Page 15: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/15.jpg)
Ложные выделения
![Page 16: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/16.jpg)
Ложные выделения
![Page 17: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/17.jpg)
Ложные выделения
![Page 18: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/18.jpg)
Ложные выделения
![Page 19: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/19.jpg)
Ложные выделения
![Page 20: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/20.jpg)
Ложные выделения
![Page 21: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/21.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 22: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/22.jpg)
Сжатие• Bit Rate 0,2 bpp
![Page 23: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/23.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 24: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/24.jpg)
Постфильтрация ложных выделений
• Фильтрация по цвету: смесь непараметрических плотностей вероятности
• Число лиц на выходе фильтра 653 (100%)• Число ложных выделений 26 (15%)
• Фильтрация по размеру: size > 70• Число лиц на выходе фильтра 653 (100%)• Число ложных выделений 9 (35%)
Фильтрация по цвету
Фильтрация по размеру
![Page 25: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/25.jpg)
Фильтрация по цвету
![Page 26: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/26.jpg)
Фильтрация по размеру
![Page 27: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/27.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 28: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/28.jpg)
База фрагментов выделенных из изображений
• Всего фрагментов 662
• Из них лиц 653• Из них не лиц 9
• Число классов 30• Число обучающих изображений на класс 6• Обучающая выборка 180• Контрольная выборка 482
![Page 29: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/29.jpg)
Обучающая выборка
![Page 30: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/30.jpg)
Контрольная выборка (сжатие с ROI)
![Page 31: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/31.jpg)
Контрольная выборка (сжатие без ROI)
![Page 32: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/32.jpg)
База изображений
Сжатие JPEG-2000 Постфильтрация
База фрагментов выделенных из изображений:
неискаженных cжатых с ROI cжатых без ROI
Контрольная выборка 1Обучающая выборка Контрольная выборка 2
Сжатие JPEG-2000 +ROI
Выде ление лиц
Предобработка
Предобработка
Распознавание лицИнформация о номере класса
Выреза ние выделенных фрагментов
Координаты выделенного фрагмента
![Page 33: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/33.jpg)
Предобработка
• Масштабирование 150×150
• Переход к яркостному изображению rgb2gray• Выравнивание гистограммы яркости histeq
![Page 34: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/34.jpg)
Распознавание лиц
• Алгоритм Fisher Faces • Обучающая выборка 180• Контрольная выборка 482• Верно распознано лиц сжатых с ROI 200 (41,5%)• Верно распознано лиц сжатых без ROI 197 (40,9%)• Процент выделенных лиц 72,6%• Общий уровень распознавания с ROI 30,1%• Общий уровень распознавания без ROI 29,7%
![Page 35: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/35.jpg)
Процент верно распознанных лиц ROI без ROI
30% 30% 61% 65% 31% 31% 41% 41% 39% 33%
67% 67% 55% 50% 67% 56% 59% 59% 33% 33%
56% 61% 60% 60% 7% 7% 80% 80% 47% 47%
![Page 36: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/36.jpg)
22% 22% 50% 43% 40% 40% 18% 18% 40% 40%
67% 78% 10% 10% 78% 78% 18% 18% 0% 0%
70% 65% 60% 60% 0% 0% 29% 24% 28% 28%
Процент верно распознанных лиц ROI без ROI
![Page 37: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/37.jpg)
Общий уровень распознавания ROI без ROI
26% 26% 59% 63% 23% 23% 32% 32% 31% 26%
47% 47% 51% 47% 34% 28% 45% 45% 20% 20%
45% 49% 42% 42% 5% 5% 70% 70% 36% 36%
![Page 38: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/38.jpg)
18% 18% 34% 29% 21% 21% 10% 10% 28% 28%
34% 39% 5% 5% 39% 39% 10% 10% 0% 0%
68% 63% 42% 42% 0% 0% 26% 22% 22% 22%
Общий уровень распознавания ROI без ROI
![Page 39: Распознавание лиц на сжатых изображениях](https://reader034.vdocuments.mx/reader034/viewer/2022052622/5597513e1a28aba54f8b45c2/html5/thumbnails/39.jpg)
Распознавание лиц на сжатых изображениях
• Сжатие изображений JPEG-2000 c ROI, где Region of Interest – лицо
• Сжатие изображений JPEG-2000 без ROI
• Сравнение двух вариантов сжатия с точки зрения работы алгоритма распознавания лиц:
ROI – 41,5% без ROI – 40,9%