Павел Браславский,velpas - velpas: мобильный визуальный...
TRANSCRIPT
Velpas: Shazam для картинок
2
Связать объекты реального мира и
виртуального
3
Смартфоны Мобильный интернет
Instagram Нетекстовые интерфейсы
КАК ЭТО РАБОТАЕТ
4
5
• Поиск товаров и услуг • Рекламные кампании • Помощь слабовидящим
Velpas technology
6
Bag of Visual Word approach with in-house implementation of key algorithms
– Lightweight local descriptors – 32-bit integer visual word
– Fast geometric verification
Indexing
• Pyramid of orientations and segmentation tree for detection of low-level “syllables”
• Aggregation of low-level “syllables” to high-level “words”
• Inverted index for word-to-image mapping
7
Retrieval
• Query representation is the same as for collection image
• TF*IDF scoring of collection images
• Geometric verification of highest-scored images
8
Architecture
Технические характеристики
10
0,6
0,8
1,0
1,2
1,4
50 100 200 400 600
об
раб
отк
а за
пр
оса
, с
Коллекция, тыс. изображений
• Индекс до 2 млн изображений на одной машине
• Высокая точность, средняя полнота
Velpas Magazine App
11 https://itunes.apple.com/app/id949428447
ГДЕ ЭТО РАБОТАЕТ
12
13 Content search and distribution
14
Retail
15 Advertising and marketing
16
18
RuSSIR 2016 22-26 августа, 2016 http://russir.org