Май 2021
В мае мы добавили на портал редактор датасетов, повысили точность панорамы, улучшили привязку товаров и ценников и многое другое.
Редактор датасетов
На портале появился новый тип датасетов. В него попадают все фото, на которых при проверке точности были отмечены ошибки распознавания.
Редактор позволит исправить ошибки автоматического распознавания и обучить детектор так, чтобы он не повторял ошибки.
В самом датасете можно просмотреть каждый бокс, поправить его размеры и местоположение, изменить метку или вообще удалить. При выделении бокса на фото, система подсветит его в списке.
Редактор можно найти на портале, в разделе «Датасеты». Позднее, мы планируем добавить датасет для полок.
Точность панорамы
О «Панораме» мы писали ранее. Это алгоритм, который создает один большой панорамный снимок из нескольких фото сцены. В этом месяце мы повысили его точность.
Как это работает
В сцене 2 фотографии, которые никак не связаны между собой.
В итоге, система склеивала их в один кадр. Это происходило потому, что потолок и пол на фото выглядят одинаково.
Чтобы панорама клеилась без таких ошибок, нужно найти ключевые точки на двух фото и алгоритмически верно сопоставить их.
Для этого используется специальная карта, которая отображает совпадения. Из множества линий, система ищет такие, которые будут удовлетворять условиям. Из точек на линиях берутся наиболее релевантные и по ним строится матрица преобразований. Это нужно чтобы правильно исказить одно фото под другое.
Чем правильнее найдены точки, тем лучше получается картинка на шве склейки.
Кроме того, возникали ситуации, когда по верху фото склеено правильно, но сами товары на полке склеились некорректно.
Теперь точки стали учитываться только внутри аннотаций. Теперь система смотрит не на верхнюю часть с баннером, а только на то, что находится внутри аннотации.
Привязка товаров и ценников
Алгоритмы зрения видят боксы товаров и ценников. Но чтобы сказать, какой товар сколько стоит, системе нужно сделать предположение, какой ценник к какому товару относится.
Мы полностью переписали старый алгоритм. Теперь привязка товаров и ценника определяется более корректно и правильно.
Как просмотреть
Просмотреть работу алгоритма можно в сцене с фото. Для этого на фото нажмите и выберите «Explain price».
