Об использовании видеокамер с распознаванием символов на низкопроизводительных вычислительных устройствах

[Lugard]

Мне вот интересно на сколько будет эффективно работать технология при упаковке устройства в защищенный корпус для «уличного» использования?
Планируете проводить подобные тесты? Или пока только «комнатный» вариант будете дорабатывать без отвлечения на другое?

[LRpro]

Причин для того чтобы устройство не работало в защищенном корпусе не видим.

[Nikolay_Ch]

Для уличного использования нужен еще нагреватель в корпусе (включающийся автоматически при сильном морозе)… Ну и «визир» должен быть закрыт стеклом.

[insekt]

А что насчет считывания данных со стрелочных счетчиков?
И я правильно понимаю, у вас на текущий момент только прототип изготовлен?

[LRpro]

Тестировали возможность определения циферблата по четырем цифрам 0, 3, 6, 9, расположенным в углах ромба. Определяет и находит возможный центр, стрелку не рисовали. Думаем, что считывание данных со стрелочных счетчиков возможно.
На текущий момент имеется два прототипа. Следующий планируем на 2Мп камере и Orange

[Lugard]

В статье упоминали о возможности применения считывания номеров машин. Нужно ли Вашему устройству темный коридор для работы или возможна работа на расстоянии при естественном свете? Как ведет себя считыватель при попадания изображения под углом к «глазу»?
Машины же разного размера и номера могут висеть на разной высоте и поэтому целесообразнее разместить камеру под углом навстречу движения машины. Появится угол между плоскостями. Решение есть такой проблемы?

[LRpro]

Конечно возможна работа при дневном свете, просто в статьях приведен прототип, «заточенный» под считывание приборов учета. Сама технология распознавания инвариантна по отношению к форме символа и его размеру и поэтому допускает намного большие углы, чем обычно рекомендуется (30 градусов).

[Lugard]

А возможно ли составить набор признаков для распознавания местоположения штрих-кода (EAN, Aztec Code,...) на документе с текстом, таблицами и т.п., когда местоположение искомого объекта даже примерно неизвестно? Или скорость алгоритма не позволяет эффективно работать с большим количеством данным?

[LRpro]

Распознавание штрих-кодов представляется более простой задачей чем символов. Само местоположение по методу идентифицировать очень просто. Скорость алгоритма позволяет работать в межстрочный период работы камеры

[Nikolay_Ch]

А когда планируется релиз? И… цена устройства уже примерно понятна?

[LRpro]

Цена устройства для распознавания показаний счетчика на сегодняшний день до $50. На первый вопрос сейчас ответить не можем

[spidgorny]

Интересно, но слишком поверхностно описано. Вот пример реализации домашнего счётчика енергии на С++ и на Python.

[ser-mk]

картинка по ссылке просто шикарна и восхитительна:

Вообще на счет счетчиков с дисков, есть мнение что вычислительно менее затратно, не распозновать цифры, а пытаться посчитать кол-во оборотов диска, забив предварительно начальные значения

[LRpro]

Если речь идет о текущей статье, то поверхностность обусловлена целью — обсуждение возможных применений, если о предыдущей, то простота базовой идеи, раскрывает суть метода, а описание же деталей алгоритма не входило в цель публикации. Целью было показать, что метод настолько прост, что его можно реализовать на микроконтроллере и тем самым уйти от деталей сравнения с общепризнанным эталоном — нейронными сетями. Это имеет смысл только при возможности реализации распознавания на микроконтроллере при помощи нейронных сетей (или другим методом). Также специально был выбран вариант рукописных символов с расширенной базой (цифры, латинские и русские буквы, простейшие фигуры).

[Lugard]

Из предыдущей статьи я так понял, что в рассматриваемых устройствах используется камера низкого разрешения, что приводит фактически к усреднению изображения самой камерой.

Возник такой вопрос: Применяли ли Вы свой алгоритм распознавания к изображениям, разрешение которых уменьшалось с помощью соответствующих алгоритмов преобразования?

[LRpro]

Если речь идет о временном усреднении, то его нет, так как распознавание с одного кадра, если о пространственном — то высота символов получается 30-50 пикселей, что также не говорит об усреднении. Все шумы и проблемы, связанные с этим присутствуют.
Уменьшение разрешения затруднительно, так как речь идет о распознавании из видеопотока на устройстве, у которого не хватает памяти на сохранение более одной-двух строк изображения.

[Lugard]

Я имел в виду применение отдельно алгоритма распознавания от микроконтроллера на полноценном, но мини, компьютере для определения значения текста или знаков на изображении (Raspberry Pi, Banana Pi,...).
Скорость некоторых алгоритмов сильно зависит от объема входных данных и поэтому для них делают предварительную обработку изображения, например, вейвлет-преобразования.
Вы проводили тесты своего алгоритма на скорость распознавания в подобных условиях?

[LRpro]

Esp работает на частоте 80МГц, Raspberry Pi со своими 1,2ГГц это монстр, так как объем входных данных это просто количество пикселей в строке, переход на 2Мп камеру приведет к увеличению данных в 5 раз, при увеличении скорости в 15 раз, т. е. скорость распознавания как минимум не уменьшится.

[Lugard]

А Ваш алгоритм позволяет делать распараллеливание вычислений или все должно идти строго последовательно, чтобы не «нарушать» границы распознаваемых символов?
Я это к тому, что можно повысить скорость распознавание (и возможно удешевить, уменьшить размеры) за счет создания специальной схемы для ПЛИС.

[LRpro]

Последовательный характер вычислений определен характером получаемых попиксельных данных с камеры, т.е. в каждый момент времени физически имеется только один обрабатываемый пиксель, т.е. теоретически можно было бы запустить параллельные процессы на битовом уровне. Но врядли это целесообразно. Что касается специальной схемы, то это предмет дальнейших исследований, это было бы разумно, поместить алгоритм в железо.

[LRpro]

И по текущему прототипу не стоит оценивать размеры конечного устройства

[ser-mk]

Очень оптимистичное надежда распозновать автомобильные номера, после распознования текста в закрытом корпусе с идеальным освещением. Или вы собираетесь другую технологию применять?

[LRpro]

Как минимум это будет устройство другого формата.

[LRpro]

Да, но распознавание, то на микроконтроллере. Именно поэтому собираемся применять эту технологию.