OmegaCanopyСВЯЗЬ / ДАННЫЕ / ВЫЧИСЛЕНИЯEN
Главная » Разборы » «Точность видеоаналитики 99%» на ферме: какие ошибки и нагрузку должен показывать пилот

«Точность видеоаналитики 99%» на ферме: какие ошибки и нагрузку должен показывать пилот

Запросить

Поставщик предлагает аналитику камеры и называет высокий процент точности. Хозяйству при этом нужно понимать, сколько нужных событий система пропустит и сколько лишних обращений получит дежурный. Без определения события, набора проверки и способа расчёта одно число не отвечает на эти вопросы.

Рассмотрим обычное производственное наблюдение, например появление объекта в согласованной зоне. Статья не подтверждает пригодность аналитики для аварийной защиты и не обещает достоверный вывод о состоянии животных или людей. Проверяется конкретная информационная задача в названных условиях.

Определите единицу результата

Четыре исхода испытания видеоаналитики. Событие присутствует; Обнаружение; Пропуск. Событие отсутствует; Ложное срабатывание; Верное отсутствие. Нагрузка дежурного; Сколько событий и сигналов нужно разобрать.
Учебная матрица относится к согласованным эпизодам и выбранной единице результата.

Это может быть отдельный эпизод, временной интервал или объект. Нельзя сравнивать проценты, полученные на разных единицах, не объяснив различие. Если одна длительная активность создаёт двадцать уведомлений, это двадцать сообщений или одно обнаруженное событие? Ответ нужен до пилота.

Опишите начало и конец эпизода, рабочую зону и основания правильного ответа. Проверочный набор должен иметь понятную разметку, подготовленную допустимым способом. Если два наблюдателя не согласны, эпизод не превращают автоматически в удобную для поставщика категорию.

Также отделяют обнаружение от доставки уведомления и действия человека. Аналитика могла сформировать результат, но сообщение не дошло. Дежурный мог получить сообщение и пока не проверить сцену. Эти этапы требуют отдельных показателей.

Почему высокий общий процент может не помогать

Возьмём вымышленный набор из 1000 интервалов. Нужное событие есть в десяти, в остальных 990 его нет. Система, которая всегда отвечает «события нет», будет права в 99% интервалов, но пропустит все десять нужных случаев.

Другой условный результат в том же наборе: двадцать уведомлений, восемь из них относятся к действительным событиям и двенадцать — ложные. Два действительных события пропущены. Получается восемь найденных событий из десяти, а полезных уведомлений — восемь из двадцати. Общая доля правильных классификаций равна 98,6%, но полезность для конкретной задачи может оцениваться иначе.

Пример не описывает реальную камеру. Он показывает, почему показатели нужно представлять раздельно и связывать с нагрузкой персонала. Более высокое общее число не всегда означает меньше пропусков нужных событий.

Четыре результата

Реальность и ответКак учитывается
Событие было, система сообщилаПодтверждённое обнаружение
События не было, система сообщилаЛожное уведомление
Событие было, сообщения нетПропуск
События не было, сообщения нетПравильное отсутствие уведомления

Для каждого вида ошибки полезно сохранить согласованный пример и условия сцены. Иногда ложные уведомления сосредоточены в одном режиме освещения, а пропуски — в другом. Среднее по всему периоду может скрыть эту структуру.

Условия пилота

Включают реальные предусмотренные режимы сцены: изменения света, положение объектов и другие существенные для задачи обстоятельства. Количество примеров и достаточность набора согласуют отдельно. Эта статья не назначает статистически достаточный объём для любого объекта.

Часть набора, по которой подбирались настройки, желательно отличать от согласованной проверки результата. Иначе хороший показатель может описывать приспособление к уже известным эпизодам. Если независимого набора нет, ограничение указывают прямо.

Не создают опасные события ради проверки и не нарушают установленные условия съёмки. Для предварительной проверки логики можно использовать разрешённые материалы или согласованный тестовый контур. По ним нельзя заявлять больше, чем позволяют условия испытания.

Оценку нагрузки можно продолжить тем же вымышленным примером. Если на просмотр одного уведомления условно требуется 40 секунд, двадцать обращений займут 800 секунд, или 13 минут 20 секунд. Из них двенадцать ложных обращений составят 8 минут. Это не норматив времени и не расчёт необходимого штата: реальная работа отличается. Пример лишь связывает техническую статистику с конкретным ресурсом человека и показывает, почему число ложных уведомлений нельзя прятать за общей долей правильных ответов.

Свяжите ошибки с работой дежурного

Пусть двадцать уведомлений из примера требуют по одной проверке. Хозяйству нужно знать, кто выполняет их, как фиксируется итог и что происходит с пропущенным событием, обнаруженным другим способом. Автоматическое сообщение не равно завершённой реакции.

В запрос на видеосистему и её программные компоненты включают единицу события, четыре категории результатов, условия сцены и путь уведомления. Точные функции подтверждаются для предлагаемой версии и комплекта.

Практический результат пилота — понятная картина ошибок и нагрузки при согласованных условиях. Она позволяет обсуждать доработку и границы применения. Один рекламный процент без этих сведений не заменяет решения о том, какую задачу хозяйство действительно сможет выполнять с помощью аналитики.

Все разборы