Получение аналитических сведений об обнаружении наблюдаемых людей и сопоставленных лицах

Наблюдаемые люди обнаружения, сопоставленные лица, обнаруженная одежда

Внимание

Доступ к функциям идентификации лиц, настройки и распознавания знаменитостей ограничен на основе критериев соответствия и использования для поддержки наших принципов ответственного ИИ. Функции идентификации лиц, настройки и распознавания знаменитостей доступны только для управляемых клиентов и партнеров Майкрософт. Используйте форму приема Распознавания лиц, чтобы подать заявку на доступ.

Наблюдаемые люди обнаружения и сопоставленные лица автоматически обнаруживают и сопоставляют людей в файлах мультимедиа. Наблюдаемые люди обнаружения и сопоставленные лица можно задать для отображения аналитических сведений о людях, их одежде и точном интервале времени их появления.

На веб-портале полученные аналитические сведения отображаются в списке с категориями на вкладке "Аналитика", вкладка содержит эскиз каждого пользователя и их идентификатора. Щелкнув эскиз человека, отобразит соответствующее лицо (соответствующее лицо в аналитических сведениях о людях). Аналитические сведения также создаются в списке с категоризированным списком в JSON-файле, который включает идентификатор эскиза пользователя, процент времени, отображаемый в файле, вики-ссылку (если они знаменитости) и уровень достоверности.

Наблюдаемые люди обнаружения, обнаруженные одежды и соответствующие варианты использования лиц

  • Повышение эффективности путем глубокого поиска подходящих людей в архивах организации для анализа конкретных знаменитостей, например при создании рекламных и трейлеров.
  • Улучшенная эффективность при создании историй признаков, например, поиск людей, одетых в красную рубашку в архивах футбольной игры в агентстве News или Sports.
  • Создание сводки из длинного видео, такого как судебное свидетельство появления определенного человека в видео, с использованием одинакового идентификатора обнаруженного человека.
  • Изучите и анализируйте тенденции с течением времени, например, как клиенты переходят по проходам в супермаркетах или сколько времени они тратят в очередях.

Соответствующие лица и обнаруженные функции одежды доступны при индексировании файла, выбрав предустановку advanced ->Video + audio indexing.

Просмотр json аналитики с помощью веб-портала

После отправки и индексирования видео аналитические сведения доступны в формате JSON для скачивания с помощью веб-портала.

  1. Перейдите на вкладку "Библиотека ".
  2. Выберите носитель, с которым вы хотите работать.
  3. Выберите "Скачать" и "Аналитика" (JSON). Файл JSON открывается на новой вкладке браузера.
  4. Найдите пару ключей, описанную в примере ответа.

Использование API

  1. Используйте запрос на получение индекса видео. Мы рекомендуем передать &includeSummarizedInsights=false.
  2. Найдите пары ключей, описанные в примере ответа.

Пример отклика

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

Внимание

Важно прочитать общие сведения о прозрачности для всех функций VI. Каждое представление также имеет заметки о прозрачности собственных:

Заметки об обнаружении и сопоставлении лиц

  • Обычно люди не обнаруживаются, если они отображаются небольшими (минимальная высота человека составляет 100 пикселей).
  • Максимальный размер кадра — полное определение (FHD).
  • Низкое качество видео (например, темные условия освещения) может повлиять на результаты обнаружения.
  • Рекомендуемая частота кадров — не менее 30 кадров/с.
  • Рекомендуемые входные данные — видео должно содержать не более 10 человек в одном кадре. Эта функция может работать с большим числом людей в одном кадре, но с наибольшей достоверностью результаты обнаружения получаются при наличии не более 10 человек в кадре.
  • Люди с аналогичной одеждой: (например, люди носят униформы, игроки в спортивных играх) могут быть обнаружены как тот же человек с тем же номером идентификатора.
  • Обструкция — могут возникнуть ошибки, при которых возникают препятствия (место происшествия или самоустраховки другими людьми).
  • Позирование: треки могут быть разделены из-за различных поз (назад или передний)
  • Так как обнаружение одежды зависит от видимости тела человека, точность выше, если человек полностью виден. Могут возникнуть ошибки, когда человек без одежды. В этом сценарии или других случаях плохой видимости результаты могут быть предоставлены, такие как длинные брюки и юбка или платье.

Отслеживаемые компоненты обнаружения и сопоставления лиц

Компонент Определение
Исходный файл Пользователь отправляет исходный файл для индексирования.
Detection Файл мультимедиа отслеживается для обнаружения наблюдаемых людей и их одежды. Например, рубашка с длинными рукавами, платьем или длинными брюками. Для обнаружения в средствах массовой информации должен появиться полный верхний текст человека.
Локальное группирование Обнаруженные лица фильтруются по локальным группам. Если пользователь обнаруживается несколько раз, для этого человека создаются более наблюдаемые экземпляры лиц.
Сопоставление и классификация Наблюдаемые экземпляры людей сопоставляются с лицами. Если есть известная знаменитость, наблюдаемый человек получает свое имя. Любое количество наблюдаемых экземпляров людей можно сопоставить с тем же лицом.
Значение достоверности Предполагаемый уровень достоверности каждого наблюдаемого человека вычисляется как диапазон от 0 до 1. Оценка достоверности представляет уверенность в точности результата. Например, 82% определенности представлена как оценка 0,82.

Пример кода

См. все примеры для VI