在 Azure AI 视频索引器中自定义人员模型

注意

为了支持我们的负责任 AI 原则,基于资格和使用标准对人脸识别、自定义和名人识别功能的访问进行限制。 人脸识别、自定义和名人识别功能仅适用于 Microsoft 托管客户和合作伙伴。 使用人脸识别引入表单来申请访问。

仍检测到 Azure AI 视频索引器无法识别的人脸,但未命名。 可以生成自定义人员模型,并使 Azure AI 视频索引器能够识别默认无法识别的人脸。 可以通过将人员的姓名与人脸的图像文件配对来生成它们。

可以为每个帐户创建多个人员模型。 例如,如果帐户中的内容要排序到不同的频道中,你可能希望为每个频道创建单独的人员模型。

注意

每个人模型最多支持 100 万人,每个帐户的模型限制为 50 人。

通过提供人员模型 ID,可以在上传/索引或重新为视频编制索引时使用人员模型。 为视频训练新人脸会更新关联的自定义模型。

如果不需要多个人员模型支持,请在上传/索引或重新编制索引时,不要将人员模型 ID 分配给视频。 Azure AI 视频索引器将使用帐户中的默认人员模型。

先决条件

  • 一个 Azure 帐户
  • Azure AI 视频索引器帐户

注意

为了支持我们的负责任 AI 原则,基于资格和使用标准对人脸识别、自定义和名人识别功能的访问进行限制。 人脸识别、自定义和名人识别功能仅适用于 Microsoft 托管客户和合作伙伴。 使用人脸识别引入表单来申请访问。

创建新的人员模型

  1. 选择“ + 添加模型 ”按钮。
  2. 输入模型的名称,然后选择 “检查 ”按钮。
  3. 选择列表菜单按钮,然后选择“+ 添加人员”。

将新人员添加到人员模型

  1. 选择要向其添加人脸的人员模型旁边的列表菜单按钮。
  2. 从菜单中选择“+ 添加人员”。
  3. 输入人员的姓名,然后选择 “检查 ”按钮。
  4. 从文件资源管理器中进行选择,或拖放人脸图像。

Azure AI 视频索引器允许在人员模型中添加具有相同名称的多个人员。 但考虑到可用性和清晰性,建议为模型中的每个人员提供唯一名称。

Azure AI 视频索引器可以使用添加此新人脸的人员模型,检测你为该人员编制索引的未来视频和已编制索引的当前视频。 识别当前视频中的人脸可能需要一定的时间,因为这是一个批处理过程。

重命名人员模型

可以在帐户中重命名任何人员模型,包括默认人员模型。 即使重命名默认人员模型,它仍充当帐户中的默认人员模型。

  1. 选择要 重命名的人员模型旁边的菜单 按钮。
  2. 选择菜单中的重命名
  3. 选择模型的当前名称。
  4. 输入新名称,然后选择 “检查 ”按钮。

删除人员模型

可以删除除默认人员模型以外的任何人员模型。

  1. 从菜单中选择“删除”。 你被警告关于行动的毅力。
  2. 如果确定,请再次选择“ 删除 ”。

注意

只有在使用另一个人模型重新编制索引后,才能编辑关联视频中人脸的名称。 如果在未指定人员模型的情况下重新编制索引,将使用默认模型。

帐户中人员模型的中央管理

  1. 选择页面左侧的 con帐篷模式l 自定义按钮。
  2. 选择“人员”选项卡。

默认人员模型包含你在索引期间未指定自定义人员模型的视频见解中编辑或更改的任何人脸。 如果创建了其他人模型,则它们也会在此页面上列出。

重命名人员

  1. 选择列表菜单按钮,然后从列表菜单中选择“ 重命名 ”。
  2. 选择人员的当前名称并键入新名称。
  3. 选择 复选 按钮。

删除人员

  1. 选择列表菜单按钮,然后从列表菜单中选择“ 删除 ”。 弹出窗口会提示此操作将删除该人员且操作无法撤消。
  2. 如果确定,请再次选择“ 删除 ”。

检查人员是否已存在

可以使用搜索来检查模型中是否已存在某个人员。

管理人员

如果选择“ 管理”,则会看到 “人员详细信息 ”窗口,其中包含正在从中训练此人员模型的所有人脸。 这些人脸来自使用该人员模型的视频中或手动上传的图像中该人员的出现。

添加人脸

可以通过选择“添加图像”向人员中添加更多人脸。

删除人脸

选择要删除的图像,然后单击“删除”。

重命名并删除人员

可以使用“管理”窗格重命名人员,并从人员模型中删除该人员。

使用人员模型为视频编制索引

可以通过在上传视频期间分配人员模型来使用人员模型为新视频编制索引。

若要在新视频中使用人员模型,请执行以下步骤:

  1. 选择上载按钮。
  2. 拖放视频文件或浏览文件。
  3. 选择“高级选项”箭头。
  4. 选择下拉列表,然后选择你创建的人员模型。
  5. 选择 页面底部的“上传 ”选项。

如果在上传过程中未指定人员模型,Azure AI 视频索引器将使用帐户中的默认人员模型为视频编制索引。

使用人员模型重新编制视频索引

若要使用人员模型在集合中重新编制视频索引,请转到 Azure AI 视频索引器主页上的库,并将鼠标悬停在要重新编制索引的视频的名称上。

此时会看到用于编辑视频、删除视频以及为视频重新编制索引的选项。

  1. 选择为视频重新编制索引。
  2. 选择人员模型下拉列表,然后选择要使用的人员模型。
  3. 选择 “重新编制索引 ”按钮。

在视频中检测到和识别你刚刚重新编制索引的人脸所做的任何新编辑都保存在用于重新编制视频索引的人员模型中。

管理视频中的人员

可以管理通过编辑和删除人脸来管理编制索引的视频中检测到的人脸和识别出的人。

删除人脸会从视频见解中删除特定人脸。

编辑人脸会对视频中检测到并可能被识别的人脸进行重命名。 在视频中编辑人脸时,该名称将保存为在上传和编制索引期间分配给视频的人员模型中的人员条目。

如果在上传过程中未将人员模型分配给视频,则编辑将保存在帐户的默认人员模型中。

编辑人脸

注意

如果人员模型具有两个或多个同名不同人员,则无法在使用该人员模型的视频中标记该名称。 你只能更改在 Azure AI 视频索引器中的“人员”选项卡中共享该名称的人员帐篷模式l 自定义页。 出于此原因,建议为人员模型中的每个人提供唯一名称。

  1. 从库中选择要处理的视频。
  2. 选择“见解”选项卡,然后选择铅笔图标。
  3. 选择检测到的任何人脸,将其名称从“未知 #X”(或以前分配给该人脸的名称)更改为其他名称。
  4. 输入新名称并选择 选中 图标。 这一操作会保存新名称,识别并命名其他当前视频和未来上传视频中出现的此人脸。

识别其他当前视频中的人脸可能需要一定的时间,因为这是一个批处理过程。

如果用视频正在使用的人员模型中现有人员的姓名命名人脸,则此人在此视频中检测到的人脸图像与模型中已存在的内容合并。 如果使用新名称命名人脸,则会在视频正在使用的人员模型中创建一个新人员条目。

删除人脸

  1. 从库中选择要处理的视频。
  2. 选择“见解”窗格,然后选择铅笔图标。
  3. 选择人脸名称下的“删除”选项。 此操作将删除视频中检测到的人脸。 该人脸仍会在显示该人脸的其他视频中检测到,但你可以在这些视频编制索引后从这些视频中删除该人脸。

如果该人被命名,则他们将继续存在于用于为从中删除人脸的视频编制索引的人员模型中,除非你专门从人员模型中删除该人员。

获取人员模型质量的指示

你可以获取自定义人员模型的质量(可怜、公平、良好)的指示。 质量由用于标记图像的图像数量来确定,用于标记人员的图像越多,正确识别人员的概率越高。 例如,识别具有 24 个标记图像的人员的概率高于识别具有 2 个标记图像的人员的概率。 可以在自定义人员模型页中查看用于标记每个人的图像数。

选择自定义人员模型作为默认值

可以在 VI 帐户用户级别上选择默认的自定义人员模型,因此无需为每个视频上传选择模型名称。 这可以节省上传需要由自定义人员模型分析的视频的时间和精力。

在视频中对未知人员进行分组

你可以在视频中看到按其外观相似性分组的未知人员。 它可帮助你轻松快速地标记未知人员,并提高自定义人员模型的准确性。 例如,它可以帮助你标记当地名人或当地政治家。 可以在自定义页面中查看未知人员的分组。 选择 人员 ,然后导航到 未知人员 选项卡。

具有标识人员姓名的最大置信度分数的搜索结果

可以搜索已标识人员的姓名,并获取该人员在视频中出现的时间以及最大置信度分数的时间戳。 它可帮助你确定哪些视频最相关的浏览内容。 例如,可以搜索“John Smith”,并获取由自定义人员模型识别 John Smith 的视频以及每个视频的置信度分数。

管理多个人员模型

Azure AI 视频索引器通过 Azure AI 视频索引器 API 支持每个帐户的多个人员模型。

如果帐户提供不同的用例,可能需要为每个帐户创建多个人员模型。 例如,如果你的内容与体育相关,则可以为每个运动(足球、篮球、足球等)创建单独的人员模型。

每个帐户的型号限制为 50 人。 如果不需要多个人员模型支持,请在上传/索引或重新编制索引时,不要将人员模型 ID 分配给视频。 在这种情况下,Azure AI 视频索引器在帐户中使用默认自定义人员模型。

优化模型识别人员的能力

为了优化模型识别人员的能力,请尽可能多地上传不同图像,以及不同角度的图像。 为了获得最佳结果,请使用高分辨率图像。