对象跟踪的设备和方法技术

本发明专利技术涉及对象跟踪的设备和方法。一种生成与体育事件中的元素相关联的竞赛事件的事件日志的方法。该方法包括：在视频图像序列内跟踪对应于体育事件中的相应元素的图像特征；从所跟踪的图像特征中选择对应于该元素之一的第一图像特征，从而将该元素指定为选定元素。该方法还包括：从可能的竞赛事件的事件列表中选择用以与该选定元素相关联的竞赛事件；以及将该选定竞赛事件与该选定元素相关联从而生成事件日志。

【技术实现步骤摘要】

本专利技术涉及一种用于生成事件日志的方法和设备。
技术介绍
在体育广播例如足球比赛报导的领域中，评论员通常根据比赛直播视频镜头(footage)或者根据体育场中的有利位置而在视觉上辨别 运动员从而可以编辑关于每一个运动员的比赛统计。另外，对于重点 节目，操作员可以使用适当的回顾和编辑工具包(suite)而根据直播 视频镜头的记录来编辑与每一个运动员在竟赛场地上的位置以及他 们在竟赛场地上的动作有关的信息。然而，回顾和编辑所记录的视频镜头是耗时且昂贵的以及存在人 为误差。虽然，自动化系统能够被用于使用对比赛视频镜头实施的图 像识别技术而辅助操作人员跟踪每一个运动员，但是如果运动员参与 竟赛事件(game event)(例如踢球、阻截另 一运动员等)则自动化 系统可能难以记录事件日志。进而，关于运动员在竟赛期间的位置的注释数据可以被用于使用 3D虚拟仿真来再现该项比赛。然而，为了使得该仿真看似逼真的， 与竟赛事件类型有关的数据需要被输入至执行仿真的设备，从而能够 使得被模拟的运动员按照比赛期间的实际事件而执行适当的竟赛动 作。例如在WO-A-02/071334中描述的一些系统使用多个照相机来跟 踪在体育事件(例如足球比赛)中的参与者。操作员可以使用从比赛 镜头分别显示出的单独列表而对适当的竟赛注释上由系统生成的位 置数据。然而，当涉及很多事件时，由于必须从列表中选择运动员并且根 据镜头以视觉方式确认应该将哪一个事件与该运动员相关联，所以操 作员注释大量镜头可能是耗时的。本专利技术试图緩解或者减轻以上问题。
技术实现思路
在第一方面，提供一种生成与在体育事件中存在的元素(element) 相关联的竟赛事件的事件日志的方法，该方法包括在视频图像序列内跟踪对应于体育事件中的相应元素的图像特征；从所跟踪的图像特征中选择对应于元素之一的第 一 图像特征，从 而将该元素指定为选定元素；从可能的竟赛事件的事件列表中选择用以与该选定元素相关联的竟赛事件；以及将该选定竟赛事件与该选定元素相关联从而为该元素生成事件 日志。据此，通过跟踪对应于例如足球竟赛的运动员的图像特征并且选 择对应于期望运动员的图像特征，操作员可以从事件列表中选择与该 运动员相关联的适当竟赛事件(例如踢球或者头球)。另外，可以通 过例如内容处理工作站以及来自于与该运动员相关联的事件列表的 适当事件而自动地选择对应于运动员的图像特征。因此，能够降低在 标注视频镜头以生成比赛统计数据时所涉及的成本和劳动。进而，例如，所产生的事件日志可以被用作3D仿真的输入，其包括在真实足 球比赛中所涉及的球以及运动员的跟踪数据，因而改善了对真实比赛 的3D仿真；因而能够使得被模拟的运动员模仿与竟赛事件相关联的 动作。这种方法还包括将第一图像特征与事件列表一起显示在视频图 像序列内；以及根据用户对竟赛事件的人工选择而从事件列表中选择竟赛事件。这有助于用户选择事件并且因而加速注释过程。可以基本邻近于该第一图像特征来显示事件列表。这允许用户关注于显示视频的屏幕区域。这同样加快注释过程。 该方法还可以包括通过分析视频图像序列而跟踪与体育事件相 关联的竟赛对象(game object)在每一个视频图像内的位置，从而生 成与该竟赛对象在视频图像序列内的运动方向有关的运动数据；通过分析该运动数据而根据竟赛对象的运动方向的变化来检测竟赛事件发生；以及标记在其中检测到已发生竟赛事件的一个或者多个视频图像从 而指示那些视频图像包括竟赛事件的发生。通过这样做，能够自动地检测在何处存在事件，从而允许用户更 加快速地跳到相关帧。如果竟赛对象的运动方向的变化大于预定阀值，则可以检测到已 发生竟赛事件。该方法可以包括通过分析视频图像序列来检测竟赛对象相对于 选定元素的位置；以及根据检测到的该竟赛对象相对于选定元素的位置而从事件列表中选择竟赛事件。这对于帮助选择相关事件而言特别有用。例如，在下文中描述的 英式足球实施例中可能是这样的当竟赛对象(例如，球)在大约头 部高度时知道事件发生意味着该事件将很可能是头球。该方法可以包括检测在竟赛对象和每一个元素之间的相对距离 从而生成与在竟赛对象和每一个元素之间的距离有关的距离数据；分析该距离数据从而当检测到竟赛事件已发生时检测哪一个元 素最靠近竟赛对象；以及当竟赛事件发生时将该竟赛事件与被检测到是最靠近竟赛对象 的元素相关联。这同样可以有助于自动化事件日志记录(logging)。该方法还可以包括顺序地显示视频图像序列；在已被标记为包括竟赛事件的发生的视频图像处暂停视频图像序列的顺序显示；以及与事件列表一起显示第一图像特征从而用户可以从事件列表中 选择用以与选定元素相关联的适当的竟赛事件。这同样可以帮助加速事件日志记录过程。每一个元素可以与允许该元素净皮唯一地识别的唯一识别数据 (unique identifying data)相关联。还提供一种包含计算机可读指令的计算机程序，所述计算机可读 指令在被加栽到计算机时配置该计算机以执行该方法。在另一个方面，提供一种用于生成与体育事件中的元素相关联的 竟赛事件的事件日志的设备，该设备包括跟踪装置，用于在视频图像序列内跟踪对应于体育事件中的相应元素的图像特征；图像特征选择装置，用于从所跟踪的图像特征选择对应于所述元 素之一的第一图像特征，从而将该元素指定为选定元素；竟赛事件选择装置，用于从可能的竟赛事件的事件列表中选择用 以与该选定元素相关联的竟赛事件；以及关联装置，用于将该选定竟赛事件与该选定元素相关联从而为该 元素生成事件日志。这个设备还包括用于在视频图像序列内显示第 一 图像特征与事 件列表的装置；以及其中该竟赛事件选择装置能够被操作以根据用户对竟赛事件的 人工选择而从该事件列表中选择该竟赛事件。在又进一步的方面，提供一种用于生成与体育事件中的元素相关 联的竟赛事件的事件日志的设备，该设备包括跟踪装置，用于在视频图像序列内跟踪对应于体育事件中的相应 元素的图像特征；图像特征选择器，用于从所跟踪的图像特征中选择对应于所述元 素之一的第一图像特征，从而将该元素指定为选定元素；竟赛事件选择器，用于从可能的竟赛事件的事件列表中选择用以 与该选定元素相关联的竟赛事件；以及关联装置，用于将该选定竟赛事件与该选定元素相关联从而为该 元素产生事件日志。这个设备还包括用于在视频图像序列内显示第 一图像特征与事 件列表的显示装置；以及其中该竟赛事件选择器能够被操作以根据用户对竟赛事件的人 工选择而从该事件列表中选择该竟赛事件。可以基本邻近于该第一图像特征来显示该事件列表。跟踪装置可以能够被操作以通过分析视频图像序列来跟踪与体 育事件相关联的竟赛对象在每一个视频图像内的位置从而生成与竟 赛对象在视频图像序列内的运动方向有关的运动数据；以及该设备可以进一步包括检测器，用于通过分析该运动数据而根据竟赛对象的运动方向的变化来检测竟赛事件的发生；以及标记装置，用于标记在其中检测到已发生竟赛事件的一个或者多 个视频图像从而指示那些视频图像包括竟赛事件的发生。如果竟赛对象的运动方向的变化大于预定阀值，则可以检测到已 发生竟赛事件。该跟踪装置可以能够被操作以通过分析视频图像序列而检测竟 赛对象相对于选定元素的位置；以及该竟赛事件选择器可以能够被操本文档来自技高网...

【技术保护点】
一种生成与在体育事件中存在的元素相关联的竞赛事件的事件日志的方法，所述方法包括：　在视频图像序列内跟踪对应于体育事件中的相应元素的图像特征；　从所跟踪的图像特征中选择对应于元素之一的第一图像特征，从而将该元素指定为选定元素；　 　从可能的竞赛事件的事件列表中选择用以与所述选定元素相关联的竞赛事件；　将选定竞赛事件与所述选定元素相关联从而为该元素生成事件日志；　在视频图像序列内显示第一图像特征与事件列表；以及　根据用户对竞赛事件的人工选择而从所述 事件列表中选择所述竞赛事件。

【技术特征摘要】
GB 2008-8-1 0814139.21.一种生成与在体育事件中存在的元素相关联的竞赛事件的事件日志的方法，所述方法包括在视频图像序列内跟踪对应于体育事件中的相应元素的图像特征；从所跟踪的图像特征中选择对应于元素之一的第一图像特征，从而将该元素指定为选定元素；从可能的竞赛事件的事件列表中选择用以与所述选定元素相关联的竞赛事件；将选定竞赛事件与所述选定元素相关联从而为该元素生成事件日志；在视频图像序列内显示第一图像特征与事件列表；以及根据用户对竞赛事件的人工选择而从所述事件列表中选择所述竞赛事件。2. 根据权利要求1的方法，其中，所述事件列表被显示为基本邻 近于所述第一图像特征。3. 根据权利要求1的方法，包括通过分析视频图像序列而跟踪与体育事件相关联的竟赛对象在 每一个视频图像内的位置从而生成与所述竟赛对象在视频图像序列 内的运动方向有关的运动数据；通过分析所述运动数据而根据竟赛对象的运动方向的变化检测 竟赛事件的发生；以及标记在其中检测到已发生竟赛事件的一个或者多个视频图像从 而指示那些视频图像包括竟赛事件的发生。4. 根据权利要求3的方法，其中，如果竟赛对象的运动方向的变 化大于预定阀值，则检测到已发生竟赛事件。5. 根据权利要求3的方法，包括通过分析视频图像序列来检测竟赛对象相对于选定元素的位置；以及根据检测的所述竟赛对象相对于选定元素的位置而从事件列表 中选择竟赛事件。6. 根据权利要求3的方法，包括检测在竟赛对象和每一个元素之间的相对距离从而生成与在竟 赛对象和每一个元素之间的距离有关的距离数据；分析所述距离数据从而当检测到竟赛事件已发生时检测哪一个 元素最靠近竟赛对象；以及当竟赛事件发生时将所述竟赛事件与被检测到为最靠近竟赛对 象的元素相关联。7. 根据权利要求3的方法，包括 顺序地显示视频图像序列；在已被标记为包括竟赛事件的发生的视频图像处暂停视频图像 序列的顺序显示；以及显示第一图像特征与事件列表从而用户可以从事件列表中选择 用以与选定元素相关联的适当的竟赛事件。8. 根据权利要求1的方法，其中，每一个元素与允许该元素被唯 一地识别的唯 一 识别数据相关联。9. 一种包含计算机可读指令的计算机程序，所述计算机可读指令 在被加栽到计算机时配置所述计算机执行根据权利要求1的方法。10. —种用于生成与体育事件中的元素相关联的竟赛事件的事件 曰志的设备，所述设备包括跟踪装置，用于在视频图像序列内跟踪对应于体育事件中的相应 元素的图像特征；图像特征选择器，用于从所跟踪的图像特征选择对应于所述元素 之一的第一图像特征，从而将该元素指定为选定元素；竟赛事件选择器，用于从可能的竟赛事件的事件列表中选择用以 与所述选定元素相关联的竟赛事件；关联装置，用于将选定竟赛事件与所述选定元素相关联从而为该 元素生成事件日志。显示装置，用于在视频图像序列内显示第 一 图像特征与事件列表；其中，所述竟赛事件选择器能够被操作以根据用户对竟赛事件的 人工选择而从所述事件列表中选择所迷竟赛事件。11. 根据权利要求10的设备，其中，所述事件列表被显示为基...

【专利技术属性】
技术研发人员：MJ威廉斯，CL罗宾逊，
申请(专利权)人：索尼株式会社，
类型：发明
国别省市：JP[日本]