阿里达摩院推出AI框架HQTrack,可实现视频高质量跟踪

[时尚] 时间:2024-04-19 17:08:46 来源:蓝影头条 作者:知识 点击:94次
IT之家 7 月 31 日消息,阿里阿里旗下达摩院日前与大连理工大学合作,达摩推出了一款名为 HQTrack 的院推 AI 框架。该框架主要由视频多目标分割器(VMOS)和掩模优化器 (MR) 组成,框可实旨在“实现对视频中任何目标的现视高质量跟踪”。

研究团队表示,频高HQTrack 基于开源框架 DeAOT、质量HQ-SAM,跟踪在此之上进行了一定改进,阿里实现了“在视频中分割各目标”的达摩可能性。

▲ 图源 HQTrack 的 GitHub 页面

▲ 图源 HQTrack 的 GitHub 页面

同时,研究团队使用 Intern-T 作为特征提取器,框可实提高框架对不同类型物体的现视区分能力,同时加入了一个门控传播模块(GPM),频高以便于框架在复杂环境中感知更多微小物体,质量生成高质量的即时目标遮罩。

据悉,在 VOTS2023 竞赛中,HQTrack 以 0.615 的质量得分获得第二名,研究团队表示,该 AI 框架可以应用于人脸识别、智能驾驶、监控追踪等领域,并有望在未来商业应用中落地。

▲ 图源 HQTrack 的 GitHub 页面

▲ 图源 HQTrack 的 GitHub 页面

该项目目前已经在 GitHub 中开放,感兴趣的小伙伴们可以在此访问,IT之家将 HQTrack 核心功能转录于下方:

1. 多目标追踪:HQTrack 可以同时追踪多个目标对象,适用于复杂场景下的目标追踪任务。

2. 目标分割:HQTrack 能够准确地分割视频中的目标对象,并生成高质量的目标遮罩,可用于目标识别和分析。

3. 高质量输出:HQTrack 的追踪结果具有高质量和高准确性,能够满足各种应用场景的需求。

4. 简单易用:HQTrack 提供了简洁的接口和使用指南,用户可以轻松地使用和集成该工具。

(责任编辑:娱乐)

    相关内容
    精彩推荐
    热门点击
    友情链接