【技术实现步骤摘要】
本专利技术属于图像识别与跟踪领域，具体涉及一种视觉跟踪和分析系统。
技术介绍
1、跟踪应用程序在业务和安全分析中扮演着重要的角色。随着最近技术的改进，大型语言基础模型llm的出现允许与应用程序进行通信，从而提高了用户体验和效率。通过将监控视频上传到移动应用程序，并采用用户友好的应用prompt方法，商业顾问能够快速获取场景信息的分析，通过整合现代人工智能技术，创建了一个更先进的分析系统，能够跟踪场景中移动的目标。因此，它有助于用户深入分析他们所感兴趣的目标，消除了缓慢和不友好的方法，解决了效率低下的问题。此外，视觉模型的最新创新使得更准确的检测和跟踪成为可能，而且这可以与蒸馏模型结合使用，使模型足够轻量化，可以在性能较低的设备上运行，如移动智能手机，无需依赖互联网，也不会涉及安全问题。但是，虽然部分技术已有技术储备，但在移动设备上如何实现视觉跟踪和分析，目前仍然没有完整的解决方案。
技术实现思路
1、本专利技术的目的在于解决现有技术中，并提供一种视觉跟踪和分析系统。
2、本专利技术所采用的具体技术方案如下：
3、一种视觉跟踪和分析系统，其包括：
4、视频指定模块，用于指定需要进行分析的监控视频；
5、提示输入模块，用于供用户输入提示文本，所述提示文本为描述用户的视频分析意图的语句；
6、第一跟踪检测模块，用于接收用户输入的提示文本，并从提示文本中提取分析术语和检测目标，然后将分析术语存储在语料库中，将检测目标输入轻量级检测
7、目标筛选模块，用于向用户显示第一跟踪检测模块推送的第一待选视频帧集合，并监听用户输入的感兴趣目标筛选指令，按照筛选指令对第一待选视频帧集合中各待选视频帧执行保留或删除操作，形成仅保留用户选定的感兴趣目标的第二待选视频帧集合；
8、第二跟踪检测模块，用于将需要第二待选视频帧集合中的视频帧重新输入精细化跟踪模型中，重新对其中的用户感兴趣目标进行精确检测，并基于精确检测结果进行帧间关联，并将每个感兴趣目标的关联信息储存在数据表中；
9、分析模块，用于获取第一分析模块从提示文本中提取的分析术语，并将每个分析术语映射为分析函数，然后利用映射得到的分析函数对所述数据表中存储的信息进行分析，获得分析结果返回给用户。
10、作为优选，所述视频指定模块中，用户通过本地上传或者在线选择的方式指定需要进行分析的监控视频。
11、作为优选，所述提示输入模块中，用户历史输入的提示文本均显示于软件的侧边栏中。
12、作为优选，所述第一跟踪检测模块中，通过文本检测模型从提示文本中提取分析术语和检测目标。
13、作为优选，所述第一跟踪检测模块中的轻量级检测模型采用grounding dino模型。
14、作为优选，所述第二跟踪检测模块中的精细化跟踪模型采用groundingsam模型。
15、作为优选，所述第二跟踪检测模块中，为用户提供选择在脱机或联机状态下运行精细化跟踪模型的选项。
16、作为优选，所述第二跟踪检测模块中，所述数据表中记录不同视频帧中感兴趣目标的中心坐标。
17、作为优选，所述分析模块中存储有预先构建的分析术语文本与分析函数的映射词典，通过调用该映射词典将分析术语映射为分析函数。
18、作为优选，所述视觉跟踪和分析系统整体运行于移动设备或云端上。
19、本专利技术相对于现有技术而言，具有以下有益效果：
20、本专利技术提供了一种视频跟踪与分析系统，旨在通过引入prompt功能提升用户体验并实现高效分析。该系统可以在低功耗硬件例如智能手机平板上运行轻量级模型，以实现便携式使用。
21、当前市场上缺乏具有智能化和用户友好性的跟踪应用程序，能够高效地进行分析，并能够实现自然语言交流。而本专利技术整合了轻量级深度学习模型和prompt功能，使得用户可以更轻松地选择跟踪目标和进行分析，而无需深入了解技术细节。这种方法不仅提高了用户体验，还提供了更高效的视频跟踪与分析解决方案。
本文档来自技高网...【技术保护点】
1.一种视觉跟踪和分析系统，其特征在于，包括：
2.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述视频指定模块中，用户通过本地上传或者在线选择的方式指定需要进行分析的监控视频。
3.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述提示输入模块中，用户历史输入的提示文本均显示于软件的侧边栏中。
4.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第一跟踪检测模块中，通过文本检测模型从提示文本中提取分析术语和检测目标。
5.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第一跟踪检测模块中的轻量级检测模型采用Grounding DINO模型。
6.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第二跟踪检测模块中的精细化跟踪模型采用GroundingSAM模型。
7.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第二跟踪检测模块中，为用户提供选择在脱机或联机状态下运行精细化跟踪模型的选项。
8.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第二跟踪检测模
9.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述分析模块中存储有预先构建的分析术语文本与分析函数的映射词典，通过调用该映射词典将分析术语映射为分析函数。
10.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述视觉跟踪和分析系统整体运行于移动设备或云端上。
...【技术特征摘要】
1.一种视觉跟踪和分析系统，其特征在于，包括：
2.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述视频指定模块中，用户通过本地上传或者在线选择的方式指定需要进行分析的监控视频。
3.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述提示输入模块中，用户历史输入的提示文本均显示于软件的侧边栏中。
4.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第一跟踪检测模块中，通过文本检测模型从提示文本中提取分析术语和检测目标。
5.如权利要求1所述的视觉跟踪和分析系统，其特征在于，所述第一跟踪检测模块中的轻量级检测模型采用grounding dino模型。
6.如权利要求1所述的视觉跟踪和分析系统，...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。