【技术实现步骤摘要】
本专利技术涉及医疗器械烘干装置，具体为一种乐器演奏时视线追踪方法和装置。
技术介绍
1、在乐器演奏过程中，演奏者的视线对于演奏质量有极大影响，乐器演奏中视线对演奏的影响多方面且重要。合理运用视线可以提高演奏质量，增强情感表达和沟通效果，以及帮助演奏者在教学和学习过程中取得更好的效果。同时，视线数据对音乐研究具有重要意义。为了捕捉演奏者在演奏过程中的视线变化，装置需要具备高精度和低延迟的视线追踪能力，要求视线追踪算法具有较高的计算效率和准确性，以适应演奏场景的实时性需求；由于不同乐器的演奏方式和演奏者的个体差异，装置需要具备较强的通用性和适应性；考虑到演奏者在舞台表演、排练和练习等场景中的实际需求，视线追踪装置需要具备较高的便捷性，装置应在使用过程中不会对演奏者产生过多负担或影响演奏者的正常演奏。
2、一般的投影辅助演奏装置大多用于键盘类乐器，如钢琴等，此类产品不存在视线错位的问题，但是弦乐器由于琴弦与琴面之间存在一定距离，因此会出现视线错位的情况，为此，我们提出一种乐器演奏时视线追踪方法和装置。
技术实现思路
1、本专利技术的目的在于提供一种乐器演奏时视线追踪方法和装置，解决了现有的问题。
2、为实现上述目的，本专利技术提供如下技术方案：一种乐器演奏时视线追踪装置，包括支撑架，以及设置在支撑架上方的视线追踪装置和支撑架；
3、所述视线追踪装置包括：
4、双目摄像头用于采集坐在古筝前的演奏者人像图像；
5、人体定位单元可用于
6、人脸识别单元用于对人脸进行精确识别和定位；
7、三维重建单元可用于通过双目摄像头解析出的人体信息，重构出人体在实际空间中的位置；
8、视线解析单元用于收集人脸精准定位，以及根据人眼及瞳孔位置，计算演奏者视线方向，同时根据三维空间信息，计算演奏者视线在古筝上的落点；
9、通信单元可用于将计算得到的演奏者视线信息发送至投影装置；
10、红外摄像头可用以辅助双目摄像头在光照不佳或光照条件较为辅助的场景下进行人眼及瞳孔的识别与定位。
11、优选的，所述人体定位单元的人像图像包括人脸面部图像以及人体躯干图像。
12、优选的，所述人脸识别单元可用于解析图像中人脸的位置，朝向以及五官的分布，其中重点是对人眼及瞳孔的识别，获取人眼以及瞳孔的位置信息。
13、一种乐器演奏时视线追踪方法，包括以下步骤：
14、s1、双目摄像头采集坐在古筝前的演奏者人像图像，以及通过红外摄像头辅助双目摄像头在光照不佳或光照条件较为辅助的场景下进行人眼及瞳孔的识别与定位；
15、s2、通过人体定位单元接收由双目摄像头传输的人像信息，并使用包含基于深度神经网络的人体骨架识别算法定位图像中人体位置，并进一步定位图像中人脸位置；
16、s3、使用人脸识别单元解析图像中人脸的位置，朝向以及五官的分布，其中重点是对人眼及瞳孔的识别，获取人眼以及瞳孔的位置信息，以及通过三维重建单元重构出人体在实际空间中的位置；
17、s4、使用视线解析单元根据人眼及瞳孔位置，计算演奏者视线方向，同时根据三维空间信息，计算演奏者视线在古筝上的落点；
18、s5、通信单元将计算得到的演奏者视线信息发送至投影装置，投影装置根据视线方向调整投影角度和位置，使得人眼、演奏位置及位置标记位于同一直线；
19、s6、投影装置将各类演奏引导信息投影至古筝。
20、优选的，所述引导信息包括：投影在琴面的文字指示信息；投影在琴弦的琴弦指示信息；投影在琴面的演奏位置标记。
21、与现有技术相比，本专利技术的有益效果如下：
22、本专利技术使用摄像头获取演奏者面部信息，并通过人工智能算法获取人眼信息，实现人眼视线追踪。
23、本专利技术使用摄像头获取演奏者面部信息，并通过人工智能算法获取人眼信息，实现人眼视线追踪，以此矫正投影在古筝上的位置，以实现最佳的视觉效果。
24、本专利技术针对乐器演奏场景进行了优化，可以更好地适应演奏者在演奏过程中的头部和眼球运动，以及通过人工智能技术分析不同乐器演奏中演奏者视线变化规律，以提高识别精度与准确率，并提高不同演奏场景下使用的便利性，确保不会影响演奏者的正常演奏。
25、本专利技术的视线追踪模块通过人工智能算法实时计算演奏者视线，调整投影角度与位置，确保演奏者眼睛、投影点及引导弹奏点位于同一直线。
本文档来自技高网...【技术保护点】
1.一种乐器演奏时视线追踪装置，其特征在于，包括支撑架(3)，以及设置在支撑架(3)上方的视线追踪装置(2)和支撑架(3)；
2.根据权利要求1所述的一种乐器演奏时视线追踪方法和装置，其特征在于，所述人体定位单元(202)的人像图像包括人脸面部图像以及人体躯干图像。
3.根据权利要求1所述的一种乐器演奏时视线追踪方法和装置，其特征在于，所述人脸识别单元(203)可用于解析图像中人脸的位置，朝向以及五官的分布，其中重点是对人眼及瞳孔的识别，获取人眼以及瞳孔的位置信息。
4.一种乐器演奏时视线追踪方法，其特征在于，包括以下步骤：
5.根据权利要求4所述的一种乐器演奏时视线追踪方法，其特征在于，所述引导信息包括：投影在琴面的文字指示信息；投影在琴弦的琴弦指示信息；投影在琴面的演奏位置标记。
【技术特征摘要】
1.一种乐器演奏时视线追踪装置，其特征在于，包括支撑架(3)，以及设置在支撑架(3)上方的视线追踪装置(2)和支撑架(3)；
2.根据权利要求1所述的一种乐器演奏时视线追踪方法和装置，其特征在于，所述人体定位单元(202)的人像图像包括人脸面部图像以及人体躯干图像。
3.根据权利要求1所述的一种乐器演奏时视线追踪方法和装置，其特征在于，所述人脸...
【专利技术属性】
技术研发人员：曾歆，
申请(专利权)人：江苏音律未来乐器科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。