一种用于中餐宴会台面摆台智能评分的单目视觉定位方法技术

本发明专利技术涉及一种用于中餐宴会台面摆台智能评分的单目视觉定位方法，所述方法包括：1：根据中餐宴会台面设计匹配的黑白标定板；2：建立中餐宴会台面摆台智能评分的单目视觉定位方法的坐标系模型；3：将黑白标定板水平搁置在中餐宴会台面上的空白处，然后采集N张台面摆台图像；4：对拍摄台面摆台图像的相机做标定，得到相机内参数和畸变参数，以及每幅图像的旋转向量和平移向量；5：使用逆透视投影变换算法，将台面摆台图像变换为台面正俯视图，以满足单套餐具识别和定位的需求；6：使用SURF特征点检测算法进行图像全局配准，以满足多套餐具组别之间相对位置计算的需求。该方法可以解决从不同视觉下的台面摆台图像中测算餐具间真实距离的难题。

【技术实现步骤摘要】
一种用于中餐宴会台面摆台智能评分的单目视觉定位方法
本专利技术属于旅游与酒店管理专业领域，具体涉及一种应用机器视觉和人工智能理论与方法对中餐宴会台面摆台效果进行智能评分的单目视觉定位方法。
技术介绍
旅游与酒店管理，是全球十大热门行业之一。伴随着中国经济发展和人民生活消费重心从“吃住行”向“游养乐”过渡和升级的进程，国内对旅游与酒店管理专业人才的需求也在日益增大。中、西餐宴会台面摆台是旅游与酒店管理专业学生在人才培养过程中必须掌握的基本功，国内大多数职业技术学院都有针对该专业学生开设的宴会台面摆台主题的实习实训课程和技能大赛等。然而，目前存在的一个突出问题是：学生摆台效果的评判都是依靠实训教师或大赛评委通过目测和工具测量完成的。这种全人工、手动测量的方式存在以下弊病：①费力，工作量大，特别是需要一次评价数十个学生的摆台效果时，教师或评委的测量劳动量是非常繁重的；②费时，测量和打分评价耗费时间长，不能立即得到摆台效果的评分结果，既不适应各类技能大赛现场应当场给出比赛结果的需要，也无法满足现代教学方式中要求课堂上对学生的摆台结果进行点评和反馈提高的要求；③精度低，由于摆台效果评分细则中对距离要求精确到毫米级，而人工测量很难达到这样的精度要求；④稳定性差，且受人的主观性影响严重，同一个学生的摆台结果，不同的教师或评委可能给出不同的评分。一种可行的解决方案是将图像处理和人工智能技术引入旅游与酒店管理专业的台面摆台效果评判中，彻底改变原来完全依靠人工评判的现状，也克服原有评判方式存在的诸多弊病。要实现中、西餐宴会台面摆台效果的智能评分，除了餐具识别之外，另一个重点和难点问题就是如何根据不同视角下的台面摆台图像测算餐具间的真实距离。现有视觉定位方法主要分为立体视觉定位和单目视觉定位两大类，其中立体视觉定位算法理论复杂，求解计算时间长，难以满足实时性要求。已有学者公开了应用于其它问题中的单目视觉定位方法：专利技术专利(申请号“CN201210144082”，名称“基于单目视觉的道路边缘检测及粗定位方法”)针对连续的具有不同边缘特征的道路提供了两种道路边缘检测方法，以及得到道路边缘之后的粗定位方法，用于计算机器人当前位置和道路边缘的垂直距离以及航向角；专利技术专利(申请号“CN201210268223”，名称“基于单目视觉定位的路面图像采集方法及采集系统”)针对需要对路面图像实施快速准确拼接的应用场合，提出了一种基于单目视觉定位的路面图像采集方法和系统。上述单目视觉定位方法都是针对不同的具体问题提出的解决方案，不具有通用性，显然也不适合对中、西餐宴会台面摆台效果智能评分时的个性化需求，因而需要专利技术新的方法解决餐具距离测算问题。
技术实现思路
本专利技术的目的在于提供一种用于中餐宴会台面摆台智能评分的单目视觉定位方法，解决从不同视觉下的台面摆台图像中测算餐具间真实距离的难题。为了达到上述目的，本专利技术所采用的技术方案是：一种用于中餐宴会台面摆台智能评分的单目视觉定位方法，其特征在于，所述单目视觉定位方法包括如下步骤：步骤1：根据中餐宴会台面设计匹配的黑白标定板，设计内容包括标定板的颜色、形状和尺寸；步骤2：建立中餐宴会台面摆台智能评分的单目视觉定位方法的坐标系模型；步骤3：将黑白标定板水平搁置在中餐宴会台面上的空白处，然后在台面上方能拍摄到台面全貌的范围内，采集N张台面摆台图像，N的数量大于等于7；步骤4：对拍摄台面摆台图像的相机做标定，得到相机内参数和畸变参数，以及每幅图像的旋转向量和平移向量；所述标定方法中采用标定板在中餐宴会台面上固定不动，相机多角度旋转拍摄的方式；步骤5：使用逆透视投影变换算法，将台面摆台图像变换为台面正俯视图，以满足单套餐具识别和定位的需求；步骤6：使用SURF特征点检测算法进行图像全局配准，以满足多套餐具组别之间相对位置计算的需求。进一步地，步骤4中，所述标定方法的步骤如下：步骤401：先提取指定台面摆台图像中的角点坐标，然后计算相应的精确的角点坐标；步骤402：判断是否对台面摆台图像集中的所有图像循环执行完毕，是则继续下一步，否则跳转至步骤401；步骤403：为相机参数分配内存；步骤404：计算标定板上所有角点的实际物理坐标；步骤405：计算摄像机的内外参数矩阵；步骤406：在已获得相机内外参数矩阵的前提下，对台面摆台图像集中的所有图像做畸变校正。进一步地，步骤6中，所述进行图像全局配准的步骤如下：步骤601：应用SURF算子检测两幅台面摆台图像中的特征点，其中Hessian矩阵判别式的阈值设置为400；步骤602：使用一个多维向量来描述一个特征点，并以此方法描述台面摆台图像中所有检测到的特征点；步骤603：通过按比例提取排名靠前的匹配点来实现最优特征点筛选，并在两幅台面摆台图像中成对绘制最优匹配点；步骤604：计算单映射矩阵，得到两幅台面摆台图像中的一幅到另一幅的投影矩阵；步骤605：对两幅台面摆台图像中的一幅进行透视变换后拼接到另一幅图像中，并将拼接后的图像作为多套餐具组别之间相对位置计算的依据。进一步地，步骤1中，所设计的标定板由黑白两种颜色的正方形格子组成，每个正方形的边长为54毫米；左上角的第1个格子颜色为黑色，然后依次黑白色交替；横向格子数目为7个，纵向格子数目为5个；横向角点数目为6个，纵向角点数目为4个；整个标定板可以布置在一张常规A3幅面的纸张上。进一步地，步骤2中，所建立的坐标系模型包括4个坐标系，分别为平面世界坐标系、摄像机坐标系、图像坐标系和像素坐标系。与现有技术相比，本专利技术的有益效果是：本专利技术将单目视觉定位方法引入中餐宴会台面摆台智能评分过程中，解决了从不同视觉下的台面摆台图像中测算餐具间真实距离的难题，为机器视觉和人工智能等新技术在该领域的顺利应用扫清了障碍，进而实现了中餐宴会台面摆台效果评分的自动化、快速化、客观化和智能化，彻底变革该细分领域内完全依靠人工评判的现状。所述的单目视觉定位方法具有理论相对简单，求解计算快，实时性好等明显优势，且硬件设备成本低，使用方便，有利于其在旅游与酒店管理专业相关的实习实训课程和技能大赛中推广应用。附图说明图1为本专利技术设计的黑白标定板图像。图2为应用本专利技术的对拍摄台面摆台图像相机的标定方法之后，对标定误差进行评估时得到的结果图像。图3为本专利技术提供的实施例中的进行全局配准前的图像一。图4为本专利技术提供的实施例中的进行全局配准前的图像二。图5为本专利技术提供的实施例中的使用SURF算子检测图像一和图像二中的特征点，并进行特征点筛选之后绘制出的最优匹配点图像。图6为本专利技术提供的实施例中的根据计算得到的单映射矩阵，对图像二进行透视变化，变换到图像一的坐标系之后的结果图像。图7为本专利技术提供的实施例中的待拼接的左右半幅图像，分别为图像一的左半幅和图像二变换后的右半幅图像。图8为本专利技术提供的实施例中的拼接完成的图像。图9为对本专利技术设计的黑白标定板上部分角点编号示意图。图10为应用本专利技术的单目视觉定位方法测算黑白标定板上角点之间物理距离的结果图像。具体实施方式为了便于本领域普通技术人员理解和实施本专利技术，下面结合实施例对本专利技术作进一步的详细描述，应当理解，此处所描述的实施示例仅用于说明和解释本专利技术，并不用于限定本专利技术。本专利技术提供一种用于中餐宴会台面摆台智能评本文档来自技高网...

【技术保护点】
一种用于中餐宴会台面摆台智能评分的单目视觉定位方法，其特征在于，所述单目视觉定位方法包括如下步骤：步骤1：根据中餐宴会台面设计匹配的黑白标定板，设计内容包括标定板的颜色、形状和尺寸；步骤2：建立中餐宴会台面摆台智能评分的单目视觉定位方法的坐标系模型；步骤3：将黑白标定板水平搁置在中餐宴会台面上的空白处，然后在台面上方能拍摄到台面全貌的范围内，采集N张台面摆台图像，N的数量大于等于7；步骤4：对拍摄台面摆台图像的相机做标定，得到相机内参数和畸变参数，以及每幅图像的旋转向量和平移向量；所述标定方法中采用标定板在中餐宴会台面上固定不动，相机多角度旋转拍摄的方式；步骤5：使用逆透视投影变换算法，将台面摆台图像变换为台面正俯视图，以满足单套餐具识别和定位的需求；步骤6：使用SURF特征点检测算法进行图像全局配准，以满足多套餐具组别之间相对位置计算的需求。

【技术特征摘要】
1.一种用于中餐宴会台面摆台智能评分的单目视觉定位方法，其特征在于，所述单目视觉定位方法包括如下步骤：步骤1：根据中餐宴会台面设计匹配的黑白标定板，设计内容包括标定板的颜色、形状和尺寸；步骤2：建立中餐宴会台面摆台智能评分的单目视觉定位方法的坐标系模型；步骤3：将黑白标定板水平搁置在中餐宴会台面上的空白处，然后在台面上方能拍摄到台面全貌的范围内，采集N张台面摆台图像，N的数量大于等于7；步骤4：对拍摄台面摆台图像的相机做标定，得到相机内参数和畸变参数，以及每幅图像的旋转向量和平移向量；所述标定方法中采用标定板在中餐宴会台面上固定不动，相机多角度旋转拍摄的方式；步骤5：使用逆透视投影变换算法，将台面摆台图像变换为台面正俯视图，以满足单套餐具识别和定位的需求；步骤6：使用SURF特征点检测算法进行图像全局配准，以满足多套餐具组别之间相对位置计算的需求。2.如权利要求1所述的用于中餐宴会台面摆台智能评分的单目视觉定位方法，其特征在于，步骤4中，所述标定方法的步骤如下：步骤401：先提取指定台面摆台图像中的角点坐标，然后计算相应的精确的角点坐标；步骤402：判断是否对台面摆台图像集中的所有图像循环执行完毕，是则继续下一步，否则跳转至步骤401；步骤403：为相机参数分配内存；步骤404：计算标定板上所有角点的实际物理坐标；步骤405：计算摄像机的内外参数矩阵；步骤406：在已获得相机内外参数矩阵的前提下，对台...

【专利技术属性】
技术研发人员：曾亮，常雨芳，王粟，付波，武明虎，朱飞，易梦云，
申请(专利权)人：湖北工业大学，
类型：发明
国别省市：湖北,42