书面文档处理方法、装置、电子设备及计算机可读介质制造方法及图纸

本公开涉及一种书面文档处理方法、装置、电子设备及计算机可读介质。该方法包括：获取预设区域内的图文控制标识；基于所述图文控制标识确定目标交互指令和目标交互对象区域；获取所述目标交互对象区域内的书面文档的文档图像；基于所述目标交互指令对所述文档图像进行处理。本公开涉及的书面文档处理方法、装置、电子设备及计算机可读介质，能够在不依赖显示屏的情况下，实现用户的书面文档的多媒体交互功能，使用者还可以调用计算机多媒体资源进行互动。互动。互动。

【技术实现步骤摘要】
书面文档处理方法、装置、电子设备及计算机可读介质


[0001]本公开涉及计算机信息处理领域，具体而言，涉及一种书面文档处理方法、装置、电子设备及计算机可读介质。

技术介绍

[0002]多媒体、网课、远程办公等在线作业方式被越来越广泛的使用，由于传统在线作业方式极度依赖显示屏，对使用者视力影响较大，特别不利于儿童的眼部健康。利用点阵码技术的点读笔、智能笔等产品，虽然可以在纸质书面文档上进行操作以获取多媒体交互信息，但是需要配合特殊印刷的纸质书本使用，需要较高的印刷成本。
[0003]因此，需要一种新的书面文档处理方法、装置、电子设备及计算机可读介质。
[0004]在所述
技术介绍
部分公开的上述信息仅用于加强对本公开的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现思路

[0005]有鉴于此，本公开提供一种书面文档处理方法、装置、电子设备及计算机可读介质，能够在不依赖显示屏的情况下，实现用户的书面文档的多媒体交互功能，使用者还可以调用计算机多媒体资源进行互动。
[0006]本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
[0007]根据本公开的一方面，提出一种书面文档处理方法，该方法包括：获取预设区域内的图文控制标识；基于所述图文控制标识确定目标交互指令和目标交互对象区域；获取所述目标交互对象区域内的书面文档的文档图像；基于所述目标交互指令对所述文档图像进行处理。
[0008]在本公开的一种示例性实施例中，还包括：基于一个或多个图文控制标识和其对应的交互指令生成交互指令映射规则；和/或基于一个或多个图文控制标识和其对应的辅助控制指令生成辅助控制指令映射规则。
[0009]在本公开的一种示例性实施例中，还包括：获取预设区域内的图文控制标识；基于所述图文控制标识在辅助控制指令映射规则中提取目标辅助控制指令；基于所述目标辅助控制指令对处理过程或对参与处理过程的多媒体设备进行控制。
[0010]在本公开的一种示例性实施例中，基于所述图文控制标识和辅助控制指令映射规则生成目标辅助控制指令，还包括：在所述图文控制标识中包括待输入参数时，根据预设的方式输入参数信息，所述参数包括语音数据、文字数据、图像数据、手势数据中至少一者。
[0011]在本公开的一种示例性实施例中，获取预设区域内的图文控制标识，包括：获取放置于预设区域内的标识物体的物体图像，所述预设区域位于成像装置的成像范围内；对所述标识物体的物体图像进行图像识别以生成所述图文控制标识。
[0012]在本公开的一种示例性实施例中，对所述标识物体的标识物体图像进行图像识别
以生成所述图文控制标识，包括：对所述标识物体的物体图像进行图像识别生成识别结果；剔除所述识别结果中的无效标识物体以生成所述图文控制标识。
[0013]在本公开的一种示例性实施例中，基于所述图文控制标识确定目标交互指令和目标交互对象区域，包括：根据所述图文控制标识在所述交互指令映射规则中提取目标交互指令；基于所述目标交互指令确定所述目标交互对象区域。
[0014]在本公开的一种示例性实施例中，基于所述目标交互指令对所述文档图像进行处理，包括：基于所述目标交互指令对所述文档图像进行图像识别以生成所述文档信息；对所述文档信息进行数据处理。
[0015]在本公开的一种示例性实施例中，基于所述目标交互指令对所述文档图像进行图像识别以生成所述文档信息，包括：基于所述目标交互指令确定目标区域；对所述文档图像中的目标区域中的图像进行图像识别以生成所述文档信息。
[0016]在本公开的一种示例性实施例中，基于所述目标交互指令对所述文档图像进行处理，还包括：在所述图文控制标识需要输入参数时，根据预设的方式输入参数信息，所述参数包括语音数据、文字数据、图像数据、手势数据中至少一者。
[0017]在本公开的一种示例性实施例中，还包括：基于处理结果，生成多媒体信息；基于所述多媒体信息进行多媒体操作。
[0018]在本公开的一种示例性实施例中，基于所述多媒体信息进行多媒体操作，包括：基于所述图文控制标识确定展示区域；将所述处理结果投影在所述展示区域。
[0019]在本公开的一种示例性实施例中，还包括：对所述文档图像和/或投影在所述展示区的投影图像进行矫正。
[0020]在本公开的一种示例性实施例中，对所述文档图像和/或投影在所述展示区的投影图像进行矫正，包括：获取所述文档图像对应的书面文档上的已知点的第一相对位置；获取所述文档图像中所述已知点的第二相对位置；基于所述第一相对位置和所述第二相对位置确定所述书面文档和所述文档图像之间的畸变矫正映射；基于所述畸变矫正映射对所述文档图像进行矫正。
[0021]在本公开的一种示例性实施例中，对所述文档图像和/或投影在所述展示区的投影图像进行矫正，还包括：将所述投影图像叠加在矫正之后的文档图像上生成叠加图像；根据所述叠加图像确定所述投影图像的偏离调整映射；基于所述偏离调整映射对所述投影图像进行矫正。
[0022]根据本公开的一方面，提出一种书面文档处理方法，该方法包括：由图文控制标识区域获取图文控制标识；由交互对象区域获取书面文档的文档图像；基于所述图文控制标识确定目标交互指令；基于所述目标交互指令对所述文档图像进行处理。
[0023]在本公开的一种示例性实施例中，还包括：基于一个或多个图文控制标识、至少一个图文控制标识区域和其对应的交互指令生成至少一个交互指令映射规则；和/或基于一个或多个图文控制标识、至少一个图文控制辅助区域和其对应的辅助控制指令生成至少一个辅助控制指令映射规则。
[0024]在本公开的一种示例性实施例中，还包括：由图文控制辅助区域获取图文控制标识；基于所述图文控制标识和其对应的图文控制辅助区域的编号在所述至少一个辅助控制指令映射规则中提取目标辅助控制指令；基于所述目标辅助控制指令对处理过程或对参与
处理过程的多媒体设备进行控制。
[0025]在本公开的一种示例性实施例中，基于所述图文控制标识和其对应的图文控制辅助区域的编号在所述至少一个辅助控制指令映射规则中提取目标辅助控制指令，还包括：在所述图文控制标识中包括待输入参数时，根据预设的方式输入参数信息，所述参数包括语音数据、文字数据、图像数据、手势数据中至少一者。
[0026]在本公开的一种示例性实施例中，还包括：对所述图文控制标识区域和/或所述交互对象区域和/或所述图文控制辅助区域的区域范围进行调整；其中，所述图文控制标识区域、所述交互对象区域、所述图文控制辅助区域位于成像装置的成像范围内。
[0027]在本公开的一种示例性实施例中，对所述图文控制标识区域和/或交互对象区域和/或图文控制辅助区域的区域范围进行调整，包括：获取放置在成像范围内的用于标记区域范围的标识物体的物体图像；对所述物体图像进行图像识别以生成用于标记区域范围的图文控制标识；根据所述用于标记区域范围的图文本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种书面文档处理方法，其特征在于，包括：获取预设区域内的图文控制标识；基于所述图文控制标识确定目标交互指令和目标交互对象区域；获取所述目标交互对象区域内的书面文档的文档图像；基于所述目标交互指令对所述文档图像进行处理。2.如权利要求1所述的方法，其特征在于，还包括：基于一个或多个图文控制标识和其对应的交互指令生成交互指令映射规则；和/或基于一个或多个图文控制标识和其对应的辅助控制指令生成辅助控制指令映射规则。3.如权利要求2所述的方法，其特征在于，还包括：获取预设区域内的图文控制标识；基于所述图文控制标识在辅助控制指令映射规则中提取目标辅助控制指令；基于所述目标辅助控制指令对处理过程或对参与处理过程的多媒体设备进行控制。4.如权利要求1所述的方法，其特征在于，获取预设区域内的图文控制标识，包括：获取放置于预设区域内的标识物体的物体图像，所述预设区域位于成像装置的成像范围内；对所述标识物体的物体图像进行图像识别以生成所述图文控制标识。5.如权利要求2所述的方法，其特征在于，基于所述图文控制标识确定目标交互指令和目标交互对象区域，包括：根据所述图文控制标识在所述交互指令映射规则中提取目标交互指令；基于所述目标交互指令确定所述目标交互对象区域。6.如权利要求1所述的方法，其特征在于，基于所述目标交互指令对所述文档图像进行处理，包括：基于所述目标交互指令对所述文档图像进行图像识别以生成所述文档信息；对所述文档信息进行数据处理。7.如权利要求6所述的方法，其特征在于，基于所述目标交互指令对所述文档图像进行处理，还包括：在所述图文控制标识需要输入参数时，根据预设的方式输入参数信息，所述参数包括语音数据、文字数据、图像数据、手势数据中至少一者。...

【专利技术属性】
技术研发人员：杨宏伟，李蕊，
申请(专利权)人：杨宏伟，
类型：发明
国别省市：