本申请涉及人工智能技术领域,提供了一种基于智能眼镜的表格处理方法、装置、设备及介质,方法应用于智能眼镜,方法包括:获取表格处理终端上初始表格对应的图像数据,以及用户输入信息;通过预先训练的语言理解和生成模型,解析图像数据,得到初始表格的表格属性,并根据表格属性和所述用户输入信息,得到多个候选表格内容;通过预先配置的增强现实设备,将多个候选表格内容投影至表格处理终端;获取用户针对被投影的多个候选表格内容的操作指令,并将操作指令传输至表格处理终端,以更新初始表格得到目标表格。通过本申请方案,能够提高表格处理的效率和质量。
【技术实现步骤摘要】
本申请涉及人工智能,具体涉及一种基于智能眼镜的表格处理方法、装置、设备及介质。
技术介绍
1、在现有的办公环境中,用户多是在办公终端(例如台式电脑、笔记本电脑、平板电脑)上对表格进行添加或更改。对于一张打开的初始表格,用户需要花费较多的时间去了解该表格的主题以及需要将待输入的内容填在何处,这将会降低用户处理表格的工作效率。另外,不同的输入内容对应着不同的处理方式,部分用户会因经验的限制而对输入内容进行错误的操作,进而导致表格的处理结果质量很低。
2、因此,如何提高表格处理的效率和质量,是目前亟需解决的问题。
技术实现思路
1、鉴于以上所述现有技术的缺点,本申请的目的在于提供一种基于智能眼镜的表格处理方法、装置、设备及介质,用于解决现有技术中如何提高表格处理的效率和质量的问题。
2、为实现上述目的及其他相关目的,本申请提供一种基于智能眼镜的表格处理方法,所述方法应用于智能眼镜,所述方法包括:
3、获取表格处理终端上初始表格对应的图像数据,以及用户输入信息;
4、通过预先训练的语言理解和生成模型,解析所述图像数据,得到所述初始表格的表格属性,并根据所述表格属性和所述用户输入信息,得到多个候选表格内容;
5、通过预先配置的增强现实设备,将所述多个候选表格内容投影至所述表格处理终端;
6、获取用户针对被投影的所述多个候选表格内容的操作指令,并将所述操作指令传输至所述表格处理终端,以更新所述初始表格得到目标表格。
7、于本申请的一实施例中,获取表格处理终端上初始表格对应的图像数据,以及用户输入信息,还包括:
8、在用户开启所述表格处理终端并打开或创建所述初始表格时,通过预先配置的图像采集模块,获取所述初始表格对应的图像数据;
9、通过预先配置的语音识别模块,获取用户的语音输入内容,并对所述语音输入内容进行识别,得到所述用户输入信息。
10、于本申请的一实施例中,将所述多个候选表格内容投影至所述表格处理终端,包括:
11、获取所述多个候选表格内容对应的多个操作类型;
12、将所述多个候选表格内容和所述多个操作类型投影至所述初始表格中的预设位置处;和/或,
13、将所述多个候选表格内容和所述多个操作类型投影至所述预设位置的相邻位置。
14、于本申请的一实施例中,
15、所述表格属性包括表格主题、表格类型;
16、所述操作类型包括填充、生成图表、生成透视表。
17、于本申请的一实施例中,更新所述初始表格得到目标表格,包括:
18、根据所述操作指令,从所述多个候选表格内容中确定目标表格内容;
19、根据所述目标表格内容和所述目标表格内容对应的操作类型,对所述初始表格中的内容进行添加和/或替换。
20、于本申请的一实施例中,所述语言理解和生成模型包括:
21、输入层,用于接收所述图像数据和所述用户输入信息,并将所述图像数据和所述用户输入信息转换为词向量序列;
22、编码器,用于接收所述词向量序列,并对所述词向量序列进行自注意力机制和前馈网络层处理,得到编码后的隐状态词向量序列;
23、解码器,用于接收所述隐状态词向量序列,并对所述隐状态词向量序列进行自注意力机制、编解码机制和前馈网络层处理,得到解码后的词向量序列;
24、输出层,用于接收所述词向量序列,将所述词向量序列转换为所述多个候选表格内容,其中,所述多个候选表格内容为图像格式。
25、于本申请的一实施例中,还提供了一种基于智能眼镜的表格处理装置,所述装置包括:
26、智能眼镜,用于获取表格处理终端上初始表格对应的图像数据,以及用户输入信息,获取用户针对被投影的所述多个候选表格内容的操作指令,并将所述操作指令传输至所述表格处理终端,以更新所述初始表格得到目标表格;
27、图像采集模块,配置于所述智能眼镜上,所述图像采集模块用于在用户开启所述表格处理终端并打开或创建所述初始表格时,获取所述初始表格对应的图像数据;
28、语音识别模块,配置于所述智能眼镜上,所述语音识别模块用于获取用户的语音输入内容,并对所述语音输入内容进行识别,得到所述用户输入信息;
29、增强现实设备,配置于所述智能眼镜上,所述增强现实设备用于将所述多个候选表格内容投影至所述表格处理终端;
30、预先训练的语言理解和生成模型,用于解析所述图像数据,得到所述初始表格的表格属性,并根据所述表格属性和所述用户输入信息,得到多个候选表格内容。
31、于本申请的一实施例中,所述语言理解和生成模型包括:
32、输入层,用于接收所述图像数据和所述用户输入信息,并将所述图像数据和所述用户输入信息转换为词向量序列;
33、编码器,用于接收所述词向量序列,并对所述词向量序列进行自注意力机制和前馈网络层处理,得到编码后的隐状态词向量序列;
34、解码器,用于接收所述隐状态词向量序列,并对所述隐状态词向量序列进行自注意力机制、编解码机制和前馈网络层处理,得到解码后的词向量序列;
35、输出层,用于接收所述词向量序列,将所述词向量序列转换为所述多个候选表格内容,其中,所述多个候选表格内容为图像格式。
36、于本申请的一实施例中,还提供了一种电子设备,所述电子设备包括:
37、一个或多个处理器;
38、存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现如上所述的基于智能眼镜的表格处理方法。
39、于本申请的一实施例中,还提供了一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序被计算机的处理器执行时,使计算机执行如上所述的基于智能眼镜的表格处理方法。
40、本专利技术的有益效果:
41、本专利技术应用于智能眼镜,智能眼镜首先获取表格处理终端上初始表格对应的图像数据,以及用户输入信息;然后通过预先训练的语言理解和生成模型,解析所述图像数据,得到所述初始表格的表格属性,并根据所述表格属性和所述用户输入信息,得到多个候选表格内容;再通过预先配置的增强现实设备,将所述多个候选表格内容投影至所述表格处理终端;最后获取用户针对被投影的所述多个候选表格内容的操作指令,并将所述操作指令传输至所述表格处理终端,以更新所述初始表格得到目标表格。本专利技术中,用户佩戴智能眼镜后就能实时获取初始表格对应的图像数据和用户输入信息,用户输入信息可包括待输入内容和用户意图,将上述信息输入预先训练的语言理解和生成模型以得到候选表格内容,省去了用户对初始表格的表格属性和候选表格内容处理方式的分析步骤,提高了表格处理的效率;通过投影在表格处理终端上的候选表格内容直接下发操作指令,表格处理终端能够直接根据操作指令对表格进行更新,而无需用户本文档来自技高网
...
【技术保护点】
1.一种基于智能眼镜的表格处理方法,其特征在于,所述方法应用于智能眼镜,所述方法包括:
2.根据权利要求1所述的基于智能眼镜的表格处理方法,其特征在于,获取表格处理终端上初始表格对应的图像数据,以及用户输入信息,还包括:
3.根据权利要求1所述的基于智能眼镜的表格处理方法,其特征在于,将所述多个候选表格内容投影至所述表格处理终端,包括:
4.根据权利要求3所述的基于智能眼镜的表格处理方法,其特征在于:
5.根据权利要求4所述的基于智能眼镜的表格处理方法,其特征在于,更新所述初始表格得到目标表格,包括:
6.根据权利要求1所述的基于智能眼镜的表格处理方法,其特征在于,所述语言理解和生成模型包括:
7.一种基于智能眼镜的表格处理装置,其特征在于,所述装置包括:
8.根据权利要求7所述的基于智能眼镜的表格处理装置,其特征在于,所述语言理解和生成模型包括:
9.一种电子设备,其特征在于,所述电子设备包括:
10.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,当所述计算机程序被计算机的处理器执行时,使计算机执行如权利要求1至6中任一项所述的基于智能眼镜的表格处理方法。
...
【技术特征摘要】
1.一种基于智能眼镜的表格处理方法,其特征在于,所述方法应用于智能眼镜,所述方法包括:
2.根据权利要求1所述的基于智能眼镜的表格处理方法,其特征在于,获取表格处理终端上初始表格对应的图像数据,以及用户输入信息,还包括:
3.根据权利要求1所述的基于智能眼镜的表格处理方法,其特征在于,将所述多个候选表格内容投影至所述表格处理终端,包括:
4.根据权利要求3所述的基于智能眼镜的表格处理方法,其特征在于:
5.根据权利要求4所述的基于智能眼镜的表格处理方法,其特征在于,更新所述初始表格得到目标表格...
【专利技术属性】
技术研发人员:李志刚,柳宇翔,
申请(专利权)人:重庆长安汽车股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。