一种在线手绘表格单元格类型识别方法及装置制造方法及图纸

技术编号:41199329 阅读:23 留言:0更新日期:2024-05-07 22:26
本发明专利技术提出一种在线手绘表格单元格类型识别方法及装置,属于计算机模式识别领域,通过识别手表表格特有的线图和文本特征,提高识别的准确率;通过利用图注意力网络进行笔画的节点和边分类,再按照规则将笔画划分到不同的单元格,并通过时空‑图注意力网络根据单元格之间时空关系来识别单元格类型,充分利用了笔画的时空关系信息。

【技术实现步骤摘要】

本专利技术属于计算机模式识别领域,具体涉及一种在线手绘表格单元格类型识别方法及装置


技术介绍

1、表格作为一种高效的结构化信息表达方式,其存储的信息不仅高度凝练集中,且通过表格自身的结构可以将散乱、无序的输入信息变得逻辑、有序,得到高度结构化的输出信息。因此表格广泛应用于思路梳理、知识整理与交流讨论等创造性交互场景,有助于用户对散乱的信息做归类与整合。用户在进行这种创造性工作时常采用手绘的形式,方便捕捉灵感思路。

2、在线手绘表格单元格类型识别旨在为每个表格单元格分配一个标签,表明单元格在数据布局中呈现的功能角色,方便用户在创作时对表格信息进行直观理解。在许多场景中,用户对书写表格的实时反馈的要求很高,希望立即获得识别结果。为了实现这一点,必须进行动态笔画分类。也就是说,需要在写作过程中对笔画进行分类。但以往的方法基本上是静态的,即必须等待用户完成整个草图才能进行预测。然而,在实践中,更人性化的方法是在用户写作时进行实时预测。

3、目前对于表格单元格类型分类的主要解决方法大致有四种:基于端到端的符号神经网络分类方法、基于树的tra本文档来自技高网...

【技术保护点】

1.一种在线手绘表格单元格类型识别方法,其特征在于,包括以下步骤:

2.如权利要求1所述的方法,其特征在于,步骤1)中在构建结构图时,时间相邻的两个笔画在图中用边连接对应的两个节点,空间相邻且最小距离低于阈值的两个笔画在图中用边连接对应的两个节点。

3.如权利要求1所述的方法,其特征在于,步骤2)中将每个笔画的几何和局部上下文特征提取为节点特征,将笔画对的成对几何特征提取为边特征。

4.如权利要求1所述的方法,其特征在于,步骤2)中图注意力网络由一个共享层块和两个分支组成,共享层块包括三个由图注意力层构成的共享层,两个分支包括节点分类分支和边分类分支,...

【技术特征摘要】

1.一种在线手绘表格单元格类型识别方法,其特征在于,包括以下步骤:

2.如权利要求1所述的方法,其特征在于,步骤1)中在构建结构图时,时间相邻的两个笔画在图中用边连接对应的两个节点,空间相邻且最小距离低于阈值的两个笔画在图中用边连接对应的两个节点。

3.如权利要求1所述的方法,其特征在于,步骤2)中将每个笔画的几何和局部上下文特征提取为节点特征,将笔画对的成对几何特征提取为边特征。

4.如权利要求1所述的方法,其特征在于,步骤2)中图注意力网络由一个共享层块和两个分支组成,共享层块包括三个由图注意力层构成的共享层,两个分支包括节点分类分支和边分类分支,每个分支均由注意力层堆叠加一个softmax层构成。

5.如权利要求1所述的方法,其特征在于,步骤3)中将笔画分组到各个单元格所按照的规则包括:

6.如权利要求1所述的方法,其特征在于,步骤4...

【专利技术属性】
技术研发人员:黄进王丹琳付强田丰戴国忠
申请(专利权)人:中国科学院软件研究所
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1