【技术实现步骤摘要】
【国外来华专利技术】分析外科手术视频的系统和方法
[0001]相关申请的交叉引用
[0002]本申请基于并要求2019年2月21日提交的美国临时专利申请No.62/808,500、2019年2月21日提交的美国临时专利申请No.62/808,512、2019年4月24日提交的美国临时专利申请No.62/838,066、2020年1月13日提交的美国临时专利申请No.62/960,466以及2020年1月29日提交的美国临时专利申请No.62/967,283的优先权的权益。前述申请的内容通过全部引用而并入本文。
[0003]所公开的实施方式总体上涉及用于分析外科手术的视频的系统和方法。
技术介绍
[0004]在准备外科手术时,外科医生观看描绘某些外科手术事件(包括可能具有某些特征的事件)的视频短片可能是有益的。另外,在外科手术期间,拍摄和分析视频以向外科医生提供各种类型的决策支持可能是有所帮助的。此外,分析外科手术视频以促进术后活动可能是有所帮助的。
[0005]因此,需要非常规的方法来高效且有效地分析外科手术视频,使得外 ...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种用于审查外科手术视频的计算机实现方法,所述方法包括:访问外科手术的至少一个视频;使所述至少一个视频输出以供显示;在被输出以供显示的所述至少一个视频上叠加外科手术时间线,其中,所述外科手术时间线包括标识外科手术阶段、术中外科手术事件以及决策制定节点中的至少一项的标记;以及使外科医生能够在观看所述至少一个视频的回放时选择所述外科手术时间线上的一个或更多个标记,并由此使所述视频的显示跳至与所选择的标记相关联的位置。2.根据权利要求1所述的方法,其中,所述标记是通过颜色或危急级别中的至少一项来编码的。3.根据权利要求1所述的方法,其中,所述外科手术时间线包括标识所述外科手术的部分的文本信息。4.根据权利要求1所述的方法,其中,所述至少一个视频包括以手术时间顺序排列的、来自多个外科手术的短片汇编,其中,所述短片汇编描绘了来自所述多个外科手术的并发症;并且其中,所述一个或更多个标记与所述多个外科手术相关联并且被显示在公共时间线上。5.根据权利要求1所述的方法,其中,所述一个或更多个标记包括决策制定节点标记,所述决策制定节点标记对应于所述外科手术的决策制定节点,并且所述决策制定节点标记的选择使得外科医生能够观看来自两个或更多个对应的其它外科手术的两个或更多个另选视频片段;并且其中,所述两个或更多个视频片段呈现了不同的行为。6.根据权利要求1所述的方法,其中,所述一个或更多个标记包括与所述外科手术的决策制定节点相对应的决策制定节点标记;并且其中,所述决策制定节点标记的选择造成与所选择的决策制定节点标记相关的一个或更多个另选的可能决策的显示。7.根据权利要求6所述的方法,其中,与所述一个或更多个另选的可能决策相关联的一个或更多个估计结果是结合所述一个或更多个另选的可能决策的显示来显示的。8.根据权利要求7所述的方法,其中,所述一个或更多个估计结果是分析包括相应的相似决策制定节点的多个过去外科手术视频的结果。9.根据权利要求6所述的方法,其中,与在相应的相似过去决策制定节点进行的过去决策的分布相关的信息是结合所述另选的可能决策的显示来显示的。10.根据权利要求9所述的方法,其中,所述外科手术的所述决策制定节点与第一患者相关联,并且所述相应的相似过去决策制定节点是从与如下患者相关联的过去外科手术中选择的:所述患者具有与所述第一患者相似的特征。11.根据权利要求9所述的方法,其中,所述外科手术的所述决策制定节点与第一医疗专业人员相关联,并且所述相应的相似过去决策制定节点是从与如下的医疗专业人员相关联的过去外科手术中选择的:所述医疗专业人员具有与所述第一医疗专业人员相似的特征。12.根据权利要求9所述的方法,其中,所述外科手术的所述决策制定节点与所述外科手术中的第一在先事件相关联,并且所述相似过去决策制定节点是从包括如下在先事件的过去外科手术中选择的:所述在先事件是与所述第一在先事件相似的。
13.根据权利要求1所述的方法,其中,所述标记包括术中外科手术事件标记,术中外科手术事件标记的选择使得所述外科医生能够观看来自不同的外科手术的另选视频片段,并且其中,所述另选视频片段呈现了处理所选的术中外科手术事件的不同方式。14.根据权利要求1所述的方法,其中,所述视频输出上的叠加是在所显示的视频中描绘的所述外科手术结束之前显示的。15.根据权利要求8所述的方法,其中,所述分析是基于与所述多个过去外科手术视频相关联的一个或更多个电子医疗记录的。16.根据权利要求8所述的方法,其中,所述相应的相似决策制定节点根据相似性指标与所述外科手术的所述决策制定节点相似。17.根据权利要求8所述的方法,其中,所述分析包括使用计算机视觉算法的实现。18.根据权利要求1所述的方法,其中,所述标记与术中外科手术事件相关,并且所述术中外科手术事件标记的选择使得所述外科医生能够观看来自不同的外科手术的另选视频片段。19.一种审查外科手术视频的系统,所述系统包括:至少一个处理器,所述至少一个处理器被配置成:访问外科手术的至少一个视频;使所述至少一个视频输出以供显示;在被输出以供显示的所述至少一个视频上叠加外科手术时间线,其中,所述外科手术时间线包括标识外科手术阶段、术中外科手术事件以及决策制定节点中的至少一项的标记;以及使得外科医生能够在观看所述至少一个视频的回放时选择所述外科手术时间线上的一个或更多个标记,并由此使所述视频的显示跳至与所选择的标记相关联的位置。20.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行使得能够实现外科手术视频审查的操作,所述操作包括:访问外科手术的至少一个视频;使所述至少一个视频输出以供显示;在被输出以供显示的所述至少一个视频上叠加外科手术时间线,其中,所述外科手术时间线包括标识外科手术阶段、术中外科手术事件以及决策制定节点中的至少一项的标记;以及使得外科医生能够在观看所述至少一个视频的回放时选择所述外科手术时间线上的一个或更多个标记,并由此使所述视频的显示跳至与所选择的标记相关联的位置。21.一种用于视频编索引的计算机实现方法,所述方法包括:访问要编索引的视频短片,所述要编索引的视频短片包括特定外科手术的短片;对所述视频短片进行分析,以识别与所述特定外科手术的外科手术阶段相关联的视频短片位置;生成与所述外科手术阶段相关联的阶段标签;将所述阶段标签与所述视频短片位置相关联;对所述视频短片进行分析,以识别所述外科手术阶段内的特定术中外科手术事件的事
件位置;将事件标签与所述特定术中外科手术事件的所述事件位置相关联;存储与所述特定术中外科手术事件相关联的事件特征;在包含其它外科手术的附加视频短片的数据结构中,将所述特定外科手术的所述视频短片的至少一部分与所述阶段标签、所述事件标签以及所述事件特征相关联,其中,所述数据结构还包括与所述其它外科手术中的一个或更多个外科手术相关联的相应的阶段标签、相应的事件标签以及相应的事件特征;使得用户能够通过选择用于显示的视频短片的选定阶段标签、选定事件标签以及选定事件特征来访问所述数据结构;在外科手术视频短片的所述数据结构中执行匹配所述至少一个选定阶段标签、选定事件标签以及选定事件特征的查找,以识别所存储的视频短片的匹配子集;以及使所存储的视频短片的所述匹配子集向所述用户显示,由此使得所述用户能够观看至少一个术中外科手术事件的共享所述选定事件特征的外科手术短片,同时略过缺少所述选定事件特征的视频短片的回放。22.根据权利要求21所述的方法,其中,使得所述用户能够观看至少一个术中外科手术事件的具有所述选定事件特征的外科手术短片,同时略过选定外科手术事件的缺少所述选定事件特征的部分的回放的步骤包括:向所述用户顺序地呈现多个术中外科手术事件的外科手术短片的共享所述选定事件特征的部分,同时略过选定外科手术事件的缺少所述选定事件特征的部分的回放。23.根据权利要求21所述的方法,其中,所存储的事件特征包括所述外科手术事件的不利结果,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看选定不利结果的外科手术短片,同时略过缺少所述选定不利结果的外科手术事件的回放。24.根据权利要求21所述的方法,其中,所存储的事件特征包括外科手术技术,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看选定外科手术技术的外科手术短片,同时略过不与所述选定外科手术技术相关联的外科手术短片的回放。25.根据权利要求21所述的方法,其中,所存储的事件特征包括外科医生技能水平,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看展示选定外科医生技能水平的短片,同时略过缺少所述选定外科医生技能水平的短片的回放。26.根据权利要求21所述的方法,其中,所存储的事件特征包括实体患者特征,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看展示选定实体患者特征的短片,同时略过缺少所述选定实体患者特征的短片的回放。27.根据权利要求21所述的方法,其中,所存储的事件特征包括具体外科医生的身份,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看展示选定外科医生的活动的短片,同时略过缺少所述选定外科医生的活动的短片的回放。28.根据权利要求21所述的方法,其中,所存储的事件特征包括生理反应,并且其中,使所述匹配子集被显示的步骤包括:使得所述用户能够观看展示选定生理反应的短片,同时略过缺少所述选定生理反应的短片的回放。29.根据权利要求21所述的方法,其中,对所述视频短片进行分析以识别与所述外科手术事件或所述外科手术阶段中的至少一者相关联的所述视频短片位置的步骤包括:对所述
视频短片执行计算机图像分析,以识别所述外科手术阶段用于回放的开始位置或者外科手术事件的用于回放的开始中的至少一者。30.根据权利要求21所述的方法,所述方法还包括:访问和与所述特定外科手术相似的多个外科手术相关的汇总数据,并且向所述用户呈现与所述选定事件特征相关联的统计信息。31.根据权利要求21所述的方法,其中,访问的视频短片包括经由位于手术台上方的位置、患者的外科手术腔中、患者的器官内或者患者的脉管系统内的至少一者中的至少一个图像传感器拍摄的视频短片。32.根据权利要求21所述的方法,其中,识别所述视频短片位置是基于用户输入的。33.根据权利要求21所述的方法,其中,识别所述视频短片位置的步骤包括:使用计算机分析来对所述视频短片的帧进行分析。34.根据权利要求29所述的方法,其中,所述计算机图像分析包括使用神经网络模型,以由此识别视频短片位置或阶段标签中的至少一者,所述神经网络模型是利用包括先前识别的外科手术阶段的示例视频帧训练的。35.根据权利要求21所述的方法,所述方法还包括:基于用户输入来确定所存储的事件特征。36.根据权利要求21所述的方法,所述方法还包括:基于描绘所述特定术中外科手术事件的视频短片的计算机分析,来确定所存储的事件特征。37.根据权利要求21所述的方法,其中,生成所述阶段标签是基于描绘所述外科手术阶段的视频短片的计算机分析的。38.根据权利要求21所述的方法,其中,识别所存储的视频短片的匹配子集的步骤包括:使用计算机分析来确定所存储的视频的匹配子集与所述选定事件特征之间的相似性程度。39.一种外科手术视频编索引系统,所述外科手术视频编索引系统包括:至少一个处理器,所述至少一个处理器被配置成:访问要编索引的视频短片,所述要编索引的视频短片包括特定外科手术的短片;对所述视频短片进行分析以生成阶段标签;识别与所述外科手术的外科手术阶段相关联的视频短片位置;将所述阶段标签与所述视频短片位置相关联;对所述视频短片进行分析,以识别特定术中外科手术事件的事件位置;将事件标签与所述特定术中外科手术事件的所述事件位置相关联;存储所述特定术中外科手术事件的事件特征;在包含其它外科手术的附加视频短片的数据结构中,将所述特定外科手术的所述视频短片的至少一部分与所述阶段标签、所述事件标签以及所述事件特征相关联,其中,所述数据结构还包括与一个或更多个其它外科手术相关联的相应的阶段标签、相应的事件标签以及相应的事件特征;使得用户能够通过选择用于显示的视频的选定阶段标签、选定事件标签以及选定事件特征来访问所述数据结构;在外科手术视频短片的所述数据结构中执行匹配所述至少一个选定阶段标签、选定事
件标签或者选定事件特征的查找,以识别所存储的视频短片的匹配子集;以及使所存储的视频短片的匹配子集向所述用户显示,由此使得所述用户能够观看至少一个术中外科手术事件的共享所述选定事件特征的外科手术短片,同时略过缺少所述选定事件特征的视频短片的回放。40.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行使得能够实现视频编索引的操作,所述操作包括:访问要编索引的视频短片,所述要编索引的视频短片包括特定外科手术的短片;对所述视频短片进行分析以生成阶段标签;识别与所述外科手术的外科手术阶段相关联的视频短片位置;将所述阶段标签与所述视频短片位置相关联;对所述视频短片进行分析,以识别特定术中外科手术事件的事件位置;将事件标签与所述特定术中外科手术事件的所述事件位置相关联;存储所述特定术中外科手术事件的事件特征;在包含其它外科手术的附加视频短片的数据结构中,将所述特定外科手术的所述视频短片的至少一部分与所述阶段标签、所述事件标签以及所述事件特征相关联,其中,所述数据结构还包括与至少一个其它外科手术相关联的相应的阶段标签、相应的事件标签以及相应的事件特征;使得用户能够通过选择用于显示的视频的选定阶段标签、选定事件标签以及选定事件特征来访问所述数据结构;在外科手术视频短片的所述数据结构中执行匹配所述至少一个选定阶段标签、选定事件标签以及选定事件特征的查找,以识别所存储的视频短片的匹配子集;以及使所存储的视频短片的匹配子集向所述用户显示,由此使得所述用户能够观看所述至少一个其它术中外科手术事件的共享所述选定事件特征的外科手术短片,同时略过缺少所述选定事件特征的视频短片的回放。41.一种生成外科手术摘要短片的计算机实现方法,所述方法包括:访问特定外科手术短片,所述特定外科手术短片包含与至少一个术中外科手术事件相关联的第一组帧以及不与外科手术活动相关联的第二组帧;基于在先外科手术的历史外科手术短片来访问历史数据,其中,所述历史数据包括将外科手术短片的部分区分成与术中外科手术事件相关联的帧以及不与外科手术活动相关联的帧;基于所述历史数据的所述信息,在所述特定外科手术短片中区分所述第一组帧与所述第二组帧;以及在用户请求时,向所述用户呈现所述特定外科手术短片的所述第一组帧的汇总,同时略过向所述用户呈现所述第二组帧。42.根据权利要求41所述的方法,其中,将所述历史外科手术短片的部分区分成与术中外科手术事件相关联的帧的所述信息包括外科手术工具的存在或者移动中的至少一项的指示符。43.根据权利要求41所述的方法,其中,将所述历史外科手术短片的部分区分成与术中
外科手术事件相关联的帧的所述信息包括在关联的帧中的检测到的工具和解剖特征。44.根据权利要求41所述的方法,其中,所述用户的请求包括至少一个类型的关注术中外科手术事件的指示,并且其中,所述第一组帧描绘了所述至少一个类型的关注术中外科手术事件中的至少一个术中外科手术事件。45.根据权利要求41所述的方法,其中,所述用户的请求包括观看所述特定外科手术短片中的多个术中外科手术事件的请求,并且其中,向所述用户呈现所述第一组帧的汇总的步骤包括:按时间顺序显示所述第一组帧,并且略过时间顺序的第二组帧。46.根据权利要求41所述的方法,其中:所述历史数据还包括历史外科手术结果数据以及相应的历史原因数据;所述第一组帧包括原因帧集合和结果帧集合;所述第二组帧包括中间帧集合;并且其中,所述方法还包括以下步骤:对所述特定外科手术短片进行分析,以识别外科手术结果以及所述外科手术结果的相应原因,所述识别是基于所述历史结果数据以及相应的历史原因数据的;基于所述分析来检测所述特定外科手术短片中的所述结果帧集合,所述结果帧集合处于所述外科手术的结果阶段内;基于所述分析来检测所述特定外科手术短片中的原因帧集合,所述原因帧集合处于所述外科手术的在时间上远离所述结果阶段的原因阶段内,并且其中,所述中间帧集合处于介于所述原因帧集合与所述结果帧集合之间的中间阶段内;生成所述外科手术短片的因果摘要,其中,所述因果摘要包括所述原因帧集合以及所述结果帧集合并且略过所述中间帧集合;并且其中,向所述用户呈现的所述第一组帧的汇总包括所述因果摘要。47.根据权利要求46所述的方法,其中,所述原因阶段包括出现所述原因的外科手术阶段,并且其中,所述原因帧集合是所述原因阶段中的帧的子集。48.根据权利要求46所述的方法,其中,所述结果阶段包括能够观测所述结果的外科手术阶段,并且其中,所述结果帧集合是所述结果阶段中的帧的子集。49.根据权利要求46所述的方法,其中,所述方法还包括以下步骤:使用机器学习模型,所述机器学习模型被训练成使用所述历史数据来识别外科手术结果以及所述外科手术结果的相应原因,以对所述特定外科手术短片进行分析。50.根据权利要求51所述的方法,其中,所述特定外科手术短片描绘了对患者执行的并且由手术室中的至少一个图像传感器拍摄的外科手术,并且其中,所述方法还包括以下步骤:导出所述第一组帧以存储在所述患者的医疗记录中。51.根据权利要求50所述的方法,其中,所述方法还包括以下步骤:生成所述至少一个术中外科手术事件的索引,并且导出所述第一组帧的步骤包括:生成所述第一组帧的汇编,所述汇编包括所述索引并且被配置成使得能够基于对一个或更多个索引项的选择来观看所述至少一个术中外科手术事件。52.根据权利要求51所述的方法,其中,所述汇编包含被存储为连续视频的不同术中事件的一系列帧。53.根据权利要求50所述的方法,所述方法还包括以下步骤:将所述第一组帧与唯一患
者标识符相关联,并且更新包括所述唯一患者标识符的医疗记录。54.根据权利要求51所述的方法,其中,所述至少一个图像传感器的位置是所述手术室中的手术台上方或者所述患者体内中的至少一者。55.根据权利要求51所述的方法,其中,在所述特定外科手术短片中区分所述第一组帧与所述第二组帧的步骤包括:对所述特定外科手术短片进行分析,以检测医疗器械;对所述特定外科手术短片进行分析,以检测解剖结构;对所述视频进行分析,以检测所检测到的医疗器械与所检测到的解剖结构之间的相对移动;以及基于所述相对移动来区分所述第一组帧与所述第二组帧,其中,所述第一组帧包括外科手术活动帧,并且所述第二组帧包括非外科手术活动帧,并且其中,呈现所述汇总由此使得准备外科手术的外科医生能够在节略的呈现的视频审查期间略过所述非外科手术活动帧。56.根据权利要求55所述的方法,其中,区分所述第一组帧与所述第二组帧还是基于所述医疗器械与所述解剖结构之间的所检测到的相对位置的。57.根据权利要求55所述的方法,其中,区分所述第一组帧与所述第二组帧还是基于所述医疗器械与所述解剖结构之间的所检测到的交互的。58.根据权利要求55所述的方法,其中,略过所述非外科手术活动帧的步骤包括:略过拍摄非外科手术活动的大多数帧。59.一种生成外科手术摘要短片的系统,所述系统包括:至少一个处理器,所述至少一个处理器被配置成:访问特定外科手术短片,所述特定外科手术短片包含与至少一个术中外科手术事件相关联的第一组帧以及不与外科手术活动相关联的第二组帧;访问与在先外科手术的历史外科手术短片相关联的历史数据,其中,所述历史数据包括将所述历史外科手术短片的部分区分成与术中外科手术事件相关联的帧以及不与外科手术活动相关联的帧的信息;基于所述历史数据的所述信息,在所述特定外科手术短片中区分所述第一组帧与所述第二组帧;以及在用户请求时,向所述用户呈现所述特定外科手术短片的所述第一组帧的汇总,同时略过向所述用户呈现所述第二组帧。60.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行使得能够生成外科手术摘要短片的操作,所述操作包括:访问特定外科手术短片,所述特定外科手术短片包含与至少一个术中外科手术事件相关联的第一组帧以及不与外科手术活动相关联的第二组帧;访问与在先外科手术的历史外科手术短片相关联的历史数据,其中,所述历史数据包括将所述历史外科手术短片的部分区分成与术中外科手术事件相关联的帧以及不与外科手术活动相关联的帧的信息;基于所述历史数据的所述信息,在所述特定外科手术短片中区分所述第一组帧与所述
第二组帧;以及在用户请求时,向所述用户呈现所述特定外科手术短片的所述第一组帧的汇总,同时略过向所述用户呈现所述第二组帧。61.一种外科手术准备的计算机实现方法,所述方法包括:访问多个外科手术视频短片集合的储存库,所述多个外科手术视频短片集合反映对不同的患者执行的多个外科手术并且包括术中外科手术事件、外科手术结果、患者特征、外科医生特征以及术中外科手术事件特征;使得准备设想的外科手术的外科医生能够输入与所述设想的外科手术相对应的病例特定信息;对所述病例特定信息和与所述多个外科手术视频短片集合相关联的数据进行比较,以识别在所述设想的外科手术期间很可能遭遇的一组术中事件;使用所述病例特定信息以及所识别的很可能遭遇的一组术中事件,来识别所述多个外科手术视频短片集合中的特定集合中的与所识别的一组术中事件相对应的特定帧,其中,所识别的特定帧包括来自对不同的患者执行的所述多个外科手术的帧;确定来自不同的患者的视频短片的第一集合和第二集合包含与共享共同特征的术中事件相关联的帧;从要向所述外科医生呈现的汇编中略过包含所述第二集合,并且在要向所述外科医生呈现的所述汇编中包含所述第一集合;以及使得所述外科医生能够观看包括所述汇编的呈现,所述汇编包含来自对不同的患者执行的不同外科手术的帧。62.根据权利要求61所述的方法,所述方法还包括:使得能够沿着所述呈现显示公共外科手术时间线,所述公共外科手术时间线包括与所识别的特定帧中的一个或更多个特定帧相对应的一个或更多个时间顺序标记。63.根据权利要求61所述的方法,其中,使得所述外科医生能够观看所述呈现的步骤包括:顺序地显示对不同的患者执行的不同外科手术的视频短片的离散集合。64.根据权利要求63所述的方法,其中,顺序地显示视频短片的离散集合的步骤包括:显示视频短片的所述离散集合的索引,使得所述外科医生能够选择视频短片的所述离散集合中的一个或更多个离散集合。65.根据权利要求64所述的方法,其中,所述索引包括将所述离散集合解析成对应的外科手术阶段的时间线以及文本阶段指示符。66.根据权利要求65所述的方法,其中,所述时间线包括与术中外科手术事件相对应的术中外科手术事件标记,并且其中,使得所述外科医生能够点击所述术中外科手术事件标记,以显示描绘对应的术中外科手术事件的至少一个帧。67.根据权利要求61所述的方法,其中,与所述设想的外科手术相对应的所述病例特定信息是从外部装置接收的。68.根据权利要求61所述的方法,其中,对所述病例特定信息和与所述多个外科手术视频短片集合相关联的数据进行比较的步骤包括:使用人工神经网络来识别在所述设想的外科手术期间很可能遭遇的所述一组术中事件。69.根据权利要求68所述的方法,其中,使用所述人工神经网络的步骤包括:向所述人
工神经网络提供所述病例特定信息作为输入。70.根据权利要求61所述的方法,其中,所述病例特定信息包括与所述设想的手术相关联的患者的特征。71.根据权利要求70所述的方法,其中,所述患者的特征是从所述患者的医疗记录接收的。72.根据权利要求71所述的方法,其中,所述病例特定信息包括和外科手术工具相关的信息。73.根据权利要求72所述的方法,其中,和所述外科手术工具相关的所述信息包括工具类型或工具型号中的至少一项。74.根据权利要求71所述的方法,其中,所述共同特征包括不同患者的特征。75.根据权利要求61所述的方法,其中,所述共同特征包括所述设想的外科手术的术中外科手术事件特征。76.根据权利要求61所述的方法,其中,确定来自不同患者的视频短片的第一集合和第二集合包含与共享共同特征的术中事件相关联的帧的步骤包括:使用机器学习模型的实现来识别所述共同特征。77.根据权利要求76所述的方法,其中,所述方法还包括:使用示例视频短片来训练所述机器学习模型,以确定视频短片的两个集合是否共享所述共同特征,并且其中,实现所述机器学习模型的步骤包括:实现经训练的机器学习模型。78.根据权利要求61所述的方法,其中,所述方法还包括:基于所述术中外科手术事件、所述外科手术结果、所述患者特征、所述外科医生特征以及所述术中外科手术事件特征来训练机器学习模型以生成所述储存库的索引;以及生成所述储存库的所述索引,并且其中,对所述病例特定信息和与所述多个集合相关联的数据进行比较的步骤包括:搜索所述索引。79.一种外科手术准备系统,所述外科手术准备系统包括:至少一个处理器,所述至少一个处理器被配置成:访问多个外科手术视频短片集合的储存库,所述多个外科手术视频短片集合反映对不同的患者执行的多个外科手术并且包括术中外科手术事件、外科手术结果、患者特征、外科医生特征以及术中外科手术事件特征;使得准备设想的外科手术的外科医生能够输入与所述设想的外科手术相对应的病例特定信息;对所述病例特定信息和与所述多个外科手术视频短片集合相关联的数据进行比较,以识别在所述设想的外科手术期间很可能遭遇的一组术中事件;使用所述病例特定信息以及所识别的很可能遭遇的一组术中事件,来识别所述多个外科手术视频短片集合中的特定集合中的与所识别的一组术中事件相对应的特定帧,其中,所识别的特定帧包括来自对不同患者执行的多个外科手术的帧;确定来自不同患者的视频短片的第一集合和第二集合包含与共享共同特征的术中事件相关联的帧;从要向所述外科医生呈现的汇编中略过包含所述第二集合,并且在要向所述外科医生呈现的汇编中包含所述第一集合;以及
使得所述外科医生能够观看包括所述汇编的呈现,并且所述呈现包括来自对不同患者执行的不同外科手术的帧。80.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行使得能够实现外科手术准备的操作,所述操作包括:访问多个外科手术视频短片集合的储存库,所述多个外科手术视频短片集合反映对不同患者执行的多个外科手术并且包括术中外科手术事件、外科手术结果、患者特征、外科医生特征以及术中外科手术事件特征;使得准备设想的外科手术的外科医生能够输入与所述设想的外科手术相对应的病例特定信息;对所述病例特定信息和与所述多个外科手术视频短片集合相关联的数据进行比较,以识别在所述设想的外科手术期间很可能遭遇的一组术中事件;使用所述病例特定信息以及所识别的很可能遭遇的一组术中事件,来识别所述多个外科手术视频短片集合中的特定集合中的与所识别的一组术中事件相对应的特定帧,其中,所识别的特定帧包括来自对不同患者执行的多个外科手术的帧;确定来自不同患者的视频短片的第一集合和第二集合包含与共享共同特征的术中事件相关联的帧;从要向所述外科医生呈现的汇编中略过包含所述第二集合,并且在要向所述外科医生呈现的汇编中包含所述第一集合;以及使得所述外科医生能够观看包括所述汇编的呈现,并且所述呈现包括来自对不同患者执行的不同外科手术的帧。81.一种分析外科手术短片的复杂性的计算机实现方法,所述方法包括:对所述外科手术短片的帧进行分析,以识别第一帧集合中的解剖结构;访问第一历史数据,所述第一历史数据是基于从第一组在先外科手术捕获的第一帧数据的分析的;使用所述第一历史数据并且使用所识别的解剖结构来对所述第一帧集合进行分析,以确定与所述第一帧集合相关联的第一外科手术复杂程度;对所述外科手术短片的帧进行分析,以识别第二帧集合中的医疗工具、所述解剖结构以及所述医疗工具与所述解剖结构之间的交互;访问第二历史数据,所述第二历史数据是基于从第二组在先外科手术捕获的第二帧数据的分析的;以及使用所述第二历史数据并且使用所识别的交互来对所述第二帧集合进行分析,以确定与所述第二帧集合相关联的第二外科手术复杂程度。82.根据权利要求81所述的方法,其中,确定所述第一外科手术复杂程度的步骤还包括:识别所述第一帧集合中的医疗工具。83.根据权利要求81所述的方法,其中,确定所述第二外科手术复杂程度是基于从所述第一帧集合到所述第二帧集合所经过的时间的。84.根据权利要求81所述的方法,其中,确定所述第一复杂程度或确定所述第二复杂程度中的至少一者是基于生理反应的。
85.根据权利要求81所述的方法,其中,所述方法还包括:确定所述外科手术短片中由医护提供者展示的技能水平,并且其中,确定所述第一复杂程度或确定所述第二复杂程度中的至少一者是基于所确定的由所述医护提供者展示的技能水平的。86.根据权利要求81所述的方法,所述方法还包括:确定所述第一外科手术复杂程度小于选定阈值,确定所述第二外科手术复杂程度超过所述选定阈值,并且响应于确定所述第一外科手术复杂程度小于所述选定阈值并且确定所述第二外科手术复杂程度超过所述选定阈值,将所述第二帧集合存储在数据结构中,同时从所述数据结构中略过所述第一帧集合。87.根据权利要求81所述的方法,其中,识别所述第一帧集合中的所述解剖结构是基于医疗工具的标识以及所述医疗工具与所述解剖结构之间的第一交互的。88.根据权利要求81所述的方法,所述方法还包括:向具有所述第一外科手术复杂程度的所述第一帧集合加标签;向具有所述第二外科手术复杂程度的所述第二帧集合加标签;以及生成包括具有所述第一标签的所述第一帧集合和具有所述第二标签的所述第二帧集合的数据结构,以使得外科医生能够选择所述第二外科手术复杂程度,并由此使所述第二帧集合被显示,同时略过显示所述第一帧集合。89.根据权利要求81所述的方法,所述方法还包括:使用机器学习模型来确定所述第一外科手术复杂程度或所述第二外科手术复杂程度中的至少一个复杂程度,所述机器学习模型被训练成使用从在先外科手术捕获的帧数据来识别外科手术复杂程度。90.根据权利要求81所述的方法,其中,确定所述第二外科手术复杂程度是基于在所述第一帧集合与所述第二帧集合之间发生的事件的。91.根据权利要求81所述的方法,其中,确定所述第一外科手术复杂程度或所述第二外科手术复杂程度中的至少一个复杂程度是基于所述解剖结构的状况的。92.根据权利要求81所述的方法,其中,确定所述第一外科手术复杂程度或所述第二外科手术复杂程度中的至少一个复杂程度是基于对电子医疗记录的分析的。93.根据权利要求81所述的方法,其中,确定所述第一外科手术复杂程度是基于在所述第一帧集合之后发生的事件的。94.根据权利要求81所述的方法,其中,确定所述第一外科手术复杂程度或所述第二外科手术复杂程度中的至少一个复杂程度是基于与所述外科手术短片相关联的外科医生的技能水平的。95.根据权利要求81所述的方法,其中,确定所述第二外科手术复杂程度是基于在所述第一帧集合之后额外的外科医生被召唤的指示的。96.根据权利要求81所述的方法,其中,确定所述第二外科手术复杂程度是基于在所述第一帧集合之后特定药物被施用的指示的。97.根据权利要求81所述的方法,其中,所述第一历史数据包括使用从所述第一组在先外科手术捕获的所述第一帧数据训练的机器学习模型。98.根据权利要求81所述的方法,其中,所述第一历史数据包括特定解剖结构与特定外科手术复杂程度之间的统计关系的指示。99.一种分析外科手术短片的复杂性的系统,所述系统包括:
至少一个处理器,所述至少一个处理器被配置成:对所述外科手术短片的帧进行分析,以识别第一帧集合中的解剖结构;访问第一历史数据,所述第一历史数据是基于从第一组在先外科手术捕获的第一帧数据的分析的;使用所述第一历史数据并且使用所识别的解剖结构来分析所述第一帧集合,以确定与所述第一帧集合相关联的第一外科手术复杂程度;对所述外科手术短片的帧进行分析,以识别第二帧集合中的医疗工具、解剖结构以及所述医疗工具与所述解剖结构之间的交互;访问第二历史数据,所述第二历史数据是基于从第二组在先外科手术捕获的第二帧数据的分析的;以及使用所述第二历史数据并且使用所识别的交互来分析所述第二帧集合,以确定与所述第二帧集合相关联的第二外科手术复杂程度。100.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行使得能够实现外科手术视频审查的操作,所述操作包括:对所述外科手术短片的帧进行分析,以识别第一帧集合中的解剖结构;访问第一历史数据,所述第一历史数据是基于从第一组在先外科手术捕获的第一帧数据的分析的;使用所述第一历史数据并且使用所识别的解剖结构来分析所述第一帧集合,以确定与所述第一帧集合相关联的第一外科手术复杂程度;对所述外科手术短片的帧进行分析,以识别第二帧集合中的医疗工具、解剖结构以及所述医疗工具与所述解剖结构之间的交互;访问第二历史数据,所述第二历史数据是基于从第二组在先外科手术捕获的第二帧数据的分析的;以及使用基于从在先外科手术捕获的帧数据的分析的所述第二历史数据并且使用所识别的交互来分析所述第二帧集合,以确定与所述第二帧集合相关联的第二外科手术复杂程度。101.一种非暂时性计算机可读介质,所述非暂时性计算机可读介质包含指令,所述指令在由至少一个处理器执行时,使所述至少一个处理器执行用于使得能够调整手术室时间表的方法,所述方法包括以下步骤:从位于外科手术室中的图像传感器接收跟踪进行中的外科手术的视觉数据;访问包含基于历史外科手术数据的信息的数据结构;使用所述数据结构对所述进行中的外科手术的所述视觉数据进行分析,以确定所述进行中的外科手术的估计完成时间;访问所述外科手术室的时间表,所述时间表包括与所述进行中的外科手术的完成相关联的已安排时间;基于所述进行中的外科手术的所估计完成时间,计算预期完成时间是否很可能导致相对于与完成相关联的已安排时间的差异;以及输出关于所述差异的计算的通知,由此使得所述外科手术室的后续用户能够相应地调
整他们的时间表。102.根据权利要求101所述的非暂时性计算机可读介质,其中,所述通知包括经更新的手术室时间表。103.根据权利要求101所述的非暂时性计算机可读介质,其中,所述经更新的手术室时间表使得排队的医护专业人员能够准备后续外科手术。104.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:将所述通知以电子方式发送给与所述外科手术室的后续已安排用户相关联的装置。105.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:确定相对于所述与完成相关联的已安排时间的所述差异的程度;响应于第一确定的程度,输出所述通知;以及响应于第二确定的程度,放弃输出所述通知。106.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:确定所述预期完成时间是否很可能导致相对于与完成相关联的已安排时间延迟至少选定阈值时间量;响应于确定所述预期完成时间很可能导致至少所述选定阈值时间量的延迟,输出所述通知;以及响应于确定所述预期完成时间不太可能导致至少所述选定阈值时间量的延迟,放弃输出所述通知。107.根据权利要求101所述的非暂时性计算机可读介质,其中,确定所述估计完成时间是基于与进行所述进行中的外科手术的医护专业人员相关联的一个或更多个存储的特征的。108.根据权利要求101所述的非暂时性计算机可读介质,还包括以下步骤:基于所确定的完成所述进行中的外科手术的实际时间,更新历史平均完成时间。109.根据权利要求101所述的非暂时性计算机可读介质,其中,所述图像传感器被定位在患者上方。110.根据权利要求101所述的非暂时性计算机可读介质,其中,所述图像传感器被定位在外科手术工具上。111.根据权利要求101所述的非暂时性计算机可读介质,其中,分析步骤还包括:检测接收到的视觉数据中的特征事件,访问基于历史外科手术数据的所述信息,以确定在发生所述历史外科手术数据中的所述特征事件之后所述外科手术的预期完成时间,并且基于所确定的预期完成时间来确定所述估计完成时间。112.根据权利要求111所述的非暂时性计算机可读介质,其中,所述方法还包括:使用历史视觉数据来训练机器学习模型以检测所述特征事件。113.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:使用历史视觉数据来训练机器学习模型以估计完成时间,并且其中,计算所述估计完成时间的步骤包括:实现经训练的机器学习模型。114.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:使用平均历史完成时间来确定所述估计完成时间。115.根据权利要求101所述的非暂时性计算机可读介质,其中,所述方法还包括:检测
所述视觉数据中的医疗工具,并且其中,计算所述估计完成时间是基于所检测到的医疗工具的。116.根据权利要求101所述的非暂时性计算机可读介质,其中,分析步骤还包括:检测所述视觉数据中的解剖结构,并且其中,计算所述估计完成时间是基于所检测到的解剖结构的。117.根据权利要求101所述的非暂时性计算机可读介质,其中,分析步骤还包括:检测所述视觉数据中的解剖结构与医疗工具之间的交互,并且其中,计算所述估计完成时间是基于所检测到的交互的。118.根据权利要求101所述的非暂时性计算机可读介质,其中,分析步骤还包括:确定所述视觉数据中的外科医生的技能水平,并且其中,计算所述估计完成时间是基于所确定的技能水平的。119.一种使得能够调整手术室时间表的系统,所述系统包括:至少一个处理器,所述至少一个处理器被配置成:从位于外科手术室中的图像传感器接收跟踪进行中的外科手术的视觉数据;访问包含基于历史外科手术数据的信息的数据结构;使用所述数据结构对所述进行中的外科手术的所述视觉数据进行分析,以确定所述进行中的外科手术的估计完成时间;访问所述外科手术室的时间表,所述时间表包括与所述进行中的外科手术的完成相关联的已安排时间;基于所述进行中的外科手术的所述估计完成时间,计算预期完成时间是否很可能导致相对于与完成相关联的已安排时间的差异;以及输出关于所述差异的计算的通知,由此使得所述外科手术室的后续用户能够相应地调整他们的时间表。120.一种使得能够调整手术室时间表的计算机实现方法,所述方法包括:从位于外科手术室中的图像传感器接收跟踪进行中的外科手术的视觉数据;访问包含基于历史外科手术数据的信息的数据结构;使用所述数据结构对所述进行中的外科手术的所述视觉数据进行分析,以确定所述进行中的外科手术的估计完成时间;访问所述外科手术室的时间表,所述时间表包括与所述进行中的外科手术的完成相关联的已安排时间;基于所述进行中的外科手术的所述估计完成时间,来计算预期完成时间是否很可能导致相对于与完成相关联的已安排时间的差异;以及输出关于所述差异的计算的通知,由此使得所述外科手术室的后续用户能够相应地调整他们的时间表。121.一种对外科手术图像进行分析以确定保险理赔的计算机实现方法,所述方法包括:访问在针对患者的外科手术期间拍摄的视频帧;对在所述外科手术期间拍摄的所述视频帧进行分析,以识别所述视频帧中的至少一个医疗器械、至少一个解剖结构以及所述至少一个医疗器械与所述至少一个解剖结构之间的
至少一个交互;访问与医疗器械、解剖结构以及医疗器械与解剖结构之间的交互相联系的理赔准则数据库;对所述至少一个医疗器械与所述至少一个解剖结构之间的所识别的至少一个交互与所述理赔准则数据库中的信息进行比较...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。