基于多模态数据的认知大模型的构建方法、装置制造方法及图纸

技术编号:42506590 阅读:23 留言:0更新日期:2024-08-22 14:21
本申请的实施例提供了一种基于多模态数据的认知大模型的构建方法、装置。获取多模态数据,并基于多模态数据输出多个特征数据;根据多个特征数据提取对应的特征;基于多个特征构建特征库;根据特征库以及多模态融合算法构建对应的通用身心认知大模型;基于通用身心认知大模型以及行业数据构建具有行业特性的身心认知大模型,此时,基于特征库与多模态融合算法进行整合,并基于多模态融合算法对特征库进行数据处理,以便于构建对应的通用身心认知大模型,从而便于全面、深入地理解人的各种状态和行为,同时,基于通用身心认知大模型以及行业数据构建具有行业特性的身心认知大模型,为特定行业的身心认知研究提供有针对性的解决方案。

【技术实现步骤摘要】

本申请涉及认知大模型的,具体而言,涉及一种基于多模态数据的认知大模型的构建方法、装置


技术介绍

1、随着大数据时代的到来,多模态数据处理技术日益成为身心认知研究中的关键技术。多模态数据包括文本、图像、音频、视频等多种形式的数据,这些数据在人的行为、情绪、生理、认知和社交关系等多个维度上提供了丰富的信息。

2、在现有技术中,已有一些身心认知大模型的构建方法,如基于规则的方法、基于深度学习的方法等。这些方法在处理多模态数据时,主要关注单一模态的数据处理,缺乏对多模态数据的整合和融合,无法全面、深入地理解人的各种状态和行为。


技术实现思路

1、本申请的实施例提供了一种基于多模态数据的认知大模型的构建方法、装置,至少在一定程度上基于特征库与多模态融合算法进行整合,并基于多模态融合算法对特征库进行数据处理,以便于构建对应的通用身心认知大模型,从而便于全面、深入地理解人的各种状态和行为,同时,基于通用身心认知大模型以及行业数据构建具有行业特性的身心认知大模型,能够结合行业特性,为特定行业的身心认知研究提供有本文档来自技高网...

【技术保护点】

1.一种基于多模态数据的认知大模型的构建方法,其特征在于,应用于认知大模型;所述基于多模态数据的认知大模型的构建方法包括:

2.根据权利要求1所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述获取多模态数据,并基于多模态数据输出多个特征数据,包括:

3.根据权利要求2所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述根据多个特征数据提取对应的特征,包括:

4.根据权利要求3所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述根据多个特征数据提取对应的特征,还包括:

5.根据权利要求4所述的基于多模态数据的认知大模...

【技术特征摘要】

1.一种基于多模态数据的认知大模型的构建方法,其特征在于,应用于认知大模型;所述基于多模态数据的认知大模型的构建方法包括:

2.根据权利要求1所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述获取多模态数据,并基于多模态数据输出多个特征数据,包括:

3.根据权利要求2所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述根据多个特征数据提取对应的特征,包括:

4.根据权利要求3所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述根据多个特征数据提取对应的特征,还包括:

5.根据权利要求4所述的基于多模态数据的认知大模型的构建方法,其特征在于,所述根据多个特征数据提取对应的特征,还包括:

<...

【专利技术属性】
技术研发人员:凌志辉胡永宝
申请(专利权)人:南京云思创智信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1