一种复杂仿真系统可信度的鲁棒评估方法及系统技术方案

本发明专利技术公开一种复杂仿真系统可信度的鲁棒评估方法及系统，所述该方法包括建立可图形化、层次化的可信度评估指标体系界面，将复杂仿真系统可信度评估的指标分解为各个仿真元素模型的可信度评估指标，并计算各指标权重；将每次仿真试验中采集到的数据和可信度评估结果以数据集的形式进行组织和管理；将多个评估数据源的、不同形式的定性定量信息进行融合，自下向上逐层综合得到仿真系统的可信度评估结果。本发明专利技术所述技术方案能够对多种评估信息进行统一描述，在评估结果一致性分析和反馈迭代过程中不断融入新的评估知识，修正评估过程中的不确定因素的影响，得到稳定收敛的评估结论并利用多级综合评估模型实现对多评估源信息的有效利用。

Robust evaluation method and system for reliability of complex simulation system

The robust evaluation method and system of the invention discloses a complex simulation system credibility, wherein the method comprises establishing credibility evaluation index system can interface graphical and hierarchical, the evaluation of complex simulation system reliability index is decomposed into various elements of the model simulation credibility evaluation index, and calculate the weight of each index to evaluate data; and confidence in each simulation experiment results on data sets collected in the form of organization and management; the qualitative and quantitative information of different forms of multiple data sources, evaluation of integration, from the bottom to the top layer comprehensive evaluation result of simulation system. The technical scheme of the invention can on a variety of assessment information are described, in assessing the consistency of results of analysis and feedback in the iterative process of continuous integration of new knowledge assessment, the influence of uncertain factors in the process of revising assessment, evaluation results and convergence using multilevel comprehensive evaluation model to achieve efficient use of multi source information evaluation the.

【技术实现步骤摘要】
一种复杂仿真系统可信度的鲁棒评估方法及系统
本专利技术涉及一种可信度评估方法，特别是涉及一种复杂仿真系统可信度的鲁棒评估方法及系统。
技术介绍
仿真系统的可信度是指相对于特定的仿真应用目的，其过程、现象和结果正确反映真实系统的程度。具有较高的可信度是仿真系统能够应用于真实系统模拟和分析的前提。由于复杂系统本身所具有的特点，其仿真系统的可信度评估通常涉及到多学科、多层次仿真模型，多个仿真试验过程，以及多领域的评估专家，是一个系统的评估过程。可信度评估结果容易受到评估工作中多种影响因素的作用，主要影响因素包括：评估对象和评估主体。评估对象，即复杂仿真系统，由于其本身具有的组成复杂、内部关联复杂等特点，往往导致系统整体表现出复杂的行为特性，为可信度的准确度量和评估带来了不确定性。评估主体反映用于度量评估对象的方法和证据，由于评估主体对评估指标及评估指标权重分配存在偏好选择，作为评估证据的“数据”通常来自于仿真试验、真实试验和专家经验等多个来源而存在可信性问题。这些往往会导致难以得到一致的评估结果。传统的仿真可信度评估过程包括定义评估目标、分析系统要素、建立评估指标体系、建立评估结构和评估准则、专家进行评估，得到评估结果，这个评估过程通常是单向、单次的。评估主体往往难以从宏观的角度发现影响评估结果可信度的因素，以及它们的作用程度。即使进行多次评估，也可能只是得到不同的评估结果，缺乏一种将评估结果导向稳定一致的评估过程和综合利用不同评估数据源中可用信息的评估方法。针对传统复杂仿真系统可信度评估过程的单向、单次特点，同时为了有效解决传统复杂仿真系统可信度评估中，由于评估主体的主观偏好及多源评估数据的异构性造成的评估结果不确定性。因此，需要提供一种复杂仿真系统可信度的鲁棒评估方法及系统，构建复杂仿真系统可信度的鲁棒评估过程模型和面向多源评估信息融合的可信度综合评估方法，通过建立分析结果的反馈优化机制，形成反复迭代的评估过程，实现在迭代过程中不断加入融合了多源异构评估信息的评估知识，修正评估过程中的不确定因素的影响，得到稳定收敛的评估结论。
技术实现思路
本专利技术的目的在于提供一种复杂仿真系统可信度的鲁棒评估方法及系统，解决传统复杂仿真系统可信度评估过程的单向、单次特点，以及由于不确定性因素导致的评估结果不稳定的问题。为解决上述技术问题，本专利技术采用下述技术方案：一种复杂仿真系统可信度的鲁棒评估方法，所述该方法包括建立可图形化、层次化的可信度评估指标体系界面，将复杂仿真系统可信度评估的指标分解为各个仿真元素模型的可信度评估指标，并计算各指标权重；将每次仿真试验中采集到的数据和可信度评估结果以数据集的形式进行组织和管理；将多个评估数据源的信息进行融合，自下向上逐层综合得到仿真系统的可信度评估结果；建立可信度评估结果的一致性分析和反馈修正的迭代过程。优选地，所述该方法进一步包括选择性的显示某一次评估之后各个层次上的各个评估指标的可信度评估结果及仿真系统的可信度，或多次评估结果平均后的各层次上各指标的可信度及仿真系统的可信度。优选地，所述建立可图形化、层次化的可信度评估指标体系及计算各指标权重进一步包括将仿真系统可信度评估指标分解为组成仿真系统的各个分系统的可信度评估指标；将每一个分系统的可信度评估指标分解为更向下一级的子系统的可信度评估指标，直到分解到最小的仿真元素模型的可信度评估指标为止；对每一个仿真元素模型按照建模需求、概念模型、数学模型、仿真模型及仿真结果几个方面进行评估指标分解，得到每一个仿真元素模型的可信度评估指标；综合各个元素模型的评估指标构成指标体系，然后对评估指标的重要性进行两两比较建立评判矩阵，通过特征值计算得到评估指标权重。优选地，所述仿真试验中采集到的数据以及不同可信度评估任务的评估结果数据依据数据集进行组织管理；数据集的描述信息进一步包括数据集名称、仿真试验任务或评估任务名称、数据名称、创建时间、保存路径、数据集中的文件夹数量及数据文件数量。优选地，所述方法对多个评估数据源的定性、定量的评估信息进行融合；所述评估数据源进一步包括仿真试验数据、真实系统试验数据和专家经验知识；所述多个评估数据源针对某个评估指标的融合方法公式为：式中：p∈{1,2,…,p}，为评估数据源；为评估指标Smn相对于评估目的可以接受(yes)的概率；为第p个评估数据源反映出的对于评估指标Smn的知识度；为第p个评估数据源反映出的对于评估指标Smn的信任程度；所述知识度，对于定量指标，用于表示仿真数据与试验数据间的偏离程度；对于定性指标，用于表示评估专家在该领域的知识深度；所述信任度，对于定量指标，用于表示仿真试验数据的可信度校验结果；对于定性指标，用于表示评估专家对评估对象给定的信任程度。一种复杂仿真系统可信度的鲁棒评估系统，该系统包括可信度评估指标体系模块、评估数据管理模块、可信度综合评估模块和评估结果分析显示模块；所述可信度评估指标体系模块，用于建立可图形化、层次化的可信度评估指标体系界面，将复杂仿真系统可信度评估的指标分解为各个仿真元素模型的可信度评估指标，并计算各指标权重；所述评估数据管理模块，用于将每次仿真试验中采集到的数据和可信度评估结果以数据集的形式进行组织和管理；所述可信度综合评估模块，用于将多个评估数据源的信息进行融合，自下向上逐层综合得到仿真系统的可信度评估结果；所述评估结果分析显示模块，用于选择性的显示某一次评估之后各个层次上的各个评估指标的可信度评估结果及仿真系统的可信度，或多次评估结果平均后的各层次上各指标的可信度及仿真系统的可信度。优选地，所述可信度评估指标体系模块中建立评估指标层次关系进一步包括将仿真系统可信度评估指标分解为组成仿真系统的各个分系统的可信度评估指标；将每一个分系统的可信度评估指标分解为更向下一级的子系统的可信度评估指标，直到分解到最小的仿真元素模型的可信度评估指标为止；对每一个仿真元素模型按照建模需求、概念模型、数学模型、仿真模型及仿真结果几个方面进行评估指标分解，得到每一个仿真元素模型的可信度评估指标；综合各个元素模型的评估指标构成指标体系，然后对评估指标的重要性进行两两比较建立评判矩阵，通过特征值计算得到评估指标权重。优选地，所述仿真试验中采集到的数据以及不同可信度评估任务的评估结果数据依据数据集进行组织管理；数据集的描述信息进一步包括数据集名称、仿真试验任务或评估任务名称、数据名称、创建时间、保存路径、数据集中的文件夹数量级数据文件数量。优选地，所述系统对多个数据源的定性、定量的评估信息进行融合；所述评估数据管理模块中多个评估数据源进一步包括仿真试验数据、真实试验数据和专家经验知识；所述多个评估数据源针对某个评估指标的融合方法公式为：式中：p∈{1,2,…,p}，为评估数据源；为评估指标Smn相对于评估目的可以接受(yes)的概率；为第p个评估数据源反映出的对于评估指标Smn的知识度；为第p个评估数据源反映出的对于评估指标Smn的信任程度；所述知识度，对于定量指标，用于表示仿真数据与试验数据间的偏离程度；对于定性指标，用于表示评估专家在该领域的知识深度；所述信任度，对于定量指标，用于表示仿真试验数据的可信度校验结果；对于定性指标，用于表示评估专家对本文档来自技高网...

【技术保护点】
一种复杂仿真系统可信度的鲁棒评估方法，其特征在于，所述该方法包括建立可图形化、层次化的可信度评估指标体系界面，将复杂仿真系统可信度评估的指标分解为各个仿真元素模型的可信度评估指标，并计算各指标权重；将每次仿真试验中采集到的数据和可信度评估结果以数据集的形式进行组织和管理；将多个评估数据源的信息进行融合，自下向上逐层综合得到仿真系统的可信度评估结果；建立可信度评估结果的一致性分析和反馈修正的迭代过程。

【技术特征摘要】
1.一种复杂仿真系统可信度的鲁棒评估方法，其特征在于，所述该方法包括建立可图形化、层次化的可信度评估指标体系界面，将复杂仿真系统可信度评估的指标分解为各个仿真元素模型的可信度评估指标，并计算各指标权重；将每次仿真试验中采集到的数据和可信度评估结果以数据集的形式进行组织和管理；将多个评估数据源的信息进行融合，自下向上逐层综合得到仿真系统的可信度评估结果；建立可信度评估结果的一致性分析和反馈修正的迭代过程。2.根据权利要求1所述的鲁棒评估方法，其特征在于，所述该方法进一步包括选择性的显示某一次评估之后各个层次上的各个评估指标的可信度评估结果及仿真系统的可信度，或多次评估结果平均后的各层次上各指标的可信度及仿真系统的可信度。3.根据权利要求1所述的鲁棒评估方法，其特征在于，所述建立可图形化、层次化的可信度评估指标体系及计算各指标权重进一步包括将仿真系统可信度评估指标分解为组成仿真系统的各个分系统的可信度评估指标；将每一个分系统的可信度评估指标分解为更向下一级的子系统的可信度评估指标，直到分解到最小的仿真元素模型的可信度评估指标为止；对每一个仿真元素模型按照建模需求、概念模型、数学模型、仿真模型及仿真结果几个方面进行评估指标分解，得到每一个仿真元素模型的可信度评估指标；综合各个元素模型的评估指标构成指标体系，然后对评估指标的重要性进行两两比较建立评判矩阵，通过特征值计算得到评估指标权重。4.根据权利要求1所述的鲁棒评估方法，其特征在于，所述仿真试验中采集到的数据以及不同可信度评估任务的评估结果数据依据数据集进行组织管理；数据集的描述信息进一步包括数据集名称、仿真试验任务或评估任务名称、数据名称、创建时间、保存路径、数据集中的文件夹数量及数据文件数量。5.根据权利要求1所述的鲁棒评估方法，其特征在于，所述方法对多个评估数据源的定性、定量的评估信息进行融合；所述评估数据源进一步包括仿真试验数据、真实系统试验数据和专家经验知识；所述多个评估数据源针对某个评估指标的融合方法公式为：式中：p∈{1,2,…,p}，为评估数据源；为评估指标Smn相对于评估目的可以接受(yes)的概率；为第p个评估数据源反映出的对于评估指标Smn的知识度；为第p个评估数据源反映出的对于评估指标Smn的信任程度；所述知识度，对于定量指标，用于表示仿真数据与试验数据间的偏离程度；对于定性指标，用于表示评估专家在该领域的知识深度；所述信任度，对于定量指标，用于表示仿真试验数据的可信度校验结果；对于定性指标，用于表示评估专家对评估对象给定的信任程度。6.一种复杂仿真系统可信度的鲁棒评估系...

【专利技术属性】
技术研发人员：曲慧杨，
申请(专利权)人：北京仿真中心，
类型：发明
国别省市：北京,11