金融大模型标准-有效评估金融大模型的能力，促进金融行业智能化转型

金融大模型标准可有效评估金融大模型的能力，促进金融行业智 能化转型。金融大模型在银行、证券、保险等金融细分领域具有重要 应用前景，在智能投研、智能投顾、智能风控、智能营销、智能客服 等众多场景中提供助力，促进金融机构数智化水平提升。然而，金融 大模型在应用过程中仍面临着诸多挑战。在数据安全方面，由于金融 行业对身份信息、金融资产、交易记录、信用历史等数据流动的合规要求较高，导致金融大模型在数据安全和隐私保护方面将面临更高的 要求。在时效性方面，由于金融风险的效用具有期限，导致金融大模 型对实时数据获取和处理能力提出了更高要求。为了更好推动金融大 模型高质量发展，有必要探索金融大模型标准和评测指标的构建。金 融大模型标准可用于指导第三方测评机构对金融大模型能力的评估、 验收等工作。

金融大模型能力评估标准可以围绕应用场景、能力指标、应用成 熟三个部分开展。其中，应用场景可重点考察营销、风控、投研、投 顾、文档处理、知识管理、客服等通用场景的覆盖情况，以及银行、 保险、证券、基金、资管等专用业务场景的覆盖情况，具体能力项可 可分为客户满意度、客户信用评估准确率、风险预警准确率、表单识 别准确率、证件识别准确率等。能力指标可以重点考察不同模态数据 的覆盖情况，以及任务具体指标、业务整体效果等方面的效果优越性， 具体能力项可分为实体识别、关系抽取、事件抽取、情感分析、文本 生成、语音合成、语音识别、图片分类、图像真实性鉴定等。应用成 熟可重点考察数据合规、模型可控、服务可靠等方面，具体能力项可分为数据加密性、模型的攻击防范性及输出准确性、服务的可扩展性、 可维护性、兼容性等。