银行

当前，大模型技术在金融领域的应用加速推进，为金融服务提质增效注入新动能。作为我国重要金融基础设施，中国银联高度重视人工智能引领的新一轮科技革命和产业变革，积极探索应用实践。作为集团科技创新的重要力量，子公司北京银联金卡科技有限公司（银行卡检测中心BCTC，国家金融IC卡安全检测中心，国家金融科技测评中心，以下简称银联金卡）持续推进大模型金融应用测评服务，推动前沿技术在金融行业规范发展、落地见效。

金融大模型应用面临的痛点和挑战

当我们在银行APP上咨询智能客服办理贷款，或是通过理财平台获取个性化投资建议时，背后可能都有大模型技术在提供支撑。但如果这些服务背后的大模型存在短板，比如计算贷款利息时出现数学逻辑错误，理解用户理财需求时因金融意图识别能力弱而给出偏离的建议，甚至在涉及敏感话题时未能规范回应，就可能给用户带来困扰。

这些看似具体的用户体验问题，实则折射出大模型技术在金融领域规模化应用中潜藏的共性挑战——模型幻觉、算法黑箱、数据安全风险、科技伦理隐患等痛点问题逐渐显现。这些问题造成了金融机构对大模型“想用而不敢用”的困局，制约了数智化创新发展的进程。通过构建全面、精准、有效的大模型应用测评服务，可为金融机构和产业相关方推进大模型在各类场景的应用提供“把脉问诊”，及时发现可能存在的不足和安全隐患，支持相关机构加强大模型应用的功能与安全，从而为大模型在垂域场景更广泛深入的应用提供支撑，因此构建全面、专业的大模型测评体系已成为行业的迫切需求。

推进大模型测评技术攻关 协助解决大模型应用能用与好用的问题

面对市场需求与行业痛点，银联金卡秉持“创新驱动、标准引领、生态共赢”的发展理念，依托多年来在金融行业安全服务方面的丰富经验，围绕测评方案建设、核心测评技术突破、产业生态协同三个方面，积极开展大模型金融应用测评技术研究，推出大模型金融应用测评业务，从安全与功能角度聚焦解决模型“能不能用”与“好不好用”的问题，为客户提供专业第三方测评服务。

在能力建设方面，银联金卡牵头联合多家金融机构、科技公司及科研院所，共同开展大模型金融应用安全威胁分析和基础测评技术研发工作。作为第三方专业测评机构深度参与多项人工智能大模型相关技术标准的研制工作，为大模型金融安全应用理论体系提供技术支撑。

在技术体系层面，银联金卡构建大模型金融应用测评体系，系统化解决“测什么”“用什么”“怎么测”三大问题。该体系包含测评标准、测评数据集、测评工具、测评流程等核心部分，测评范围涵盖通用知识与能力、金融逻辑、金融认知、安全合规、内容生成、金融知识、安全要求、性能要求等多个维度，可有效解决金融领域客户在模型选型决策、再训练效果评估、场景适配能力差距分析等关键问题，从而保障大模型技术的安全可靠应用。此外，银联金卡自主研发的“离朱”大模型自动化测评平台，能够高效管理测评所需数据集资源，灵活调用客户模型接口，支持测评人员快速响应客户需求，提升测评工作的效率与准确性。

在生态协同方面，银联金卡以标准为纽带，联合人工智能领域头部科技企业攻关测评能力技术框架，结合对大中小型金融机构个性化需求的调研，持续拓展测评数据维度，深化大模型技术产品栈的整体测评能力建设，确保测评服务与市场需求同步发展。

实践验证价值 助力行业安全升级

自测评体系建成以来，银联金卡已和阿里云、百度、蚂蚁 、百川等头部科技公司探索开展测评技术攻关、自动化平台调用、测评体系建设及场景应用等方面的合作，其中场景应用工作涵盖评估模型的用户交互准确性与适应性、5类31种内容安全风险、金融领域应用效能以及运行效率与功耗等关键内容和指标，持续完善提升相关模型能力。同时，银联金卡协同中国银联人工智能领域战略布局，积极参与金融大模型技术路线规划与标准制定工作，与银联及成员机构共同探索大模型金融应用合规落地路径。

未来，银联金卡将以“提升金融场景大模型测评的精准度、效率与场景覆盖度”为目标，持续提升测评体系的精准度、智能化水平和覆盖范围，构建优质的金融领域测评数据资源，助力金融机构和产业上下游企业共同推进大模型技术在金融行业的安全、合规与高效地应用。