8月1日，由中国科大网络空间安全学院、360集团AI安全实验室主办的人工智能安全趋势发展论坛在京圆满落幕。本次论坛汇聚了人工智能领域政府、学术界、产业界的代表和优秀专家学者，就人工智能安全挑战、最新研究成果及最佳实践进行深入交流，共同推动形成行业共识与标准，推动人工智能安全技术的创新与发展。

图 ISC人工智能安全趋势发展论坛现场

  大模型已成为数智化系统的关键基础设施，其潜在的主体地位和应用广度，也带来了新的安全风险和安全挑战。人工智能安全与发展的平衡，不仅需要法律法规的约束，更需要行业内各方力量共同推动和构建人工智能安全生态。

图 中国科学技术大学网络空间安全学院执行院长俞能海

  中国科学技术大学网络空间安全学院执行院长俞能海教授在报告中指出，人工智能大模型安全问题的研究方兴未艾，有待于广大的学者和行业人士共同努力，为国家提供更多成熟可用的产品，能够真正地服务千行百业。此外，他还在报告中概述了生成式人工智能的发展脉络和安全风险，重点分享了人工智能大模型安全在数据采集与处理、模型训练与测试、内容生成与服务几个关键阶段的最新研究进展。

  迈入大模型时代，更大规模的数据以及更强的任务处理能力，也带来了更大的安全与隐私风险。西安交通大学二级教授、副处长沈超认为，大模型能够更安全、可持续的发展，需要去关注大模型在完整性、可靠性方面存在的问题，以及在数据模型应用方面存在的安全隐私挑战。

图 中国信通院人工智能研究所安全部主任石霖

  大模型带来生成方式的转变，推动生产领域交互体验革新和效率提升。中国信通院人工智能研究所安全部主任石霖表示，人工智能安全问题涌现，持续放大数字社会风险与挑战，信通院基于已有的安全评估测试等工作基础，设计了大模型价值对齐方法，对开源大模型自身进行安全防护加固，获得了明显的安全性能提升。

图 北京阿莱门科技有限公司CEO徐骅

  北京阿莱门科技有限公司CEO、北京大学人工智能安全与治理中心大模型研究员、北大(临港)大模型对齐中心执行主任徐骅指出，AI安全成为大模型广泛应用的关键掣肘因素，价值对齐是AI安全的核心议题，也是大模型应用的最后一公里。为此，阿莱门推出覆盖大模型全生命周期的安全对齐方案，提供全方位的大模型安全对齐平台，提升大模型的安全性和能力。

图 华为可信AI安全解决方案专家唐文

  AI创新发展与监管并重，华为可信AI安全解决方案专家唐文认为，安全可信的AI计算平台才能满足市场准入与监管合规的要求。华为可信业界首创“用AI保护AI”，依托昇腾AI算力平台，实现了物理对抗攻击检测和大语言模型（代码）提示注入攻击检测。

  论坛最后，各位专家学者围绕政企研的角色定位、数据合规、幻觉现象、安全评测、安全和性能平衡、大模型安全领域的发展趋势等内容进行了圆桌研讨和交流。此次人工智能安全趋势发展论坛的举办，政府、学术界、产业界将共同努力，为构建一个更加稳健、更加透明、更加负责任的人工智能生态系统贡献力量。