生成式AI不仅带来了前所未有的创新潜力,同时也提出了新的安全挑战。企业必须确保技术在所有可能情况下都能按预期运行,以保障数据安全。
亚马逊云科技在AI和机器学习上的投入已经有超过20年的经验,未来也将会继续在安全服务上应用大模型和机器学习。亚马逊云科技平台副总裁Kurt Kufeld强调,现在的重点不是建立更多服务,而是应用我们现有的数据和技术,然后提供一个更简洁的答案给客户。
亚马逊云科技平台副总裁Kurt Kufeld
自动推理:解决复杂问题的利器
自动推理(Automated Reasoning)是一种使用数学方法尝试每一种可能性的技术。Kurt Kufeld表示,自动推理是解决复杂问题的利器,能够确保我们的代码在所有可能情况下都按预期运行。
亚马逊云科技正在使用自动推理进行API调用的授权检查。Kurt Kufeld谈到,每个API的调用通过自动推理能够验证这段代码的正确性。
在90年代初,浮点处理器错误的历史教训值得深思。亚马逊云科技也利用自动推理验证IM访问分析器和Amazon S3公共访问等服务的安全性,通过自动推理能够证明这些服务的代码在所有可能情况下都按预期运行,确保了系统的安全性和可靠性。
亚马逊云科技还计划将自动推理扩展到更多领域。Kurt Kufeld认为,自动推理将彻底改变软件编写方式,显著提高代码的可靠性。同时计划让普通人员也能轻松使用自动推理,提升代码质量和系统安全性。
生成式AI赋能的安全未来
生成式AI具有广泛的应用潜力,但也有潜在的威胁,是一把双刃剑。生成式AI不仅可以生成高质量的图像和视频,还可以用于代码的生成和分析,但这种能力可能被恶意利用,如创建深度伪造或生成攻击向量,从而对数据安全构成威胁。
“这意味着我们不仅可以利用生成式AI来提高开发效率,还必须警惕其可能带来的安全风险。”Kurt Kufeld说道。
面对生成式AI的潜在威胁,亚马逊云科技采取了一系列安全措施。首先,通过隔离保护客户的专有数据,防止数据泄露和滥用;其次,利用生成式AI优化现有的安全服务,帮助客户更有效地应对安全威胁。
当然,尽管当前许多所谓的AI技术实际上是基于机器学习,但真正的人工智能仍然处于发展的初期阶段。Kurt Kufeld希望给客户一个正确的引导,需要更精确地描述这些技术,以避免误导用户。
Kurt Kufeld描绘了一个更加智能和安全的未来,从自动化推理的精确验证,到生成式AI的广泛应用和严密防护。在技术不断演进的过程中,亚马逊云科技将在自动推理和生成式AI领域进行深入研究和应用,为全球客户提供更加可靠和安全的云服务,推动企业迈向新的高度。
好文章,需要你的鼓励
从浙江安吉的桌椅,到广东佛山的沙发床垫、河南洛阳的钢制家具,再到福建福州的竹藤制品,中国各大高度专业化的家具产业带,都在不约而同地探索各自的数字化出海路径。
哥伦比亚大学研究团队开发了MathBode动态诊断工具,通过让数学题参数按正弦波变化来测试AI的动态推理能力。研究发现传统静态测试掩盖了AI的重要缺陷:几乎所有模型都表现出低通滤波特征和相位滞后现象,即在处理快速变化时会出现失真和延迟。该方法覆盖五个数学家族的测试,为AI模型选择和部署提供了新的评估维度。
研究人员正探索AI能否预测昏迷患者的医疗意愿,帮助医生做出生死决策。华盛顿大学研究员Ahmad正推进首个AI代理人试点项目,通过分析患者医疗数据预测其偏好。虽然准确率可达三分之二,但专家担心AI无法捕捉患者价值观的复杂性和动态变化。医生强调AI只能作为辅助工具,不应替代人类代理人,因为生死决策依赖具体情境且充满伦理挑战。
这项研究首次发现AI推理模型存在"雪球效应"问题——推理过程中的小错误会逐步放大,导致AI要么给出危险回答,要么过度拒绝正常请求。研究团队提出AdvChain方法,通过训练AI学习"错误-纠正"过程来获得自我纠错能力。实验显示该方法显著提升了AI的安全性和实用性,用1000个样本达到了传统方法15000个样本的效果,为AI安全训练开辟了新方向。