能源巨头们面临着来自政府和消费者有关减少碳排放的巨大压力。对于跨国石油和天然气公司壳牌(Shell)来说,人工智能可能是实现这一长期目标的关键催化剂。
壳牌公司总部位于英国伦敦,这家能源巨头在混合云平台和Databricks数据湖库的推动下,正在进行持续的数字化转型,其中涉及到人工智能等多种技术,旨在优化业务效率和利润,并随着时间的推移减少碳排放。
“人工智能已经成为我们整体数字化转型之旅的一个核心部分,”壳牌公司人工智能负责人Dan Jeavons这样表示。他指出,壳牌与包括微软和C3.ai在内的多家人工智能公司展开合作,不过早在20215年开始壳牌公司就一直与Databricks保持密切合作,有大约20名Databricks员工专门服务壳牌这个客户。
Jeavons在壳牌担任计算科学和数字创新副总裁仅六个月时间,是壳牌前数据科学总经理,自2015年以来一直深耕数据科学领域。
他在这个新职位上直接汇报给壳牌集团首席信息官Jay Crotts,他的任务是利用人工智能以及区块链、物联网、边缘计算等新兴技术,彻底改革壳牌的未来技术战略,并帮助引导减少碳排放、在2050年成为净零排放能源企业的承诺。
Gartner AI分析师Anthony Mullen表示,壳牌实施的AI战略超出了其他大多数公司正在做的事情。他在提及壳牌创立的卓越中心和加入OpenAI的举动时表示:“壳牌在跨整个组织的试水方面,已经走在了前沿。”
Jeavons的团队有数百名数据科学家在使用AI(主要在Databricks基于Spark的平台上)编写算法,来执行任务例如改善地下处理周期时间、优化资产性能、预测各种设备可能何时出现故障、改善交付给客户的产品等。
他说:“鉴于气候变化所带来的威胁,我们需要转向采用更低碳的能源系统,而数字化在这方面发挥着关键作用。”他指出,很多二氧化碳监测数据流流经Databricks AI平台,“数字技术是我们可以拉动的、显著减少能源系统二氧化碳排放的核心杠杆之一。”
据Jeavons称,壳牌使用数字技术将一个液化天然气(LNG)设施每年二氧化碳排放量减少了130千吨——相当于一年路上行驶的汽车减少了28,000辆。
“很多为我们工作的人都有一种令人信服的目标感,他们真的是在用AI来试图加速能源转型,但是我知道这并不容易。”
数据是基石
作为数字化转型的一部分,壳牌采用微软Azure和AWS这两种公有云、Docker和Kubernetes容器化技术,用于运行越来越先进的工作负载,以支持壳牌规模达2100亿美金的石油和天然气业务。
Dan Jeavons,壳牌计算科学和数字创新副总裁
Jeavons说,该战略的一个关键方面就是壳牌的基础数据层——不同工具和技术都可以从这个池子中系统地访问数据。
他说:“双云战略意味着你需要在管理和集成数据方面保持一定的一致性。当然,现在并不是所有的数据都会放在同一个地方,你有各种各样的数据库,大家都是如此。但从分析的角度来看,我们越来越多地将某些类型的数据整合到基于Databricks的集成湖架构中。”
在分析方面,壳牌将数据集成到Databricks Delta Lake的公共层中,并在公共平台中使用Python允许简单查询,以及集成了Power BI等可视化工具的典型报告查询。
但是在AI方面,这么做“让你可以在同一平台上运行各种机器学习工作负载。对我来说,这是向变革迈出的一步。”
例如,壳牌已经将所有全局时间序列数据(例如温度、压力、特定设备等信息)集成到基于Delta Lake的公有云中,让壳牌能够掌握全球大多数全球资产的情况,包括来自炼油厂、工厂、上游设施、风电场和太阳能电池板的数据。Jeavons说:“如今我们已经聚合了1.9万亿行的数据,这在全球范围内来说是一个庞大的数字。”
壳牌的人工智能举措还包括通过使用机器视觉识别来发现出现腐蚀的情况,以进行性能故障预测和能源资产完整性评估。Jeavons说:“我们还使用AI开发可以优化资产、使其大规模运行更有效、根据历史表现进行优化的技术。”他还支出,虽然壳牌的大多数AI举措都是依靠数据湖的实施,但是如果没有云的话,这一切都无法实现。
“关键是云的不断成熟,以及我们可以减少中间层以便直接提取来自工厂的数据,并将这些数据输送到云中,这对于推动数据分析和人工智能战略来说是很有帮助的。”
展望未来
壳牌总共拥有大约350名专业数据科学家和大约4000名专业软件工程师,他们远程工作,或者在壳牌位于印度班加罗尔、英国、荷兰或者美国德克萨斯州休斯顿之一的中心办公。
除了云和数据湖之外,壳牌还采用了微软Azure DevOps等高级开发工具,将GitHub集成到开发人员的工作模式中。Jeavons说,他们还将针对云部署更成熟的代码筛选工具,运行“适当的”CI/CD工作流程,并利用AI作为远程监控中心的一部分来监控全球10000台设备。
但最重要的是开发一个通用的数据湖,为壳牌提供“一个集成的数据层,以一致的方式提供跨业务的所有数据的可见性”。
他说:“我们是Delta的早期采用者,在相当长一段时间里它还是概念验证模式,而不是大规模负载部署。在过去的18个月里,我们看到了进展,而且我们一直在努力。”
然而,变革管理仍然是壳牌面临的最大挑战之一。
“你如何把技术嵌入到业务流程里,并让它发挥效用,成为日常工作的一部分,并且开发有效的算法?我要说,这是很难的,但很重要。大规模采用[AI]更加困难。这仍然是一段旅程,我们已经取得了一些进展,但还有很多工作要做。”
好文章,需要你的鼓励
Anthropic推出Claude Code的Slack集成功能,让开发者能直接在聊天线程中委托编程任务。这项测试功能于周一以研究预览版形式发布,基于现有Slack集成增加了完整工作流自动化。开发者现在可以标记@Claude启动完整编程会话,Claude会分析消息确定合适的代码库,在线程中发布进度更新并分享审查链接。这反映了行业趋势:AI编程助手正从IDE迁移到团队协作工具中。
波恩大学研究团队首次量化AI训练的材料成本,发现一块GPU含32种元素,93%为重金属。训练GPT-4需消耗约7吨金属材料,其中多为有毒重金属。研究建立了从计算需求到硬件消耗的评估框架,发现通过软硬件优化可减少93%的资源消耗。该研究揭示了AI发展的隐性环境代价,呼吁行业从规模竞赛转向效率革命,实现可持续发展。
AI发展推动数据中心行业迎来前所未有的挑战与机遇。Switch公司消耗内华达州三分之一电力,展现了AI对电力需求的巨大规模。核能成为AI未来发展的关键,单个AI机架功耗可达1.7MW。预计到2030年,数据中心行业将消耗200GW电力。创新的星形配置设计和差异化备电策略正在重新定义数据中心的弹性架构,仅20%的工作负载需要发电机备份。
南开大学团队构建了迄今最大规模的结肠镜AI数据库COLONVQA,包含110万视觉问答条目。他们发现现有AI模型存在泛化能力不足和容易被误导等问题,因此开发了首个具备临床推理能力的结肠镜AI模型COLONR1。该模型采用多专家辩论机制生成推理数据,在综合评估中准确率达56.61%,比传统方法提升25.22%,为智能结肠镜诊断从图像识别向临床推理的转变奠定了基础。