ZD至顶网CIO与应用频道 08月09日 北京消息:根据IDC研究显示,大数据解决方案将在未来四年中,帮助全球企业分享大约1.6万亿美元新增收入的数据红利。在大数据产业发展中,以Hadoop为代表的开源大数据生态成为大数据和云计算的重要技术支撑,有效推动了开源社区的用户和贡献者,带动了技术进步与商业发展。而在全球范围内,大数据行业正在面临数据专业人才短缺的困境。
2016年8月5日,清华大学数据科学研究院(“清华数科院”)宣布与Cloudera合作。
Hadoop之父、Cloudera首席架构师Doug Cutting与清华大学数据科学研究院管委会副主任、副院长王建民
清华大学数据科学研究院成立于2014年4月,此次合作旨在借助大数据带来的挑战与机遇,推动学校跨学科资源的整合。逐步完成培养大数据的硕士研究生为主的教学任务,取得标志性的学术成果,让清华对大数据的研究应用于产业发展。Cloudera则是当前基于Apache Hadoop及最新开源技术建立的最快捷、最易用、最安全的数据管理和分析平台的全球供应商。
Cloudera CAP项目是为合作机构提供一个完整、免费、行业级标准的Hadoop培训课程,清华大学和Cloudera将联合发布BASE (Big Analytics Skill Enablement)倡议,以解决中国大数据行业的人才稀缺困境。此次合作还将推动中国研究机构与企业参与国际大数据开源社区建设。
与传统计算机科学和商业分析课程不同,通过CAP,清华数科院将与Cloudera共同为教师与学生提供完整的免费Hadoop课程,学生不仅能从基础的Hadoop开始,也可以学到诸如Spark,Hive,Impala等在全球Hadoop社区最新的技术,这不仅为学生们提供全面的技能培训,优秀的大数据人才将为公共事业和企业带来创新,并在全球视野内获取有竞争力的优势。
据了解,清华数科院与Cloudera的合作,还将着力推进国际大数据开源社区的相关活动在本地的融合,提高本土团队对已有项目参与度,贡献新的开源项目。双方合作的愿景是推动大数据技术在中国的大范围应用,同时将中国本土创造的技术回馈国际开源社区。
清华大学副校长杨斌表示:“首先代表清华大学对数据科学研究院与Cloudera的合作表示衷心的祝贺!在全球数字化转型的时代,Cloudera和清华大学都是积极探索者。希望此次合作可以充实清华大学大数据人才的专业课程、软件及技术培训,以解决中国大数据行业的人才稀缺困境。并基于开源社区建立长效的,产业界与学术界融合交流的平台。”
清华大学数据科学研究院管委会副主任、副院长王建民表示:“清华大学数据科学研究院是统筹全校学科资源,整体布局建设的大数据教学与科研机构。在科研上,一直坚持以数据共享和整合为基础,以研究应用为核心,建立大数据分析共享平台,推出具有自主知识产权的大数据分析开源软件和服务。在此过程中,数据科学研究院坚持走来自开源回归开源的开放技术路线,以产业需求为拉动,将产学研用都纳入到开发体系中,坚持国际合作,使源自中国的技术走向世界。这也是为什么我们选择与Cloudera的合作。希望本次合作能打造国际化的开源生态,从而推动中国大数据产业的发展。”
Hadoop之父、Cloudera首席架构师Doug Cutting表示,“Hadoop正处于蓬勃的发展期,而且这样的蓬勃至少还需要几十年。自Hadoop创立之初至今已有十年,而Cloudera成立也有八年之久、进入中国一年半了。与中国清华大学的合作,显然会加速Cloudera在中国的发展。我们很荣幸能为中国大数据人才教育做出贡献。”
同时,Cloudera也发布了BASE (Big Analytics Skills Enablement)倡议——它是一个以行业为主导的生态系统,用以培训未来的数据专业人才。BASE也是为战略性填补数据专业缺乏的鸿沟而诞生的,它带动了行业参与者以及学术机构一起为更多的人培训大数据和分析领域所需的技能,同时让经过训练的数据专家在相关领域和行业得到合适的工作机会。
好文章,需要你的鼓励
随着员工自发使用生成式AI工具,CIO面临影子AI的挑战。报告显示43%的员工在个人设备上使用AI应用处理工作,25%在工作中使用未经批准的AI工具。专家建议通过六项策略管理影子AI:建立明确规则框架、持续监控和清单跟踪、加强数据保护和访问控制、明确风险承受度、营造透明信任文化、实施持续的角色化AI培训。目标是支持负责任的创新而非完全禁止。
哈佛、MIT联合研究揭示人类语言理解的神经机制,发现大脑通过"信息出口"将语言从核心系统传递至专业脑区实现深度理解。研究提出浅层与深层理解的区别,为人工智能发展提供重要启示,表明真正智能需要多系统协作而非单一优化。该发现可能改变我们对语言认知的理解。
英国正式推出DaRe2THINK数字平台,旨在简化NHS全科医生参与临床试验的流程。该平台由伯明翰大学和MHRA临床实践研究数据链开发,能够安全传输GP诊所与NHS试验研究人员之间的健康数据,减少医生的管理负担。平台利用NHS现有健康信息,安全筛查来自450多家诊所的1300万患者记录,并使用移动消息系统保持试验对象参与度,为传统上无法参与的人群开辟了研究机会。
腾讯混元等团队开发出革命性的AI视频生成自我评判系统PAVRM和训练方法PRFL,让AI能在创作过程中实时评估和改进视频质量,无需等到完成才反馈。该技术使视频动态表现提升56%,人体结构准确性提升21.5%,训练效率提升1.4倍,为AI视频生成质量带来质的飞跃。