科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网CIO与应用频道为互联互通插上至强的翅膀

为互联互通插上至强的翅膀

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

根据2011年CNNIC的中国互联网调查数据统计,中国网民人数已经达到7亿人规模,而随着用户对互联网应用需求的不断复杂化,通过互联网提供的增值业务数量和占用流量也在不断增加。原来以图片和文字为主的互联网信息在向高清流媒体视频转变的同时,也对互联网运营商的服务质量提出了更大的挑战。

来源:SPN 2012年8月15日

关键字: 媒体投稿 互联网 大数据

  • 评论
  • 分享微博
  • 分享邮件

根据2011年CNNIC的中国互联网调查数据统计,中国网民人数已经达到7亿人规模,而随着用户对互联网应用需求的不断复杂化,通过互联网提供的增值业务数量和占用流量也在不断增加。原来以图片和文字为主的互联网信息在向高清流媒体视频转变的同时,也对互联网运营商的服务质量提出了更大的挑战。

尽管目前运营商纷纷大规模扩大带宽,但不同运营商之间多年以来,“电信网通,不联不通”的状况仍旧难以解决。受到中国互联网基础架构中不同运营商网络相互连通带宽的巨大瓶颈限制,一旦某个运营商网络体系内出现大规模访问其他运营商网内资源的情况,连接状况将会不可避免地收到滞阻。

不久前,工信部曾经专门发文提到目前我国互联网“宽带不宽”的现状。而运营商要提高用户满意度,就需要提升用户访问互联网数据,尤其是视频内容的流畅度。对运营商而言,随着“光纤入户”等工作的不断普及,自己网络内部的带宽,尤其是用户端的带宽已经不成问题,但是大量的跨网络并发数据仍旧会形成巨大的瓶颈。在许多场合,内容资源到达客户端仍然没有达到国家要求的速率。

而这种情况在移动运营商身上特别明显,虽然在移动语音市场上有先机,但是在数据网尤其是内容领域,移动运营商和传统固网运营商之间有非常大的差距。很多省份中,运营商甚至会面临“宽带送了也没人用”的尴尬局面,对于移动运营商和区域性中小运营商而言,找到破除跨网络带宽瓶颈的解决方法,已经是当下业务拓展过程中的燃眉之急。

拉近的信息高速路

通过缓存方式,将其他运营商网络的内容储存在本网内部,这种将访问资源下沉到“最后一公里”附近的方式,被认为是提高互联网资源实际访问速度的有效手段。如果在其他运营商网络内出现大访问量的视频内容时,根据访问量及时将视频保存到本网络内部的专用服务器中,即可大幅缓解大量用户同时访问外网相同内容造成的带宽占用压力。

自从2008年初成立以来,上海山牡泽牡网络科技有限公司一直专注于提供相关的服务内容。这家几乎整个创始团队都在电信运营商行业有十年以上工作和管理经验的公司,从成立初期就对中国互联互通不充分的状况有充分的了解。“目前中国的互联网资源,60%存储在电信网络,30%存储在联通网络中,其他所有运营商加起来只存储有10%的资源。”上海山牡泽牡网络科技有限公司总经理助理郑骊介绍,“其他的运营商,如移动、长宽等,在内容提供上都是弱势群体,如果把热点内容存放到他们的网内,就能给更多内容的访问提供方便。而且,即便对于强势运营商来说,用户流量的暴增同样会给骨干网络通道带来压力。比如,北京到广州之间的骨干网络带宽是有限的,为了避免高并发内容大量占用骨干网络带宽,同样需要将热点的内容存储到离‘最后一公里’更近的地方。”

山牡泽牡公司提供的Greatstream XP4P Cache解决方案,是针对高并发访问的P2P资源进行分发,通过域内用户的P2P请求归纳整理,实现热点资源的本地化存储。“我们队用户的访问请求进行监控,一旦发现有多个用户访问同一内容,就会自动地把内容的碎片存储到本地服务器上。”郑骊介绍。模块化的系统通过P4P架构和云计算技术相结合的方法,可根据用户规模和网络扩容等指标进行系统灵活扩容和平滑升级。

在整个解决方案中,服务器设备直接部署在运营商数据中心,一部分对所有骨干网络流量进行监控,对用户访问热点进行收集;而另一部分则对热点数据进行缓存和内容分发。解决方案覆盖了当前95%以上的P2P协议,与传统CACHE服务器的被动式资源存储分发方式相比,山牡泽牡公司的解决方案实现了域内热点资源的实时更新。在满足用户容量及系统功能的情况下,充分考虑P2P缓存系统的平滑扩展能力以及运行的安全性和稳定性,保证系统能够连续、稳定、安全的运行。系统采用旁路部署方式,关键设备实现1+1热备份,可靠性达到99.99%。

信息高速路上的至强引擎

与传统的缓存服务器相比,这种新的、智能化的方式同样也会造成对IT基础架构的全新需求。目前随着在线高清内容的普及,单个热点文件的大小已经到达GB级,加上随时随地可能产生的访问热点以及巨大的运营商网内用户数量,使得计算能力的需求比以前有了非常大的增加。在山牡泽牡Greatstream XP4P Cache解决方案中,实现了峰值850Mbps的单台缓存设备最大吞吐量(单向) ,单台缓存设备最大并发连接数不低于2万(部分峰值3万),在为省级运营商提供的解决方案中,整个缓存系统的输出均已达到10Gbps以上。而如何实现精细化的数据分发,同样对整体架构和服务器的计算能力提出了新的要求。

从开始运作第一个项目以来,山牡泽牡公司一直是英特尔至强服务器的忠实用户。从最开始的至强5400到现在采用的至强E5,不断提升的计算性能为山牡泽牡公司更好地服务运营商用户提供了巨大的帮助。

从山牡泽牡公司成立以来,浙大网新易得一直作为该公司服务器设备合作伙伴。网新易得产品经理董锴介绍,在英特尔发布至强E5服务器处理器之后,山牡泽牡公司新部署的系统中也大量采用了基于新架构的产品,由于新产品更强大的计算性能和对虚拟技术更好的支持,原来跑在两到三台服务器上的应用现在可以简并到一台服务器中,性价比有了很高的提升。而针对一些计算性能要求更高的环境,最新发布的四路E5服务器同样可以非常好地完成客户要求的任务。董锴介绍,针对用户访问量极高的热点数据,网新易得还为山牡泽牡公司提供了基于英特尔企业级固态硬盘的分层存储解决方案,在用户体验上实现了接近20%的提升。

自第一套系统中标部署至今三年以来,山牡泽牡公司为各省运营商提供的系统从未出现任何影响业务的故障,而采用浙大网新易得提供的,基于英特尔架构的服务器则为系统的可持续运行提供了可靠的保障。作为IT基础设施供应商,浙大网新易得早在山牡泽牡网络成立之初,就开始对这家服务提供商所需要的底层IT架构投入持续的关注。

山牡泽牡公司也曾经针对性价比、兼容性等关键因素,对包含英特尔架构服务器、其他X86服务器和RISC服务器在内的不同平台进行过综合评估。“在我们解决方案的服务器产品选型中,最重要的两点一是性价比,一是设备对我们现阶段网络的运用情况。”郑骊说,“由于解决方案牵涉到很多对驱动的二次开发,需要设备有非常高的兼容性和广泛的平台支持性,才能为运营商客户提供更好的服务效果。”

挖掘大数据金矿

在内容分发业务在运营商中实现成功部署之后,山牡泽牡公司也将未来的业务发展方向瞄准了热门的海量数据挖掘和分析领域。郑骊介绍,用户访问的热点数据中包括大量高价值的非结构化信息,如何更好、更精确地了解用户的访问内容,从而进行精细化管理,就能提前实现信息的智能化管控、不良信息的预搜索和屏蔽等效果。

而要实现对数据的有效挖掘分析,作为开源分布式计算框架的HADOOP是一个成熟的解决方案。而由于具备与至强服务器硬件结合性能更好、系统运行更稳定和更易于管理等特质,使得山牡泽牡公司在未来的业务规划中也把英特尔的HADOOP发行版作为首选的解决方案。郑骊介绍,山牡泽牡公司与英特尔的技术部门已就如何应用HADOOP实现整体架构优化和数据分发等方面进行过多次研讨。

“运营商用户的数据量非常大,基于HADOOP的架构能显著提高他们的效率。运营商要想对用户行为进行数据分析,内容进行精细管理,就涉及到非常大规模的计算,需要用分布式计算的数据库来取代现有的数据关系。而基于英特尔至强服务器架构的HADOOP解决方案具备良好的接口,能为用户提供更好的服务。”郑骊说,“在底层的研发工作方面,英特尔已经帮我们打好了基础,我们需要做的就是针对运营商的应用,提供自行开发的增值服务。”

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章