快手APP背后,是一个不为人知的快手
”
当一些人对快手的印象还逗留在“老铁666”的刻板作图,快手早已“快人一手”。
6月6日,快手宣布将投资百亿在内蒙古乌兰察布市建立数据中心。据介绍,快手乌兰察布大数据中心是快手第一个自建超大规模互联网数据中心,建成后可达60EB以上总储存容量,相当于超过300万个国家图书馆,这也是国外最大的专门为“大数据、人工智能”建设的数据中心。
以短视频著称的快手,为何要大兴土木投资百亿建大数据中心?
1
快手为什么自建数据中心
数据中心,顾名思义是承载着企业核心业务的基础设施,数据在其中估算、存储和传输,通过各种智能终端和互联网,我们每晚都在和数据中心发生难以计数的联接。
数据中心下降和互联网的发展具有显著的同步性,互联网的典型业务从网站、电商、游戏进化到视频等,对于数据和流量的须要呈指数级下降,数据中心产业的“质”和“量”都有了显著提高。
信通院数据显示,2010年全球传统大型数据中心规模占估算实例的79%,而到了2018年全球超小型数据中心规模占估算实例的89%。
此外,2013年以前,全国对外服务型数据中心平均PUE(Power Usage Effectiveness,电源使用效率)在2.5左右,而到2019年底,全国对外服务型数据中心平均PUE近1.6。
数据中心朝着大型化、集约化的方向迈向,是由企业自身业务推进的,快手同样这么。
2020年2月21日,快手大数据研究院发布《2019快手内容报告》。报告显示,截至2020年初,快手日活已超过3亿,2019年共有2.5亿人在快手发布作品,快手App上早已有近200亿条视频,累计点赞数超过3500亿次。
快手多元内容生态爆炸式发展,背后须要海量的数据储存,在雷锋网看来,快手业务下降的速率肯定要远远超过数据中心规划建设的速率,数据中心从规划到投运以年估算,快手只能采取租赁的形式先行减轻业务下降需求,再逐步过渡到自建模式。
尽管如此,快手选择自建数据中心的时间表也超出预估。以BAT为例,分别组建于2000年、1999年、1998年,但是自建数据中心的规划起码都在创立十多年后,正式开馆同样须要数年。
这可从两方面来理解,快手主营业务是视频和直播等,和BAT业务属性不同,天生须要更多的数据中心资源,所以提早规划是正常的。
同时从国家角度,国家正在大力提倡新基建,数据中心是新基建的重要组成,也代表着企业的“硬实力”,快手选择此时自建数据中心也能获得更为便利的市场和行业条件,乌兰察布本身就具备良好的电力、空气、温度等条件,国内外一批小型数据中心都在此开馆,快手选择丰镇是成熟稳当的选择。
此外,自建数据中心还是企业的技术试验田,不论是数据中心自研核心技术,还是探求人工智能等各种应用技术,只有在企业自己的数据中心能够更好地施行。
在承德建设IDC将成为快手的标志性里程碑,雷锋网了解到,快手今后将充分评估各地的建设条件,在全省范围进行超大规模IDC布局。
2
数据中心如何“快人一手”
快手APP背后,是一个不为人知的快手,体现在其对于数据中心技术的超前规划和大胆实践。
雷锋网此前走访过阿里、腾讯、百度、华为和易迅等多家大鳄的数据中心,和那些企业不同的是,快手没有历史包袱,也就意味着可以采用时下最前沿的技术,从土建到服务器,从选址到规划,从零构建快手式数据中心。
据介绍,快手乌兰察布数据中心PUE规划为预期最佳1.08,平均PUE1.15,这须要多方面的技术支撑,主要包括IT设备、制冷和供配电。
快手数据中心将采用新一代整机柜服务器设计,集中供电,独立散热,同时兼容整机柜形式和传统方法,采用模块化设计,计算储存前馈分离设计,有效提高单位布署密度,同时提高产品开发效率,打破传统服务器起码一年的研制周期限制,支持新型号快速研制上线。
整机柜服务器将电源、散热、交换等非计算机IT体系结构模块集成在一个机柜中,可以提升机柜空间利用率、提高电源效率、降低服务器煤耗水平,整机柜模式还有利于快速交付,与传统的机架式服务器相比,交付效率可提高10倍以上。
制冷方面,快手数据中心计划采用间接蒸发冷却系统,并且规模应用在自建数据中心。制冷系统的煤耗约占数据中心总体煤耗40%,间接蒸发冷却是目前好多小型新建数据中心偏爱的技术,利用直接蒸发冷却后的空气(二次空气)和水,通过换热与室内空气进行热交换,实现新风(一次空气)冷却,虽然技术门槛较高,但是具备耗水量少(较业内方案节水60%)、节能水平高等优点。
供配电方面,快手将采用高压直流(HVDC)方案,较业内方案减少10%建设成本,HVDC方案将高压直流电直接供给服务器等IT设备,最大化降低电力传输、转换过程中的耗损。
除了IT设备、制冷和供配电之外,快手数据中心快手打算建立新型CLOS网络,采用“单芯片”高吞吐的盒式“交换机”,在数据中心内规模化布署高性能无损以太网(RDMA),将储存网路、AI估算网路、业务网路进行统一融合,支撑大数据、AI、推荐、分布式存储等业务的高速发展。
另外,快手将在自建数据中心内全面规模布署多样化硬件,包括AI(推荐、广告、内容理解)、视频、网络和储存设施等。
雷锋网据悉,该数据中心由快手技术团队自主研制,独立完成整体概念设计,自建数据中心是企业由大变强的标配,租不如买,买不如建,快手选择了一步到位,门槛更高却疗效最长久。
从某种意义上,快手正走在和BAT相像的路上,但快手同时又有自己的鲜明特色。
3
九周年的快手
前有Amazon、Google、Facebook和谷歌等脑部互联网公司推动,后有BAT等国外小型互联网公司跟进,自建数据中心早已成为大鳄标配。
整体看,架构方面国内外差别逐渐缩小,但在清洁能源应用、末端供电技术、监控智能化、运维能力方面海外仍然保持一定的先进性。
“我们要更站在未来的角度看如今,因为快手业务发展快,我们被逼着必须得站在未来去看如今,要不然后边会特别痛楚。”快手数据中心技术负责人张子坚表示。
据他介绍,结合快手自身发展情况,其数据中心储备和规划可以分为三个阶段:
第一阶段,从创立到2018年,呈现分散化、小型化的特性;
第二阶段是2019年全年,主要布局在上海及周边,这一年快手数据中心规模直接从国外前十发展到第五,数据中心数目激增但仍然分散;
第三阶段就是2020年以后,快手开始系统性从未来业务发展情况出发,大胆的做三年规划。
“数据中心小且多,成本压力和营运管理压力突出,给业务带来很大的不确定性,基础资源要能支持业务的发展,而不是制约它的发展。”张子坚表示。
业务体量大造成数据中心资源供应不及时,这是发生在每位快速下降企业的相同故事,但是快手业务和资源之间的矛盾也变得尤为不同。
以快手数据中心发展的第二阶段为例,仅用一年时间就过渡到第三阶段,在互联网行业也非常少有。BAT自建数据中心时,互联网还处于稳步增长而非爆炸式下降状态,BAT并不非常明晰未来的业务模式,这也决定了BAT不会大举自建超大型数据中心。
但快手不同,数据中心仍然处于追赶业务发展的情况,自建数据中心也就不是激进,而是查漏补缺,既然早晚要自建,为何不是现今?
2019年,快手研究院出版了一本名为《快手是什么》的自白书,快手两位创始人分别回答了“快手是哪些”的问题。
快手科技创始人兼CEO宿华:“注意力是互联网的核心资源,我们希望尽量让更多的人得到注意力,提升每位人奇特的幸福感。”
快手科技创世人程一笑:“快手是一个连接器,连接每一个人,尤其是容易被忽视的大多数。”
在面对例如快手怎么向未来进化等持续不断的提问,快手早已得出了自己的推论。
2017年12月,快手DAU突破1.1亿,快手将之归由于技术驱动带来迅猛下降。2020年6月6日,恰逢快手创立九周年,这一次,快手再度选择了更为硬核的底层基础设施技术。
这不是哪些难做的选择题,过去十年,商业模式驱动互联网创新,未来六年,技术才是撬动未来的那根杠杆。
说快手是一家视频公司,其实并不确切,视频是载体,正如文本改变了社会的方方面面,但是没有人会把文本当作一个行业,快手希望视频也能达到同样的目标。
文字能承载的信息,视频同样能承载而且更多。雷锋网观测到,疫情过后这些趋势格外清晰,快手正支持各行各业在快手之上产业化,通过直播给企业和个人提供各种各样的机会。
从另一个维度来说,快手和其他提供数字化变革能力的技术供应商一样,是在帮助各行各业构建数字化的世界,企业、产业和短视频、直播的集合,就是一个线下到线上的联接闭环。
疫情让你们看见了短视频平台+传统行业激发的新机遇,展望未来,具有高速率、低信噪比、大容量等特点的5G网路的发展,将为短视频发展和应用提供更充分的基础设施支撑。
短视频、直播等业务模式,或是数字化、产业化的愿景,都离不开数据中心等基础设施,快手不能只在应用层做技术,更要在基础设施层有所作为。
数字基础设施是新的护城河,以六年为测度,快手还很年青。
往期推荐