最近看到一个有趣的问题:
dy服务器的带宽有多大,为什么能被这么多人同时使用?
作为程序员,今天给大家科普一下。
dy、百度、阿里云、腾讯都是自建数据中心。
都是T级出口带宽(总出口带宽),即出口带宽达到1T=1024G/s。
一般管理的服务器基本在20万台以上,阿里云也有100万台以上。
字节跳动数据中心的总带宽可能在10TB左右,预计很快会突破15TB的水平。
一般情况下,总出口带宽为1TB,机房实际出口带宽可能只有100G。这是双(多)链路设计。双出口实现动态流量共享,总出口带宽可达T级。
如果一个大型数据中心想要上亿人同时在线,TB级带宽、CDN加速、多节点、负载均衡等技术必不可少。 (这个设计技术太复杂了,有相关专业的朋友可以评论一下简要概述)
字节跳动有多少台服务器?
根据网络数据,2017年有20000-30000台服务器,此时以租用服务器为主。
2018年,字节跳动建立了自己的数据中心。
最大的数据中心位于河北省怀来官厅湖新媒体产业园,一期5万台服务器,二期9万台服务器。
2018年租用+自建服务器数量达到17万台。
2020年,字节跳动招聘公告数据显示,服务器数量为42万台。 1.是 2018 年的 5 倍。
一个机柜10-20台服务器这部分服务器在中国地区使用,主要使用国产dy、西瓜视频、今日头条、飞书等产品。
TIKTOK在美国是独立运营,数据在美国本地存储和分发。
2020年,Tiktok还在美国租用了近10万台服务器。据Business Insider公布的数据显示,2020年上半年,字节跳动在美国弗吉尼亚州北部租用了一个能耗为53兆瓦的数据中心。
在高达数十万平方英尺的区域内可容纳数十万台服务器。
Tiktok 正在印度和新加坡投资数据中心。
字节跳动大数据中心的出口带宽是多少?
说完了服务器数量,再来说说硬核:字节跳动大数据中心的出口带宽是多少?
知识点:所谓出口带宽,其实就是普通人所说的下载带宽,也就是服务器向每部手机分发数据的总速度。
一般情况下,小型IDC公司自建机房,比如一些网站公司从中国联通、中国移动、电信租用机房,可能只有5G整体出口带宽。 30G以上是有一定规模的公司。
互联网公司的收入是数千万美元。因此,经常看到一些规模不错的企业,基本不再自建机房,使用云主机。比如阿里云的ECS、腾讯云、百度云、AWS(亚马逊)。
一般企业网站(企业官网),20M带宽,4G内存,100G硬盘,一年4000-5000元的价格就够了,赶上活动价可能会更便宜。
这是最昂贵的带宽。当然,将带宽提高到一定水平。例如,如果访问量增加,则需要增加内存和硬盘。
相比之下,如果增加带宽,成本会更贵。
让我在这里给你解释一下:带宽是昂贵且稀缺的资源。
我们看一下中国移动的一个机房,中国移动(河北石家庄)数据中心的数据:占地174亩,总建筑面积13万平方米,规划了10座独立建筑。 30,000个机架的装机容量。
3个IDC机房可提供3.10000个机架和15T带宽资源。
在一个机柜中,全1U设备数量一般不超过16个,全2U设备一般不超过12个,全4U设备一般不超过4到7个。我们采取高性能2U和4U服务器平均取舍,每台算一半(毕竟移动也是富豪大户,买不到低端的1U设备)。
然后3.可以安装10000个机架,最多210000-360000台服务器。这是一个粗略的平均值:300,000 台服务器。享受 15T 的出口带宽资源。
当然,作为电信的骨干网络,移动带宽资源肯定比字节跳动更有优势。
所以,我们粗略估计一下字节跳动自建的 17 万台服务器数据中心。总出口带宽可能在 7Tb-10TB 左右。
基本上会采用双出口流量设计,再加上多链路部署方式:实际出口带宽可以800G-1TG,总出口带宽约10T。
T级出口带宽是什么概念?如果我告诉你,2009年整个上海的出口带宽只有1140G,刚刚达到1TB。
短短10年,企业数据中心的出口带宽就超过了1TB,真是难以想象。
要知道,2009年,尽管智能手机还不发达,但个人PC销量已经非常大了。
CDN加速让大众刷dy看视频不卡顿。
知识点:CDN(Content Delivery Network,内容分发网络)。将服务器的内容发布到离用户最近的边缘节点,让用户就近获取想要的内容。
解决互联网网络拥塞问题,提高用户访问网站的响应速度。各种加速解决方案的集合。
用通俗的话来解释CDN就是:有的页面会被专门压缩,有的会被压缩成静态页面,静态页面会很快分发出去。
用户可以在2s内看到内容,体验更好。
【这是静态传输】对于动态视频,首先通过智能路由寻找最佳路径,然后协议优化压缩长连接和内容去除冗余。
【这就是动态压缩】我们来看看腾讯2015年的5亿日活跃用户,一个CDN级别的集音乐、即时通讯等产品于一身的CDN级别,带宽达到了10TB。每天有数万亿个请求。
2015年腾讯CDN的水平所以我这里说字节跳动整体服务器有10TB,应该不会很多。
毕竟dy有6亿的DAU,西瓜视频+今日头条大概有2亿,总共有8亿的DAU。
就是这么大的带宽和技术实力,让我们看视频这么流畅。
你学会了吗?
赠书福利 赠送新书《人工智能数学基础》共2本,刚刚上架!由「 北京大学出版社」赞助提供 ,感兴趣的朋友推荐入手一本。
本书的目的是解释基础知识。它面向数据科学和人工智能的读者。通俗易懂地讲解每一个知识点,旨在帮助读者快速打好数学基础。
本书分为4部分,共17章。第一部分是数学知识基础,主要介绍高等数学基础、微积分、泰勒公式和拉格朗日乘子法;第二部分是数学知识的核心,主要介绍线性代数、特征值和矩阵分解的基础知识、概率论基础、随机变量和概率估计;第三部分是数学知识的提升,主要描述了数据科学的几种分布、核函数变换、熵和激活函数;第四部分是数学知识的应用,主要介绍回归分析、假设检验、相关分析、方差分析、聚类分析、贝叶斯分析等。
本书适合准备从事数据科学和人工智能相关行业的读者。
本次开奖时间为 2021.9.20 14:00
为了避免中奖后失联,提前加我微信号:qukuanji777
优质信息(1份)
领悟优质评论点赞数获得《Python数据分析与大数据处理从入门到精通》
PS:买点赞等作弊无效,所有解释权归程序所有。
-EOF-
点赞和关注是最大的支持❤️