北京字节跳动有限公司旗下,除了最为人所熟知的两款产品“今日头条”和“抖音”,还包括“西瓜视频”、“火山小视频”以及“悟空问答”等其他产品线。
字节跳动在美租用数据中心:数十万台服务器,能耗达53兆瓦。
近日有报道称,今年上半年字节跳动达成三起交易,在弗吉尼亚州北部租用了能耗达53兆瓦的数据中心。分析师称,能耗如此大的数据中心,可以容纳数十万台服务器,占地面积可达数十万平方英尺。
图片来自 Pexels
抖音,百度,阿里云,腾讯都是自建的数据中心,都是 T 级别出口带宽(总出口带宽),也就是达到 1T=1024G/s 的出口带宽,服务器总署基本都在 20 万台以上,甚至阿里云都超过了 100 万台。
字节跳动的数据中心总带宽,可能在 10TB 级别左右,预期突破 15TB 级别不远了。
一般情况下:总出口带宽 1TB,实际机房出口带宽可能只有 100G 上下,这是采用双(多)链路设计,双出口实现动态流量分担,总的出口带宽可以达到 T 级别。
大型数据中心
想要同一时间有数亿人在线,TB 级别带宽,CDN 加速和多节点,负载均衡等等技术缺一不可。(这个设计技术过于复杂,有相关专业朋友,可以评论简要概述)
CDN 加速
字节跳动有多少台服务器?
根据网络数据整理,2017 年 2-3 万台服务器,这个时候主要是租用服务器为主。
2018 年,字节跳动自己建设了数据中心,最大的数据中心在河北怀来官厅湖新媒体产业园,一期 5 万台服务器,二期 9 万台服务器。
2018 年,租用+自建的服务器数量达到 17 万台服务器。
2020 年,根据字节跳动招聘公告的数据,显示有 42 万台服务器。比 2018 年增长了 1.5 倍。(数据来自网络)
一个机柜中 10-20 台服务器
这部分服务器都是给中国区域使用,主要应用国内的抖音,西瓜视频,今日头条,飞书等产品。
在美国的 TIKTOK 是独立出来的运营,数据在美国当地存储和分发。2020 年 Tiktok 在美国也租用了近 10 万台服务器
据 Business Insider 公布数据,2020 年上半年,字节跳动在美国弗吉尼亚州北部租用了能耗达 53 兆瓦的数据中心。可以容纳数十万台服务器,占地面积可达数十万平方英尺。
Tiktok在印度,新加坡都在投资建设数据中心。
字节跳动大型的数据中心出口带宽是多少?
聊完了服务器数量,那么咱们来点硬核的东西
如果想要同一时间有数亿人在线,TB级别带宽,CDN加速和多节点,负载均衡等等技术缺一不可。
其实,抖音,百度,阿里云,腾讯都是自建的数据中心,都是TB级别出口带宽(总出口带宽),也就是达到1TB=1024G/s的出口带宽,服务器总署基本都在20万台以上,甚至阿里云都超过了100万台。
据研究,字节跳动(抖音)的数据中心总带宽,可能在10TB级别左右,预期突破15TB级别不远了。
抖音为什么能够供上亿人同时刷?它的带宽有多大?
服务器集群
抖音并不是全国所有刷视频用户都在同一个地方的数据中心接入我们看视频的流量,如果是这样的话,那么这个数据数据中心所需的带宽就是过于巨大。
一般来说,抖音在全国各地会建设几个比较大的数据中心,也就是服务器集群,我们刷视频的请求是就近接入的。
而且每个数据中心都会和三大运营商网络对接。这也就意味着你是如果是上海移动用户,那么刷出来抖音的视频将会从上海移动的网络接入抖音。
抖音为什么能够供上亿人同时刷?它的带宽有多大?
字节跳动有多少台服务器?
根据网络数据整理,字节跳动2017年有2-3万台服务器,这个时候主要是租用服务器为主。2018年,字节跳动自己建设了数据中心,最大的数据中心在河北怀来官厅湖新媒体产业园,一期5万台服务器。二期9万台服务器。
抖音为什么能够供上亿人同时刷?它的带宽有多大?
2018年,租用+自建的服务器数量达到17万台服务器。
2020年,根据字节跳动招聘公告的数据,显示有42万台服务器。比2018年增长了1.5倍。(数据来自网络)
在海外,例如在美国的TIKTOK(抖音国际版)是独立出来的运营,数据在美国当地存储和分发。2020年TIKTOK在美国也租用了近10万台服务器,占地面积可达数十万平方英尺。
抖音为什么能够供上亿人同时刷?它的带宽有多大?
CDN让视频不卡顿
上面说到服务器集群,再说说CDN等技术,属于是硬性要求,基本都是视频行业的标配了,抖音肯定也不例外。
CDN是做内容分发,用通俗的话解释CDN就是:会把一些页面,专门压缩,有的压缩为静态页面,静态页面直接分发,速度快。用户可以在2s内看到内容,体验感更好。这是静态传输。
对于动态视频,首先通过智能路由,寻找最佳路径,然后协议优化将长连接,内容进行压缩,去除冗余。这就是动态压缩。
抖音为什么能够供上亿人同时刷?它的带宽有多大?
早在2015年腾讯就有5亿日活,集合了音乐,即时通讯等等产品的CDN的级别,达到了10TB带宽。每天请求万亿次。
目前抖音日活有6亿,西瓜视频+今日头条我们粗略算是2亿,总计有8亿的日活。所以,字节跳动整体服务器有10TB只少不多。
所以,拥有这么大的带宽和技术实力,才能让上亿人同时刷视频不卡顿。
字节跳动就自研芯片传闻做出回应
字节跳动就自研芯片传闻做出回应,字节跳动发言人日前证实了这一消息,并表示之所以考虑自研芯片,是因为无法找到能够满足其要求的供应商。字节跳动就自研芯片传闻做出回应。
字节跳动就自研芯片传闻做出回应1近日有消息称因无法找到能够满足其要求的供应商,字节跳动正在探索可供自身在专业领域使用的芯片设计。字节跳动公司发言人表示,这些针对需求定制的芯片将帮助处理字节跳动在视频平台、信息和娱乐应用等业务领域的相关工作负荷,并不会将芯片销售给其他公司。
今日上午,针对自研芯片一事,字节跳动副总裁杨震原在接受媒体群访时表示,公司无通用芯片商业计划,没有涉足CPU、GPU等通用芯片业务。
除了主要采购X86芯片,字节也和芯片供应商探索RISC架构芯片在云端的使用。字节的自研芯片探索主要围绕自身视频推荐业务展开,研发团队将为字节大规模视频推荐服务专用场景定制硬件优化,如视频编解码,云端推理加速等,以期提升性能,降低成本。
在今日的2022火山引擎原动力大会上,火山引擎发布全新Slogan“云上增长新动力”,并推出以云为底座的一系列产品解决方案,包括企业上云和智能营销通用方案,以及覆盖金融、汽车、消费、文娱、医疗、通信传媒六大行业的云上增长方案。这是在去年推出IaaS云基础产品以来,火山引擎在云市场的再次加码。
火山引擎是字节跳动旗下六大业务板块之一。火山引擎总裁谭待介绍,云上增长方案结合了字节最佳实践和行业发展趋势,以敏捷迭代、体验创新和数据驱动作为增长三要素,由火山引擎与不同行业标杆客户共创打磨形成。
据悉,抖音电商从发展初期接入了火山引擎的数据服务。与传统货架电商不同,兴趣电商对实时数据反馈的要求极高。火山引擎实时数仓为抖音电商提供了实时大屏、实时分析、实时预警、实时营销的全套实时数据,帮助商家和运营人员做好业务增长。
杨震原认为,技术和业务是一个互构的关系。抖音电商业务在成长过程中对技术部门提了很多需求,制造了很多“麻烦”。正是这些“麻烦”,才让技术工具更好地改进。优秀的技术工具也能够让抖音电商的效率提高,技术和业务互相塑造、共同成长。他说:“火山引擎沉淀了字节内部业务的技术实践,希望也能够帮助外部客户提升业务价值”。
据介绍,目前火山引擎已服务了包括中国银联、招行、建行、华泰证券、上汽集团、长安汽车、吉利汽车、国家电网、中国航油、陕旅集团、蓝河、OPPO、小米、海尔、美的、海信、创维等头部客户。
字节跳动就自研芯片传闻做出回应2有消息称,字节跳动方面正招聘大量芯片相关工程师岗位,包括SoC和Core的'前端设计、模型性能分析、验证、底层软件和驱动开发、低功耗设计、芯片安全等,工作地点主要位于北京和上海。对此有猜测认为,该公司或将是在自研芯片。
对此字节跳动发言人日前证实了这一消息,并表示之所以考虑自研芯片,是因为无法找到能够满足其要求的供应商。同时他还强调,相关芯片仅供内部使用,不会对外销售。
据了解,字节跳动的自研芯片将针对该公司多个业务领域的特定用途进行定制设计,包括视频平台、信息和娱乐应用等。目前,该公司芯片团队分为服务器芯片、AI芯片以及视频云芯片三大类,其中服务器芯片团队的负责人为来自高通的资深人士卢山。此外有消息源透露,该公司还从华为海思、Arm等公司高薪聘请了相关人才。
对于节跳动开始自研芯片,有业内人士认为,自研芯片一方面可以降低采购成本,另一方面还能够根据公司业务随时调整芯片设计,从而获得更多的自主性。同时他还指出,在生产方面字节跳动或仍需台积电等代工厂的帮助,而这也是目前业内通行的方式。
据悉在字节跳动之前,小米、OPPO、vivo 等企业,以及阿里、腾讯、百度等互联网公司也均已开始自研芯片,并取得了一定的成果,例如百度的昆仑芯片、OPPO的马里亚纳X等。
字节跳动就自研芯片传闻做出回应3上周有人发现字节跳动正在大量招聘芯片相关的工程师,如 SoC 和 Core 的前端设计,模型性能分析,验证,底层软件和驱动开发,低功耗设计、芯片安全等。知情人士称,这或是字节跳动准备自研芯片。
针对近期媒体报道字节跳动自研芯片一事,公司副总裁杨震原 20 日在接受媒体群访时表示:公司无通用芯片商业计划,没有涉足 CPU、GPU 等通用芯片业务。
他表示:除了主要采购 X86 芯片,字节跳动也和芯片供应商探索 RISC 架构芯片在云端的使用。字节的自研芯片探索主要围绕自身视频推荐业务展开,研发团队将为字节大规模视频推荐服务专用场景定制硬件优化,如视频编解码,云端推理加速等,以期提升性能,降低成本。
字节跳动公司发言人也承认该公司正在考虑设计自己的芯片。此举标志着字节跳动将加入一系列研发半导体的中国互联网巨头行列。
字节跳动表示,该公司正在探索可供自身在专业领域使用的芯片设计,因为公司无法找到能够满足其要求的供应商。这些芯片将会进行定制,以处理字节跳动在多个业务领域的相关工作负荷,包括视频平台、信息和娱乐应用。字节跳动不会将其芯片销售给其他公司。
《科创板日报》称,字节跳动芯片研发团队已组建 1 年多,目前主攻服务器芯片、AI 芯片以及视频云芯片三大类,其中服务器芯片团队的负责人为来自北美高通的资深人士卢山。此外,字节跳动已经从华为海思、Arm 公司高薪聘请来了不少人。而对于字节跳动自研芯片的原因,知情人士称其一方面可以降低芯片采购成本,另一方面还可以根据公司业务调整芯片。
欢迎分享,转载请注明来源:夏雨云
评论列表(0条)