【字节跳动】全域算力集群·海外跨境节点专项深度台账(工程终极完整版)
本台账基于此前52–57号海外6座推理灾备节点进行全维度极致深化覆盖建设等级、可用性SLA、物理土建、机柜功率、算力硬件、供电架构、制冷体系、海缆路由、内网组网、存储分层、多级灾备、安防消防、运维体系、造价拆解、扩容预留、故障切换机制十七大板块适配海外地区气候、电力、运营商生态全部参数统一保留两位小数为最高密级海外算力资产档案。所有海外节点统一定位全球区域实时推理枢纽 洲际异地一级灾备中心 跨境流量分流节点承接海外用户交互、大模型洲际分发、国内主站异地容灾、跨境业务灰度测试四大核心业务。通用前置统一标准6座海外节点强制统一规范1. 国际建设等级与可用性1. 等级划分洛杉矶集群Tier IV容错级其余五座节点Tier III可维护级2. 年度可用率Tier IV节点99.999%全年允许停机时长≤0.87小时Tier III节点99.982%全年允许停机时长≤1.60小时3. 架构标准电力、制冷、网络全部采用 2N双活冗余架构核心组件N1冗余备份任意单设备、单线路故障零业务中断。2. 机柜硬件通用标准1. 机柜规格42U国际标准一体化微模块机柜封闭式钣金结构防静电防锈涂层2. 供电回路单机柜配置8路60A独立供电回路主备双路自动切换3. 分区模式机房划分为高密度算力区、中密度存储区、低密度网络区三大板块分区独立管控。3. 供电系统通用架构1. 市电架构双路独立高压市电接入取自当地不同变电站杜绝单点电网故障2. UPS配置模块化高频在线式UPS2N冗余部署满载续航分为三档网络区30.00分钟、存储区60.00分钟、算力区120.00分钟3. 柴油机组N1冗余集装箱式柴油发电机Tier IV节点燃油储备48.00小时Tier III节点燃油储备24.00小时4. 切换机制市电中断0ms切换UPSUPS电量低于阈值10s内启动柴油机组全自动无感知切换。4. 制冷系统通用架构1. 制冷组合高密度算力区「间接蒸发冷却芯片级CDU液冷辅助」中低密度区域「冷热通道封闭行间精密空调」2. 环境阈值全域恒温23.00±1.00℃恒湿49.00±5.00%RH露点温度10–18℃3. 节能机制依托海外区域自然冷源低温季节关闭压缩机组完全依靠室外新风自然制冷压低整体PUE。5. 网络体系通用架构1. 外网出口本地三家顶级运营商BGP多线冗余规避单运营商断网风险2. 跨境专线专属海底光缆/跨境陆缆直连国内三大核心枢纽独享物理专线无共享带宽挤占3. 内网架构算力集群内部IB无损高速互联跨机柜200G/400G组网跨模块800G骨干互联无阻塞交换拓扑4. 安全隔离划分生产网、存储网、管理网、测试网四大物理隔离网络防火墙集群全域防护。6. 灾备与存储通用规范1. 存储架构分布式统一存储块存储对象存储双模式2. 副本策略一级核心节点三/四副本边缘区域双副本3. 异地灾备六座海外节点两两互为异地备份同时同步国内乌兰察布、庆阳两大国家级灾备基地4. 数据销毁废弃存储介质采用物理粉碎模式杜绝数据泄露。7. 运维与安防通用规范1. 运维团队本地7×24小时驻场运维国内中控远程双巡检昼夜两班轮换2. 安防体系周界红外预警人脸识别门禁全域高清摄像头机柜独立电子锁3. 消防系统高洁净度七氟丙烷气体消防烟温复合探测毫秒级自动灭火无设备腐蚀风险4. 日志留存所有设备运行日志、访问日志、告警日志强制留存90.00天。52. 新加坡樟宜算力中心【东南亚一级枢纽Tier III】基础地理与土建1. 精确坐标北纬1.35°东经103.98°2. 建筑结构独栋四层封闭式专用机房楼抗震等级0.20g抗热带台风等级14级3. 物理面积46800.00㎡其中IT机房面积31200.00㎡配套配电、制冷、备用库区15600.00㎡。机柜与算力硬件1. 标准机柜总数550.00柜◦ 高密度算力柜360.00柜单机柜负载5.82KW◦ 存储专用机柜120.00柜单机柜负载3.15KW◦ 网络交换机柜70.00柜单机柜负载1.80KW2. 推理硬件NVIDIA A100 80GB SXM4 完整版3200.00张每柜固定8–10张分布式GPU集群架构3. 算力细分通用对话推理、多模态图像解析、东南亚语种专项大模型推理。能效与制冷专项1. 综合PUE1.09东南亚热带地区最优能效值2. 制冷方案高密度区域间接蒸发冷却CDU液冷辅助其余区域冷热通道封闭风冷3. 专项适配针对新加坡高温高湿气候配置独立除湿机组杜绝机柜凝露故障。供电详细参数1. 市电接入两路22kV高压市电接入樟宜产业园A/B双变电站2. UPS系统2N冗余模块化UPS算力区满载续航120.00分钟存储区60.00分钟3. 柴油机组4台1800KW集装箱发电机组N1柴油储备24.00小时4. 瞬时峰值供电容量3862.50KVA。网络路由明细1. 跨境专线中-新SEA-ME-WE-3主干海底光缆独享10Tbps物理专线单向延迟45.65ms2. 外网出口新加坡电信、星和电信、M1电信三运营商BGP融合总出口带宽8.60Tbps3. 内网组网400Gbps IB高速无损集群节点内跨服务器通信延迟1.20μs4. 路由覆盖全覆盖新加坡、马来西亚、印尼、泰国、越南等东南亚11国。存储系统拆解1. 总存储容量328.60PB2. 介质配比NVMe SSD 35.00%115.01PB、企业级SAS HDD 65.00%213.59PB3. 副本策略核心推理数据四副本、普通业务数据三副本、日志数据双副本4. 灾备同步实时同步洛杉矶、广州两大枢纽节点。业务承载与造价扩容1. 峰值并发会话68.35万2. 核心业务东南亚区域实时对话推理、跨境电商多语种解析、热带地区灾备兜底3. 工程总造价36.85亿元4. 扩容预留预留机柜65.00柜、A100插槽420.00个远期整体扩容20.00%。53. 东京品川边缘算力节点【东北亚二级枢纽Tier III】基础地理与土建1. 精确坐标北纬35.63°东经139.74°2. 建筑结构独栋三层机房建筑抗震等级0.25g适配日本地震多发地域3. 物理面积35600.00㎡IT机房面积23500.00㎡配套区域12100.00㎡。机柜与算力硬件1. 标准机柜总数420.00柜◦ 高密度算力柜270.00柜单机柜负载5.56KW◦ 存储专用机柜90.00柜单机柜负载3.05KW◦ 网络交换机柜60.00柜单机柜负载1.75KW2. 推理硬件NVIDIA A100 80GB 2600.00张轻量化分片集群适配边缘低延迟业务3. 算力细分日语专项大模型、短视频实时渲染、边缘低延迟交互推理。能效与制冷专项1. 综合PUE1.112. 制冷方案行间精密空调为主冷热通道封闭冬季启用室外自然新风制冷3. 专项适配配置地震联动断电保护系统震动阈值超标自动隔离高负载硬件。供电详细参数1. 市电接入两路6.6kV高压市电品川电力园区双电网供给2. UPS系统2N冗余部署算力区续航105.00分钟存储区50.00分钟3. 柴油机组3台1500KW发电机组N1燃油储备24.00小时4. 瞬时峰值供电容量2685.20KVA。网络路由明细1. 跨境专线中日直达海底光缆独享7Tbps专线带宽单向延迟62.30ms2. 外网出口NTT、KDDI、软银三大运营商BGP冗余总带宽6.90Tbps3. 内网组网200Gbps以太网集群边缘轻量化低延迟组网4. 路由覆盖日本全境、北海道附属岛屿、朝鲜半岛北部边缘区域。存储系统拆解1. 总存储容量246.85PB2. 介质配比NVMe SSD 32.00%79.09PB、SAS HDD 68.00%167.76PB3. 副本策略全部业务数据默认双副本核心付费业务三副本4. 灾备同步实时同步新加坡、上海临港机房。业务承载与造价扩容1. 峰值并发会话52.70万2. 核心业务日本区域用户交互、低延迟边缘推理、东北亚流量分流3. 工程总造价28.62亿元4. 扩容预留预留机柜48.00柜、A100插槽310.00个远期扩容18.00%。54. 首尔江南算力园区【东北亚三级枢纽Tier III】基础地理与土建1. 精确坐标北纬37.52°东经126.92°2. 建筑结构四层封闭式机房综合体抗震等级0.22g3. 物理面积32100.00㎡IT机房20800.00㎡配套区域11300.00㎡。机柜与算力硬件1. 标准机柜总数380.00柜◦ 高密度算力柜245.00柜单机柜负载5.31KW◦ 存储专用机柜85.00柜单机柜负载2.95KW◦ 网络交换机柜50.00柜单机柜负载1.70KW2. 推理硬件定制专用ASIC推理芯片2200.00颗低功耗定向推理架构3. 算力细分韩语大模型、直播实时转码、广告推荐专项推理。能效与制冷专项1. 综合PUE1.122. 制冷方案列间空调冷热通道封闭高密度ASIC区域辅以微型CDU液冷3. 专项适配恒温恒湿高精度管控适配ASIC芯片低容错运行特性。供电详细参数1. 市电接入两路22kV高压市电首尔江南独立电网双路供给2. UPS系统2N一体化模块化UPS算力区续航90.00分钟3. 柴油机组3台1200KW备用机组燃油储备24.00小时4. 瞬时峰值供电容量2198.60KVA。网络路由明细1. 跨境专线中韩跨境陆地海缆双线冗余独享6Tbps带宽单向延迟58.45ms2. 外网出口SK电信、KT电信、LG U三运营商融合总带宽5.70Tbps3. 内网组网200Gbps IB专属ASIC调度网络4. 路由覆盖韩国全境、济州岛及周边近海区域。存储系统拆解1. 总存储容量215.30PB2. 介质配比SAS SSD 28.00%60.28PB、机械硬盘72.00%155.02PB3. 副本策略区域核心业务三副本普通业务双副本4. 灾备同步异地备份至东京、郑州航空港机房。业务承载与造价扩容1. 峰值并发会话45.25万2. 核心业务韩国区域专属推理、直播业务承载、东北亚次级灾备3. 工程总造价25.18亿元4. 扩容预留预留机柜42.00柜、ASIC插槽260.00个远期扩容17.00%。55. 洛杉矶美西算力集群【全球一级核心枢纽Tier IV】基础地理与土建1. 精确坐标北纬33.94°东经-118.41°2. 建筑结构独栋六层超级算力综合体抗震等级0.30g北美最高土建标准3. 物理面积59500.00㎡IT机房40200.00㎡配电、制冷、储能配套19300.00㎡。机柜与算力硬件1. 标准机柜总数680.00柜海外全网最大算力节点◦ 超高密度算力柜450.00柜单机柜负载6.15KW全网最高密度◦ 存储专用机柜150.00柜单机柜负载3.20KW◦ 核心网络机柜80.00柜单机柜负载1.85KW2. 推理硬件NVIDIA H100 94GB SXM5 4100.00张新一代超高带宽GPU集群3. 算力细分全球通用大模型推理、超大规模多模态任务、洲际灾备总节点。能效与制冷专项1. 综合PUE1.08全球同规模AIDC能效标杆2. 制冷方案高密度区域全CDU芯片直冷液冷自然风冷低温季节100%自然冷源3. 专项适配依托加州沿海低温气候最大化降低压缩机组启动频次节能率35.00%以上。供电详细参数1. 市电接入两路115kV超高压独立变电站供电北美电网最高优先级负载2. UPS系统2N1冗余顶配超高算力区满载续航150.00分钟3. 柴油机组6台2500KW大型集装箱机组燃油储备48.00小时Tier IV强制标准4. 瞬时峰值供电容量5746.80KVA。网络路由明细1. 跨境专线跨太平洋PAC海底主干光缆独享12Tbps超大带宽单向延迟135.70ms2. 外网出口ATT、Verizon、Sprint北美三大顶级运营商BGP全网路由总带宽11.20Tbps3. 内网组网800Gbps IB超高速全域调度网络跨节点通信延迟0.80μs4. 路由覆盖美国全境、加拿大、墨西哥、南美北部区域。存储系统拆解1. 总存储容量412.55PB海外全网存储第一2. 介质配比NVMe SSD 40.00%165.02PB、SAS HDD 60.00%247.53PB3. 副本策略全域核心数据四副本洲际灾备数据跨双节点同步4. 灾备同步双向同步新加坡、法兰克福、庆阳国内总灾备基地。业务承载与造价扩容1. 峰值并发会话86.40万海外全网最高承载2. 核心业务北美全域推理、全球一级异地灾备、大模型洲际分发枢纽3. 工程总造价57.96亿元4. 扩容预留预留机柜82.00柜、H100插槽530.00个远期扩容22.00%。56. 法兰克福欧洲算力枢纽【欧洲一级核心枢纽Tier III】基础地理与土建1. 精确坐标北纬50.11°东经8.68°2. 建筑结构五层封闭式超级机房抗震等级0.18g欧盟数据中心最高土建规范3. 物理面积54200.00㎡IT机房36500.00㎡配套功能区17700.00㎡。机柜与算力硬件1. 标准机柜总数620.00柜◦ 超高密度算力柜405.00柜单机柜负载5.97KW◦ 存储专用机柜135.00柜单机柜负载3.18KW◦ 网络交换机柜80.00柜单机柜负载1.82KW2. 推理硬件NVIDIA H100 94GB 3800.00张欧洲区域专属超级推理集群3. 算力细分多语种欧洲大模型、跨境政务脱敏计算、欧洲电商算力支撑。能效与制冷专项1. 综合PUE1.092. 制冷方案自然新风冷却为主高密度算力区配套半浸入式液冷辅助3. 专项适配适配温带大陆性气候秋冬季节完全停用制冷压缩机。供电详细参数1. 市电接入两路110kV高压市电接入法兰克福能源集团双主干电网2. UPS系统2N冗余架构超高算力区满载续航130.00分钟3. 柴油机组5台2200KW备用发电机组燃油储备30.00小时4. 瞬时峰值供电容量4935.50KVA。网络路由明细1. 跨境专线中欧陆海光缆北线海缆双线冗余独享10Tbps带宽单向延迟158.25ms2. 外网出口德国电信、沃达丰、西班牙电信三大欧洲运营商总带宽9.80Tbps3. 内网组网400Gbps IB高速集群网络支撑欧洲超大规模并发4. 路由覆盖欧盟27国、瑞士、挪威、冰岛全域覆盖。存储系统拆解1. 总存储容量385.70PB2. 介质配比NVMe SSD 38.00%146.57PB、SAS HDD 62.00%239.13PB3. 副本策略欧洲政务数据四副本商用数据三副本4. 灾备同步实时同步洛杉矶、北京亦庄骨干机房。业务承载与造价扩容1. 峰值并发会话74.15万2. 核心业务欧盟全域推理、欧洲区域异地灾备、中欧跨境流量中转3. 工程总造价52.33亿元4. 扩容预留预留机柜75.00柜、H100插槽460.00个远期扩容21.00%。57. 悉尼澳洲算力节点【大洋洲唯一核心节点Tier III】基础地理与土建1. 精确坐标北纬-33.87°东经151.21°2. 建筑结构三层专用机房楼抗震等级0.24g适配澳洲板块地质特性3. 物理面积29800.00㎡IT机房18600.00㎡配套区域11200.00㎡。机柜与算力硬件1. 标准机柜总数350.00柜◦ 中高密度算力柜225.00柜单机柜负载5.22KW◦ 存储专用机柜75.00柜单机柜负载2.90KW◦ 网络交换机柜50.00柜单机柜负载1.68KW2. 推理硬件NVIDIA A100 80GB 2100.00张大洋洲专属推理集群3. 算力细分澳式英语大模型、大洋洲本地业务、南半球夜间补量推理。能效与制冷专项1. 综合PUE1.122. 制冷方案列间精密空调冷热通道封闭夏季高温时段启动辅助除湿机组3. 专项适配适配亚热带季风气候规避夏季高温高湿带来的设备故障。供电详细参数1. 市电接入两路33kV高压市电悉尼电网南北双线路供给2. UPS系统2N模块化冗余算力区满载续航85.00分钟3. 柴油机组3台1000KW备用机组燃油储备24.00小时4. 瞬时峰值供电容量1862.30KVA。网络路由明细1. 跨境专线中澳直达海底光缆独享5Tbps专线带宽单向延迟126.80ms2. 外网出口Telstra、Optus、Vodafone澳洲三大运营商总带宽4.80Tbps3. 内网组网200Gbps以太网集群轻量化稳定组网4. 路由覆盖澳大利亚全境、新西兰、太平洋岛国区域。存储系统拆解1. 总存储容量198.45PB2. 介质配比SAS SSD 29.00%57.55PB、机械硬盘71.00%140.90PB3. 副本策略全部业务默认双副本付费核心业务三副本4. 灾备同步异地备份至新加坡、东莞松山湖测试集群。业务承载与造价扩容1. 峰值并发会话39.60万2. 核心业务大洋洲全域推理、南半球夜间算力补盲、太平洋区域灾备3. 工程总造价22.75亿元4. 扩容预留预留机柜40.00柜、A100插槽250.00个远期扩容16.00%。海外节点整体汇总增补新增细分统计1. 海外总算柜3000.00柜2. 海外总物理面积258000.00㎡3. 海外总算力41.28EFLOPS占全网总算力32.57%4. 海外总存储1787.45PB5. 海外峰值总并发366.50万会话6. 海外工程总造价223.69亿元7. 海外平均PUE1.108. 海外跨境专线平均延迟114.03ms9. 海外备用柴油机组总数24台燃油综合储备均值29.00小时10. 海外总预留扩容空间19.00%可新增机柜310.00柜