新浪定制服务器介绍 2014

阿木的花园

2019/06/25 发布于 编程 分类

文字内容
1. 2013年 google facebook Amazon 定制服务器介绍 定制服务器 的前世今生
2. 讲师介绍 提升服务器利用率 刘明生 新浪-研发-运维部 降低采购成本 提升单机性能 和每人民币性能 mingsheng@staff.sina.com.cn 微博:@明生78
4. ?思维导向 生意 500亿$ 2012年服务器行业收入 3426 亿 $ 2012年软件行业收入
5. ?合作基础 软件 我要去做服务 我要去做 IBM DELL HP 我是专业做硬件制 造的 您的需求就是我的 使命 ODM 能否把服务器外壳去掉 能否用SD卡启动OS 能否用消费级SATA硬 盘替代企业级SAS 能否将内部线缆做一些 改动 Facebook Avnet、ZT系统和Hyve Solutions(母公司为业务流程服务企业Synnex)等,QCT(母公司为ODM厂 商Quanta广达,戴尔服务器的主要代工厂)和Wiwynn(母公司为ODM厂商Wistron)
6. Google Video 播放。。。
7. 二、Google 定制服务器的发展历程-第一代
8. 二、Google 定制服务器的发展历程--第三代 6*2=12 3.5inch Disk 2 Port HBA 6 DIMMs 硬盘快速 安装导轨
9. 二、Google 定制服务器的发展历程—第三代-2 硬盘2 2 反向安装 抵消震动 计算和存储节点 按需组合
10. 二、Google 定制服务器的发展历程 计算节点和存储节点 交替安装
11. Facebook 定制服务器
12. 四、Facebook 定制服务器的发展历程-第一代 Server Manager Director VP
13. 四、Facebook 定制服务器的发展历程 ---背后的能量
14. 四、Facebook 定制服务器的发展历程-第一代 Server
15. 四、Facebook 定制服务器的发展历程-第一代 Server The nominal AC input voltage is 277VAC R MS (200 – 277 VAC). The nominal DC input voltage is 48VDC.
16. 四、Facebook 定制服务器的发展历程-第二代 Dragonstone server
17. Google和Facebook的定制化共性 1、达到成本节约的目的 2、无机箱盖,只有托盘 3、共享散热 4、共享供电 5、本机存储有限 使用HBA卡+SAS线缆连接扩展存储 6、规格统一,可互换
18. 五、百度、阿里、腾讯的天蝎计划 第二版 2012年发布 新版 1U 双路 8盘 刀片
19. 五、百度、阿里、腾讯的天蝎计划 为什么空 闲很多位 置? 天蝎需求40U*2刀片*200瓦= 16000瓦/机柜 国内机房常规供应 3500瓦/机柜
20. 五、百度、阿里、腾讯的天蝎计划 生产环境
21. 接地气的新浪定制服务器 Sina Cube
22. 成果展示 需求来自? 评估标准 粗陋定制服务器生存基础 我们的做法 产品展示
23. 成果展示
24. 成本节约-采购 节约 21.3%的设备采购费用
25. 成本节约-机架 1万/秒 并发任务 每秒任务能力 1.1628 个—基准php benchmark 机架费用并非实际成交价 定制服务器 传统服务器 半载功耗(VA) 96 148 需要采购设备(台) 8600 8600 13A 机架数量(个) 297 430 3年机架费用(万元) 5346 7740 3年节约费用(万元) 2384 节约 30.8%的机架费用
26. 成本节约-空调 空调每调高1度,可以解决6%~8% 的制冷电费 定制服务器的CPU温度,待机和满载均比友商低6度(24度进风) 在局部区域:sina可以将进风口温度提升到29度 (机械硬盘) 在局部区域:sina可以将进风口温度提升到32度 (SSD) 节约 30%的空调电费 在PUE=2 的机房相当于15%的整体电费。
27. 需求来自? 老板 ? Or 成本 Or 年轻躁动的心
28. 评估标准 在满足业务单机最低性能时 ,每人民币性能要优于当前采购设备 具体某个业务的性能指标,在满足 99.99% 延迟低于50ms 时 Mysql=QPS, CDN=hits/s 每人民币性能= 设备采购费用 +机架租用费用 +网络二层端口及带宽费用 +运维人员费用
29. 粗陋定制服务器生存基础: 业务稳定性不依赖于 单机/单机架/单机房
30. 想法来自? 共享
31. 我们的做法?-step1 产品技术特点: 0、框架8年使用寿命 (满足intel 换3代) 减少66%电源,70%风扇成本 1、超短距散热 2、非标准散热片 (1.5U 高)提升散热效率 3、PWM(风扇型号) 替代BMC 管理散热系统, 降低开发成本 4、无中板设计,降低设计复杂度 5、航空插头替代 铜排BUS,降低框架制造精度 6、框架设计,内置理线装置 7、自由并柜,高密度部署
32. 我们的做法?-step2 用户的真实需求 增加共享 计算能力 存储能力 稳定性 共享风扇和电源 提高效率 增大散热片面积、 缩短 散热通道距离 提高电源效率
33. 我们的做法?-step3 共享 ,可以节约 Server 采购成本21.3% 电源 12 3 风扇 30 9
34. 我们的做法?-step4 电源半载 的好处 甜点区, 效率高 电压更 准确
35. 新浪定制服务器-外观 宽44.5cm 44.5cm PS1 PS2 PS3 PS4 FAN FAN FAN 1 2 3 FAN 4 FAN 5 FAN 6 FAN 7 FAN 8 FAN 9 Rear LCD 高53.5cm 12U 48cm 深60cm B B B B B B 1 2 3 4 5 6 FRONT 44.5cm Rear FRONT Air Flow TOP 7芯航空插头 传输12v DC 和风扇控制信 号 53.5cm
36. 散热系统原理: 1、未使用BMC 2、使用主板上FAN口的风扇调速信号 3、6 个node 的FAN信号输入控制板,决策后输出9路FAN 控制信号到风扇墙
37. 集群管理机控制整体策略: 1、半夜风扇降速 2、IDC局部热点自动解决 等 集群管理机 本机“生命维生系统”, 风扇转速更新时间<1s 本机“生命维生系统”, 风扇转速更新时间<1s 本机“生命维生系统”, 风扇转速更新时间<1s
38. 新浪定制服务器-布局-计算 FAN PWM 低密度x86 计算 12V to ATX 动态前端 /虚拟化 50cm F A N F A N F A N Blade Mother Board DC2DC 4*2.5 HDD 48cm FRONT 12V DC input 50cm 12V to ATX F A N 高密度x86 FA N 计算 F A N Mother Board 1 FRONT DC2DC 2*2.5 HDD 2*2.5 HDD 48cm Mother Board 2 12V DC input
39. 新浪定制服务器-部署 电源线×6 透明挡 风帘 隔绝冷 热通道 3 3 1Gbps*2/4 or 10Gbps*2 13A Rack 22 server +1 switch 满载2800w (ivybridge ) 5*高密刀 +1 交换刀 6*高密刀
40. 新浪定制服务器-部署-无机柜 无机柜部署的优势: 机柜部署密度比整机架方案高100% 天蝎 20列*10行 vs 新浪 25列*16行=200 rack vs 400 rack 整机柜占地: 120cm*60cm 40U 新浪定制占地 :60 cm*48cm 48U
41. 无机柜部署的优势: 机柜部署密度比整机架方案高100% 天蝎 20列*10行 vs 新浪 25列*16行=200 rack vs 400 rack 设备部署密度比整机架方案高20% 天蝎 200 rack *40U*2 node/U=16000 node 新浪 400 rack *48U*1 node/U=19200 node
42. Q&A