京东云 朱凌:京东云为企业提供智能化之路

瓮幼枫

2017/11/14 发布于 技术 分类

从京东商城的私有云,到京东公有云的云化之路。在云化过程中,京东的商城、物流、金融、云等丰富的场景,和沉淀的数据,使智能化成为京东的发展方向。这些云上的智能化方案,会逐步开放给社会企业。

文字内容
1. 京东云为企S业A朱C提C凌2供01智7 能化之路
2. • 13年间交易额增长9万 倍,年均复合增长率 超过150% • 服务中国9亿多用户和 十几万品牌商 • 联手腾讯打造全球独 有的社交电商新模式 9392亿 6067亿 SACC2017869亿 1530亿 3040亿 2012 2013 2014 2015 京东集团历年交易额(单位:元) 2016 [1] 精选 13万 + 12万 + 1199亿 元 (6月1日日8-1) [2] [2] [3] 商家入驻 正式员工 2017年618全民年中购物节 累计下单金额 【1】数据统计:行业内主要友商的近似统计方式下京东GMV数据。GMV: Gross Merchandise Volume,商品交易总额。 【2】京东集团2017Q2财报,不包含京东金融。 【3】京东集团2017年618战报
3. • 京东的业务在高速增长 • 十三年复合增长率 150% • 业务复杂度、架构复杂度在不断提升 • 各种新的业务需求,如秒杀、闪购、神券、白条 等等 • 各种新的业务模式:物流、金融等等 2017• 架构为了支持业务的发展,不断演进。垂直分割, C水平分割,服务化,多中心 AC• 服务器规模在不断提升 S• 高峰低谷差距大 • 硬件采购周期长 • 急需有成熟、稳定、高效的私有云支撑业务发展 • 企业对智能化,大数据的要求越来越高
4. • 2013年开始研发京东云的资源管理系统 • 2014年全面拥抱docker技术 • • 22001156年年,,京京东东商商城城一的S全半A部的CC实实2时时0流流1量量7 由由京京东东私私有有云云承承担担 • 2017年,京东线上有20万以上的docker,是全世界最大 的docker集群之一
5. • 全面拥抱云计算,意味着京东的大量数据可以在统一的 平台上存储和计算 • • 京化20东的17金拥年矿有,从京供东应大链数的据S全平A环台CC节数2数据0据量1,在7 这40些0P数B以据上是,实每现天智处能 理15PB以上的新数据
6. 无人机 京东无人机已在宿迁、西安等地常态化运营 无人车 2017京东无人配送机器人已在人大、清华等高校实现常态化运营 SACC无人仓 无人仓智能机器人已在京东多个仓库实现落地运营
7. 多终端消费 多终端 PC、手机、冰箱、音箱、AR/VR…… SACC2017
8. 图片审核 SACC2017
9. 文字识别 SACC2017
10. 人脸识别 SACC2017 • 门禁打卡 • 访客登记 • 会议室预定
11. 京东公有云:对外输出技术的窗口 • 提供了各个层次的服务 • IaaS:虚拟网络、主机、容器、存储、CDN • PaaS:数据库、缓存、视频、大数据平台、人工智能 • SaaS:品牌电商、B2B、B2C 2017• 京东集团各个业务线能力的输出: • 物流云、营销云、供应链、电商平台 SACC• 从Openstack到自研云计算平台的过渡
12. 京东公有云网络 • 全万兆基础网络,正在测试25G和40G网络 • 全VPC网络,用户完全隔离,并提供多种混合云接入方式:VPN、专 线网关等 • 从Neuron到自研,自主研发的SDN虚拟网络,实现了全链路的multi- 2017path高可用 SACC• 大量采用了NFV技术,单CPU核转发pps高达近1000万
13. Data Path SACC2017
14. Control Path SACC2017
15. 京东公有云主机 • 支持了多种规格和操作系统,最高达76核,1.5T内存 • GPU服务器,服务人工智能计算 • 重构的调度系统,从Nova到自研:去除MQ,可靠的同步状态 SACC2017
16. 京东公有云存储 • CloudStorage – 鉴权 – 防攻击 – 缓存 • MetaStorage – 元数据(千亿) • DataStorage – 数据(EB) CloudStorage SACC2017MetaStorage DS EC DataStorage
17. 京东公有云大数据和AI 业务系统 在线存储 数据分发 数据处理 数据接入 数据源 数据开放 广告 推荐 供应链 仓客配 …… Hbase RMDB NoSql Cache Index Plumber-数据分发 JDW据-平离台线数 J计R算C-2流0式17Presto SACC 平台MR Kylin Hive Spark SQL PIG YARN HDFS XGboost TensorFlow Spark MLlib Caffe Storm Flink Spark Streaming Mars JDQ-实时数据总线 Plumber-离线数据接入 Magpie-实时数据接入 结构化数据 非结构化数据 SDK 数据开发套件 数据可视化 作业调度 元数据 数据查询 机器学习平台 质量监控 流程中心 运维自动化
18. SACC2017