首页>会议文档 >

美团外卖 刘宏伟:美团外卖自动化业务运维系统建设

page:
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设
美团外卖 刘宏伟:美团外卖自动化业务运维系统建设

美团外卖 刘宏伟:美团外卖自动化业务运维系统建设

所属会议:SACC 2017第九届中国系统架构师大会会议地点:北京


下载

手机看
活动家APP客户端

扫二维码下载
或点击下载
Android iOS

4402次
浏览次数
SACC 2017第九届中国系统架构师大会所有文档 微软亚洲研究院 闫莺:构建企业级区块链生态 先声教育 秦龙:人工智能助力新时代K12教育 闲鱼 王树彬:闲鱼架构实践 小米 李波:小米生态云应用引擎实践 徐少杰:Event sourcing & CQRS 云徙科技 李元佳:企业互联网架构实践 长虹集团 孔帅:基于Hybrid的移动应用混合开发模式架构演变 中国信息通信研究院 徐恩庆:重点行业云计算标准体系和评估思路 中国移动 刘军卫:中移苏研存储产品化之路 优调科技 朱妤晴:技术前沿进展:系统自动化调优 转转 张相於:C2C市场中推荐系统的挑战与机遇 资深技术专家 占超群:迎接在线化与开放化分析时代 李珂:vivo大规模机器学习实践 刘歧:一个简单的直播服务引发的悲剧 毛大鹏:机器学习和未知样本检测 美团 付雅文:美团配送移动网关建设实战 魅族 段启智:Android多分支代码自动同步 摩拜李凯:摩拜开源技术的线上应用之路 蘑菇街 刘旭晖:大数据平台调度系统架构理论和实践 偶数科技 常雷:新一代数据仓库 去哪儿网 马文:基于Mesos Docker的Elasticsearch容器化私有云 上汽集团 李涛:站在云时代的路口 数美 关涛:实时大数据在风控中的实践 思必驰 张顺:可定制开发的语音交互技术 搜狗 张杰:前端测试质量的度量 搜狗 申贤强:分布式存储优化与离线混布弹性计算平台 搜狗语音 陈伟:搜狗智能语音之路 苏宁 黄宙:潜行狙击--业务安全大数据融合 苏宁易购 朱羿全:苏宁易购全站HTTPS实践之路 腾讯 涂远东:VR视频直播探索与创新 腾讯音乐 李深远:QQ音乐的个性化探索 腾讯音乐 罗静:全民K歌黑产对抗之路 腾讯 谭国富:深度学习在图像审核的应用 天云大数据 李从武:人工智能驱动Fintech 同盾科技 张新波:拥抱金融科技的几个误区 王苹:荣之联大数据平台的应用实践 苏宁云商 王一硼:移动端统一接入层 网易 孙建良:网易新一代对象存储引擎 阿里巴巴 江文斐:窄带高清,打造新优酷极致体验 阿里巴巴 金吉祥:万亿级数据洪峰下的消息引擎 阿里巴巴 蔡龙军:面向未来的泛内容AI平台建设实践 阿里巴巴 何源:阿里网络故障智能化治理 阿里巴巴 默燧:移动端图像加载优化与增强 阿里人工智能实验室 王天舟:语音识别技术回顾及应用 爱奇艺 张超:爱奇艺广告大数据实践 百度外卖 梁福坤:基于Druid的大数据采集即计算实践 腾讯云 陈龙:云+时代大数据平台应用方案 滴滴 许令波:统一资源调度平台建设实践 滴滴 王海:滴滴移动端基础架构的演进与探索 滴滴研究院 李秀林:智能交互 美好出行 第四范式 程晓澄:机器学习在推荐系统中的应用 瓜子二手车 彭超:瓜子云的落地 为胜科技 郭宏泽:基于容器的持续集成平台建设 海纳云 邹均:区块链与数据时代 慧川智能 刘曦:ImageNet挑战赛之后的计算机视觉新征程_IT168文库 姜凤波:全用户态服务开发套件F-Stack 金山云 郝明非:H.265在视频直播场景下的应用演进 锦佰安 冯继强:AI领域的人机识别对抗 千亿美金的验证码 京东 高新刚:京东金融数据库多场景架构实践 京东 丁俊:京东分布式K-V存储设计与挑战 京东 桂创华:京东图片系统演进 京东搜索 尹德位:京东亿级流量海量数据搜索架构 京东云 张成远:云时代的数据库演变之路 京东云 朱凌:京东云为企业提供智能化之路 VMware 张海宁:使用Kubernetes部署超级账本Fabric 58同城 沈剑:58速运数据库降压优化实践 360 李东亮:云端图像技术的深度学习模型与应用 360 陈宗志:大容量redis存储方案--Pika AWS 薛峰:云平台计算服务进化之路 INT基金会 项若飞:INTchain在大宗商品物流应用的架构探讨 Qunar 黄勇:去哪网数据库架构发展历程

文档介绍

创业公司,运维需求变化快,资源相对有限。IT基础设施建设要以速度为中心,快速响应,降低成本,稳定安全的运维要求。因此简化流程,提高效率,以DevOps思想为指导,建设一套基于容器的持续集成发布平台成了新兴公司的首选。本次分享以跟谁学容器平台建设为实例,深入讨论以k8s docker,jenkins等软件架构出一套的可以自动配置、注册、发布、服务、测试的持续集成容器平台。本演讲主要面向企业CTO/技术总监/架构师/运维总监/高级运维开发人员,需要有一定IT基础,并希望进行持续集成以及容器化的公司或团队。

演讲实录

2017年10月19日-21日,由IT 168主办的第九届系统架构师大会在北京新云南皇冠假日酒店盛大开幕,“智能化运维&DevOps”技术专场中来自美团外卖业务架构组负责人刘宏伟,为我们分享了美团外卖自动化业务运维系统的建设。

流程复杂、流量陡增、业务迅猛是美团外卖的三大特点

外卖业务的流程十分复杂,从用户下单、商家接单、骑手接单、发配送、用户收到热乎乎的外卖,这一系列流程需要在20多分钟之内完成。而且其后台服务交互也十分复杂,整个产品线上涉及很多数据分析,统计,结算,合同等各个端的交互,一致性要求高,并发高。

外卖业务每天10点开始开始陡增,在11:30左右达到午高峰,在这短短的90分钟内流量会陡增5倍多,而且这个流量陡增是周期性变化的,每天都会重演一次。

除此之外,美团外卖的另一个特点就是业务增长十分迅猛,2013年上线到现在,只用了不到四年时间,其日提单就从0暴涨到2000万,日完成订单1600万。刘宏伟表示,其业务产品一直处在高速迭代,某个数据访问服务组日均120亿+访问, qps 近40万了,午高峰只要发生一个小小的事故,就会引起比较大的损失。

业务发展倒逼技术进步,美团外卖运维工作的新挑战

基于以上发展特点,刘宏伟表示美团外卖业务运维工作存在以下挑战:各种维度的事件通知、报警充斥着开发人员的IM,需要耗费很多精力去优化配置报警阈值、报警等级才不会出现很多误报;公司有多套监控系统,但是它们之间没有关联性,开发人员在排查问题时需要带着参数在不同的系统之间切换;代码中会有大量的降级限流开关,但随着产品快速的迭代,无法确定这些开关是否还有效。

运维人员在日常工作中的排查经验完全实现流程标准化,并在进一步实现计算机自动化。在问题的定位和诊断越来越准确时,可以进一步减少人为干预,实现问题排查流程智能化,真正将人从日常运维工作中解放出来。

积基树本,美团外卖的重点系统体系建设

任何一件事情的完成都不是一蹴而就的,而是循序渐进、不断演变的,美团外卖自动化业务运维系统的建设也不例外。据刘宏伟介绍目前美团外卖的重点系统体系建设包括体系架构、业务大盘、核心链路、服务保护&故障演练和整合全链路压测。

▲体系架构

在整个自动化业务运维系统中,业务大盘与核心链路作为用户使用的入口,分析核心链路上服务状态,定位最终的问题节点,并触发服务保护预案。除此之外,还要定期通过全链路压测来不断验证问题诊断。

▲核心链路

核心链路是系统主要的使用入口,用户可以通过核心链路快速定位是哪一个调用链出现问题。

▲服务保护&故障演练模块

服务保护&故障演练模块是让业务运维体系形成闭环的重要部分。针对不同的保护需求会有不同类型的服务保护开关,例如降级开关、限流开关等等。

▲全链路压测

美团外卖会定期进行全链路压测,针对压测流量进行不同场景的故障演练,在制造故障的同时,验证服务保护预案是否可以像预期那样启动保护服务。

×

打开微信扫一扫,分享到朋友圈