猎聘网阳曙光《用Python开发数据流水线任务智能调度系统》_会议文档

PyConChina2016（北京）所有文档爱因互动洪强宁《Python与对话机器人》盛庞卡(Splunk) 丁来强《Python and Design Pattern》阿里巴巴田涛涛《Infrastructure as Code In Aliyun》 FreeWheel资深DevOPS黄鑫《SaltStack 实践》昭合投资陈世欣《用Python做增长黑客的实践》豆瓣网张华翼《使用 Python 构建服务化架构中的基础设施》海豚浏览器莫瑜《来一块二向箔，分析用 - Python高维数据可视化》 IBM 杨保华《快速构建区块链服务平台》知乎王玉驰《用Python技术栈构建知乎系统运维平台》彪洋科技吕召刚《引爆你的生产力-挖出Django的潜能》

文档介绍



数据流水线上需要运行各种任务，包括执行Hive SQL、MR程序、Python数据处理脚本、导出数据、邮件发送数据等。如何保证这些任务按照依赖关系执行是很大的一个挑战。我们用Python开发的任务调度系统能够自动解决依赖，并且能够按设置优先级来执行任务。同时还能解决了数据恢复及由于上游数据问题需要部分执行的问题。

猎聘网阳曙光《用Python开发数据流水线任务智能调度系统》

爱因互动洪强宁《Python与对话机器人》

盛庞卡(Splunk) 丁来强《Python and Design Pattern》

阿里巴巴田涛涛《Infrastructure as Code In Aliyun》

FreeWheel资深DevOPS黄鑫《SaltStack 实践》

昭合投资陈世欣《用Python做增长黑客的实践》

豆瓣网张华翼《使用 Python 构建服务化架构中的基础设施》

海豚浏览器莫瑜《来一块二向箔，分析用 - Python高维数据可视化》

IBM 杨保华《快速构建区块链服务平台》

知乎王玉驰《用Python技术栈构建知乎系统运维平台》

彪洋科技吕召刚《引爆你的生产力-挖出Django的潜能》

猎聘网阳曙光《用Python开发数据流水线任务智能调度系统》

文档介绍

相关会议文档推荐

莫瑜

相关会议

Title

猎聘网 阳曙光《用Python开发数据流水线任务智能调度系统》

猎聘网 阳曙光《用Python开发数据流水线任务智能调度系统》

文档介绍

相关会议文档推荐

莫瑜

相关会议

Title

猎聘网阳曙光《用Python开发数据流水线任务智能调度系统》

猎聘网阳曙光《用Python开发数据流水线任务智能调度系统》