阿里巴巴宋军——SparkSQL在ETL中的应用

2017中国云计算技术大会（CCTC）所有文档
银链科技申屠青春——如何搭建区块链应用
6241次
Rancher Labs 梁胜——如何用“简单易用”解锁容器云的真正潜力
6226次
比特宝谈国鹏——深入理解跨链技术
1526次
58集团孙玄——实施微服务架构的关键技术
5831次
清华大学章明星，高品，艾智远，陈康——图计算优化技术探索
12660次
DaoCloud 王天青——微服务架构转型的三大挑战及应对之策
7696次
科大讯飞刘君——讯飞语音云实时分析架构及实践
6956次
存储解决方案顾问芦浩——云计算背景下存储技术的发展与应用
6698次
云时代大数据管理引擎HAWQ++
8697次
阿里巴巴孙健/千诀——智能人机对话面临的挑战、进展和机遇
3932次
中国移动曹高晋——中国移动PaaS平台技术选型和实践经验分享
9880次
云计算产品部刘军卫——中移苏研存储产品规划和实践经验分享
9952次
UCloud 彭晶鑫——重新定义云数据保护
4274次
恒丰银行刘骁——走出堡垒，恒丰银行金融云转型实践
5079次
美团点评郑坤——美团点评业务容器化实战分享
6065次
智链CEO董宁——企业级区块链开发平台
5279次
国家气象局沈文海——气象信息化中的云计算
8975次
上海乐住 CTO王玮——区块链技术的回顾与展望
6151次
张蕾——区块链业务分析方法实践
2711次
人民保险李赫——区块链原理及保险业应用思考
1127次
分布科技张铮文——区块链智能资产开发实践
1395次
凡泰极客：杨涛——容器化研发流程及交付网络
7447次
深圳睿云智合徐年——容器化引领IT新常态
7000次
思杰何浩祥——容器架构下，多云平台的运维实践
5359次
融数数据北京研发中心CTO——融数数据基于Kubernetes的微服务治理和构建平台
4731次
宜人贷王婷——金融反欺诈场景下的Spark实践
6729次
京东李鹏涛——京东物流大数据应用实践之路
8035次
亚信DataFoundry 叶鹏——开源广进，用service catalog构造k8s服务能力中心
3497次
新浪微博吴磊——基于Spark的大规模机器学习在微博的应用
4575次
七牛云赵宏尧——基于Spark的流式处理引擎在Pandora大数据产品中的应用
5722次
Hortonworks 梁堰波——基于Spark的面向10亿级别特征的大规模机器学习
2766次
北京邮电大学熊永平——基于Spark的统一数据管理与数据探索平台
8712次
Mesosphere Gilbert Song——基于微服务的现代应用实践
6367次
苏宁云商陈泽——Spark App自动化故障分析与诊断
8763次
阿里云陈萌辉——Swarm的进化与大规模应用
10433次
第四范式涂威威——大规模分布式机器学习系统设计和应用经验分享
4934次
HanSight 张军——大数据安全分析在电子银行业的探索与实践
7096次
东方国信王虎——大数据核心技术在运营商的应用与实践
10885次
邹均——共识简史——回顾·现状·未来
9999次
基于Mesos Docker构建数据处理平台
3557次
Deep Dive in DC OS
9257次
滴滴出行李扬——HBase在滴滴出行的应用场景和最佳实践
10640次
IBM 李燕生——Hyperledger技术实践与案例分享
2870次
hyper.sh 裴彤——Hyper容器云及云上运维
4824次
华为李昆——CarbonData大数据高性能交互式分析实践
10571次
MoPaaS 沈阅斌——Cloud Foundry在企业融合云平台中的应用
2723次
Deep Dive How Spark Uses Memory
4836次

阿里巴巴宋军——SparkSQL在ETL中的应用

所属会议：2017中国云计算技术大会（CCTC）会议地点：北京


下载


手机看

扫二维码下载
或点击下载 Android iOS

   

9841次
浏览次数

2017中国云计算技术大会（CCTC）所有文档银链科技申屠青春——如何搭建区块链应用 Rancher Labs 梁胜——如何用“简单易用”解锁容器云的真正潜力比特宝谈国鹏——深入理解跨链技术 58集团孙玄——实施微服务架构的关键技术清华大学章明星，高品，艾智远，陈康——图计算优化技术探索 DaoCloud 王天青——微服务架构转型的三大挑战及应对之策科大讯飞刘君——讯飞语音云实时分析架构及实践存储解决方案顾问芦浩——云计算背景下存储技术的发展与应用云时代大数据管理引擎HAWQ++ 阿里巴巴孙健/千诀——智能人机对话面临的挑战、进展和机遇中国移动曹高晋——中国移动PaaS平台技术选型和实践经验分享云计算产品部刘军卫——中移苏研存储产品规划和实践经验分享 UCloud 彭晶鑫——重新定义云数据保护恒丰银行刘骁——走出堡垒，恒丰银行金融云转型实践美团点评郑坤——美团点评业务容器化实战分享智链CEO董宁——企业级区块链开发平台国家气象局沈文海——气象信息化中的云计算上海乐住 CTO王玮——区块链技术的回顾与展望张蕾——区块链业务分析方法实践人民保险李赫——区块链原理及保险业应用思考分布科技张铮文——区块链智能资产开发实践凡泰极客：杨涛——容器化研发流程及交付网络深圳睿云智合徐年——容器化引领IT新常态思杰何浩祥——容器架构下，多云平台的运维实践融数数据北京研发中心CTO——融数数据基于Kubernetes的微服务治理和构建平台宜人贷王婷——金融反欺诈场景下的Spark实践京东李鹏涛——京东物流大数据应用实践之路亚信DataFoundry 叶鹏——开源广进，用service catalog构造k8s服务能力中心新浪微博吴磊——基于Spark的大规模机器学习在微博的应用七牛云赵宏尧——基于Spark的流式处理引擎在Pandora大数据产品中的应用 Hortonworks 梁堰波——基于Spark的面向10亿级别特征的大规模机器学习北京邮电大学熊永平——基于Spark的统一数据管理与数据探索平台 Mesosphere Gilbert Song——基于微服务的现代应用实践苏宁云商陈泽——Spark App自动化故障分析与诊断阿里云陈萌辉——Swarm的进化与大规模应用第四范式涂威威——大规模分布式机器学习系统设计和应用经验分享 HanSight 张军——大数据安全分析在电子银行业的探索与实践东方国信王虎——大数据核心技术在运营商的应用与实践邹均——共识简史——回顾·现状·未来基于Mesos Docker构建数据处理平台 Deep Dive in DC OS 滴滴出行李扬——HBase在滴滴出行的应用场景和最佳实践 IBM 李燕生——Hyperledger技术实践与案例分享 hyper.sh 裴彤——Hyper容器云及云上运维华为李昆——CarbonData大数据高性能交互式分析实践 MoPaaS 沈阅斌——Cloud Foundry在企业融合云平台中的应用 Deep Dive How Spark Uses Memory

文档介绍



阿里巴巴技术专家宋军分享了题为《SparkSQL在ETL中的应用》的演讲。宋军表示，ETL主要有三个步骤：抽取、转换、加载。首先读取数据源，做清洗加工，整合处理，最终把这些数据存储到目标存储里，对ETL要求满足简单易用、支持多种数据源、支持容错处理、丰富的算子、复杂数据类型、计算快等多个因素。如何实现以上目标，宋军从DataSource、丰富的算子、Hive兼容、性能、云上ETL 五个方面作出解读。

Tobi Knaup

Mesosphere 联合创始人兼CTO

了解更多 >

阿里巴巴 宋军——SparkSQL在ETL中的应用

阿里巴巴 宋军——SparkSQL在ETL中的应用

文档介绍

相关会议文档推荐

Tobi Knaup

相关会议

Title

阿里巴巴宋军——SparkSQL在ETL中的应用

阿里巴巴宋军——SparkSQL在ETL中的应用