首页>会议文档 >

南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性

page:
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性
南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性

南京大学 顾荣 - 基于ALLUXIO提升SPARK和HADOOP HDFS的系统性能与稳定性

所属会议:第九届中国Hadoop技术峰会(CHINA HADOOP SUMMIT)2017 北京站会议地点:北京


下载

手机看
活动家APP客户端

扫二维码下载
或点击下载
Android iOS

780次
浏览次数
第九届中国Hadoop技术峰会(CHINA HADOOP SUMMIT)2017 北京站所有文档 乐视云 张兵兵 - 构建视频全过程质量分析系统——普罗米修斯 清华大学 张静 - 社会影响力建模与度量 微云数聚 张帜 - 大数据时代的新型数据库——图数据库 NEO4J 的应用 阿里巴巴 何沛 - APACHE BEAM流处理与批处理的统一编程框架 厦门渊亭 洪万福 - 基于知识图谱的通用数据价值洞察平台 网易 金小军 - HADOOP IN NETEASE eBay 刘思中 - EBAY 付费搜索广告实验平台 eBay 刘轶 - HADOOP 3-0以及未来 阿里巴巴 刘应耀 - 人工智能重新定义客服行业 延云大数据 母延年 - 千亿数据的探索性即席分析之核心技术实现 去哪儿网 唐兴兴 - 深度学习在声纹识别的实践 白山 童剑 - API网关在大数据开放共享方面的应用 红象云腾 童小军 - 海量非结构化数据下的数据智能架构 百度 王聪 - 百度统一分布式计算框架BIGFLOW TalkingData 王福胜 - 营销云实时计算框架 微软 王太峰 - MULTI-GPU PARALLEL DNN TRAINING USING CNTK VMware 王蔚东 - 后HADOOP 时代的存储技术——VMWARE VSAN 杭州加速云 邬刚 - FPGA硬件加速为HADOOP+深度学习插上翅膀 caleFlux Inc. 吴建 - 存储计算融合为大数据添翼 北京极数科技 吴江林 - 用户行为分析大数据平台的选型之路 AdMaster 向磊 - ADVERTISING DISTRIBUTED HADOOP——BIGTOP在ADMASTER的应用 阿里云 曹龙 - 大数据时代存储——云HBASE实践与探索 IBM 曾勇华 - 数据科学好帮手——IBM数据科学及机器学习平台揭秘和案例分享 亚信数据 常剑 - AURA:以机器学习为核心的数据驱动型应用开发平台 阿里巴巴 陈健 - 新零售下的大数据架构及应用 氪信(CreditX) 高强 - AI在金融科技领域的实践 IBM 谷建 - 认知时代的HPC和HPA 新工作负载

文档介绍

Alluxio是世界上首个以内存为中心的虚拟的分布式存储系统。它为上层计算框架和底层存储系统构建了桥梁,应用可以通过Alluxio提供的统一数据访问方式访问底层任意存储系统(例如Hadoop HDFS)中的数据。此外,Alluxio以内存为中心的架构使得数据的访问速度能比常规方案快几个数量级。Alluxio开源项目从诞生的4年来发展迅速,已有超过100个组织机构的 400多贡献者参与开源系统的开发。本技术分享将首先介绍Alluxio开源项目最新版本的一些重要特性,包括:Restful API、与Apache Hive的整合等;然后将重点介绍如何基于Alluxio存储系统的提升Spark中单应用的DataFrame/RDD数据的访问性能并提供多应用的数据快速共享;最后还会分析如何利用Alluxio提升Hadoop HDFS集群的数据访问性能与一致性。

×

打开微信扫一扫,分享到朋友圈