清华大学教授陈文光 - Gemini：基于图计算的高性能大数据分析系统

2016中国大数据技术大会（ BDTC ）所有文档
dmaster 刘喆 - 基于图算法的跨设备受众识别
5138次
张洋 - 京东数据库备份系统进化之路
5868次
中国科学技术大学陈恩红 - 领域知识驱动的个性化推荐方法
4363次
亚信数据杨光明子 - 面向电信领域的海量实时数据处理技术与实践
8938次
今日头条曹欢欢 - 人工智能时代的媒体技术革命
1336次
中国科学院陈洛南 - 生物医学大数据的“疾病前兆”-- “未病”的定量诊断 --
1742次
D-Uni Founder&CEO查理 - 数据敏捷性数据时代的云架构
7004次
焦烈焱 - 数字化转型中的大数据治理架构
3071次
阿里云刘吉哲 - 算法平台架构与应用 On MaxCompute
7740次
腾讯陈鹏 - 腾讯大数据能力输出之路
8833次
中国电子技术标准化研究院代红 - 推动标准验证、促进标准应用——大数据标准化助力产业发展
3377次
京东殷大伟 - 网页搜索引擎中的排序相关度
4858次
翟成祥 - 文本大数据分析与挖掘：机遇，挑战，及应用前景
8085次
DataTorrent 华思远 - 下一代实时数据处理引擎——Apache Apex项目简介及应用
8045次
小米崔建伟 - 小米融合云实践
8440次
携程张翼 - 携程Spark算法平台及其应用
3940次
科大讯飞谭昶 - 讯飞大数据的实践与思考
3337次
陈钢 - 以个人基因组服务为基础的亚洲人基因组数据平台
2704次
闫超众 - 中国移动基于PostgreSQL系列开源数据库的实践
7692次
宝信软件李一名 - 工业大数据的落地选择与分析实践
8131次
昆仑数据陆薇 - 工业大数据助力中国智造
8286次
南大通用数据武新 - 关系型模型与非关系模型的融合：技术实战与展望
5153次
全国信标委杜小勇 - 国家大数据标准化工作进展
10583次
华为孙桂林 - 华为大数据多租户技术探索与实践
2344次
北京邮电大学熊永平 - 基于SPARK的交互式数据探索与建模系统
4195次
中国科学院王秀杰 - 多样的RNA层面调控干细胞多能性
8957次
滴滴出行艾毅 - 滴滴业务实时监控系统架构及实践
9584次
中国信息通信研究院魏凯 - 电信大数据创新与合规性
9029次
巨杉数据库王涛 - NewSQL技术解析与企业级应用案例
5630次
去哪儿网吕晓旭 - Qunar实时数据云平台实践
9656次
中兴飞流郑龙 - Yita：基于数据流的大数据计算引擎
7485次
百度秦铎浩 - 百度大规模推荐系统实践
6024次
百度黄鑫 - 百度大数据离线计算平台发展历程
9933次
360 鲍旭华 - 大数据安全防护
7137次
中国信息通信研究院李海英 - 大数据发展的产业困惑与法律应对
2241次
启明星辰潘柱廷 - 大数据发展趋势报告
789次
亚信数据DataFoundry 叶鹏 - 大数据服务在云原生应用中的使用探索
1779次
观数科技李科 - 大数据基础组建的安全解决方案
4451次
星环科技孙元浩 - 大数据技术的最新进展和发展趋势
3373次
成都数联铭品袁先智 - 大数据框架下的小微企业信用评级：理论与实践的结合
4374次
宜信大数据创新中心郑赟 - 大数据驱动的在线快速信贷业务实践
6817次
明朝万达喻波 - 大数据视野下的数据安全防护体系探索
1333次
北京航空航天大学裴炜 - 大数据侦查与刑事正当程序之调和
4553次
360 朱广彬 - 360聚效广告大数据平台实践
9198次
跬智科技李扬 - Apache Kylin的新Streaming OLAP实现
3303次
PerfXLab澎峰科技张先轶 - ARM嵌入式系统的DNN性能优化
1294次
华为李昆 - CarbonData：Hadoop生态面向交互式分析的索引文件格式
3935次
中国移动陶捷 - DCOS on YARN在中国移动的实践
8198次

清华大学教授陈文光 - Gemini：基于图计算的高性能大数据分析系统

所属会议：2016中国大数据技术大会（ BDTC ）会议地点：北京


下载


手机看

扫二维码下载
或点击下载 Android iOS

   

9944次
浏览次数

2016中国大数据技术大会（ BDTC ）所有文档 dmaster 刘喆 - 基于图算法的跨设备受众识别张洋 - 京东数据库备份系统进化之路中国科学技术大学陈恩红 - 领域知识驱动的个性化推荐方法亚信数据杨光明子 - 面向电信领域的海量实时数据处理技术与实践今日头条曹欢欢 - 人工智能时代的媒体技术革命中国科学院陈洛南 - 生物医学大数据的“疾病前兆”-- “未病”的定量诊断 -- D-Uni Founder&CEO查理 - 数据敏捷性数据时代的云架构焦烈焱 - 数字化转型中的大数据治理架构阿里云刘吉哲 - 算法平台架构与应用 On MaxCompute 腾讯陈鹏 - 腾讯大数据能力输出之路中国电子技术标准化研究院代红 - 推动标准验证、促进标准应用——大数据标准化助力产业发展京东殷大伟 - 网页搜索引擎中的排序相关度翟成祥 - 文本大数据分析与挖掘：机遇，挑战，及应用前景 DataTorrent 华思远 - 下一代实时数据处理引擎——Apache Apex项目简介及应用小米崔建伟 - 小米融合云实践携程张翼 - 携程Spark算法平台及其应用科大讯飞谭昶 - 讯飞大数据的实践与思考陈钢 - 以个人基因组服务为基础的亚洲人基因组数据平台闫超众 - 中国移动基于PostgreSQL系列开源数据库的实践宝信软件李一名 - 工业大数据的落地选择与分析实践昆仑数据陆薇 - 工业大数据助力中国智造南大通用数据武新 - 关系型模型与非关系模型的融合：技术实战与展望全国信标委杜小勇 - 国家大数据标准化工作进展华为孙桂林 - 华为大数据多租户技术探索与实践北京邮电大学熊永平 - 基于SPARK的交互式数据探索与建模系统中国科学院王秀杰 - 多样的RNA层面调控干细胞多能性滴滴出行艾毅 - 滴滴业务实时监控系统架构及实践中国信息通信研究院魏凯 - 电信大数据创新与合规性巨杉数据库王涛 - NewSQL技术解析与企业级应用案例去哪儿网吕晓旭 - Qunar实时数据云平台实践中兴飞流郑龙 - Yita：基于数据流的大数据计算引擎百度秦铎浩 - 百度大规模推荐系统实践百度黄鑫 - 百度大数据离线计算平台发展历程 360 鲍旭华 - 大数据安全防护中国信息通信研究院李海英 - 大数据发展的产业困惑与法律应对启明星辰潘柱廷 - 大数据发展趋势报告亚信数据DataFoundry 叶鹏 - 大数据服务在云原生应用中的使用探索观数科技李科 - 大数据基础组建的安全解决方案星环科技孙元浩 - 大数据技术的最新进展和发展趋势成都数联铭品袁先智 - 大数据框架下的小微企业信用评级：理论与实践的结合宜信大数据创新中心郑赟 - 大数据驱动的在线快速信贷业务实践明朝万达喻波 - 大数据视野下的数据安全防护体系探索北京航空航天大学裴炜 - 大数据侦查与刑事正当程序之调和 360 朱广彬 - 360聚效广告大数据平台实践跬智科技李扬 - Apache Kylin的新Streaming OLAP实现 PerfXLab澎峰科技张先轶 - ARM嵌入式系统的DNN性能优化华为李昆 - CarbonData：Hadoop生态面向交互式分析的索引文件格式中国移动陶捷 - DCOS on YARN在中国移动的实践

文档介绍



清华大学教授陈文光带来的分享主题为《Gemini：基于图计算的高性能大数据分析系统》。　　他表示spark在数据模型层面的局限性主要是每次细粒度的数据更新，由于spark基于粗粒度RDD只读的数据对象模型，需要RDD变换，即有大量数据的复制，导致处理效率不高。实现层面的局限性主要是Spark基于Scala语言，运行在JVM上；内存表示冗余，占用内存大；内存分配与回收开销大。　　而图计算，作为折衷的大数据分析平台，可以解决上述挑战。他重点介绍了分布式图计算系统Gemini。1.在高效性的基础上支持扩展性，避免没有必要的“分布式”副作用，优化图的划分与计算。2.设计理念的变化：以计算性能为中心的分布式系统，分布式系统有快速的通信网络，计算可以与通信重叠；效率优化，自适应push-pull转换，层次化的分块划分；扩展性优化，局部性感知的分块，基于分块的任务窃取。

陈润生

中国科学院院士

了解更多 >

清华大学教授 陈文光 - Gemini：基于图计算的高性能大数据分析系统

清华大学教授 陈文光 - Gemini：基于图计算的高性能大数据分析系统

文档介绍

相关会议文档推荐

陈润生

相关会议

清华大学教授陈文光 - Gemini：基于图计算的高性能大数据分析系统

清华大学教授陈文光 - Gemini：基于图计算的高性能大数据分析系统