奇虎360 李振炜——Elasticsearch加速SparkSQL查询_会议文档

Elastic 中国开发者大会 2016所有文档 58到家张家杰——58到家ES服务化实践 Hansight瀚思李学辉——ES在电子银行的安全应用百度高攀——百度对Elasticsearch的优化改进斗鱼白凡——基于Elasticsearch的斗鱼搜索服务实现苏宁云商彭燕卿——基于Kibana和ES的苏宁实时日志分析平台趋势科技李啸——Elasticsearch在移动病毒侦测领域应用那些事儿大众点评乐雷——美团点评搜索平台化实践之路折800 秦强强——Packetbeat抓包监控服务质量实践

文档介绍



SparkSQL对查询的SQL，需要扫描全部的数据，然后获取满足查询条件的记录。如果在海量的数据中，命中的记录个数比较小，查询的时间主要在读取数据。为了加速响应时间，我们对存储在hdfs上的海量数据的指定字段，建立索引，存储在Elasticsearch中；对于每一个SQL查询，提取出索引字段的查询条件，然后通过Elasticsearch得到满足条件的记录的路径，Spark直接读取记录，实现了海量数据的查询，秒级响应。

奇虎360 李振炜——Elasticsearch加速SparkSQL查询

58到家张家杰——58到家ES服务化实践

Hansight瀚思李学辉——ES在电子银行的安全应用

百度高攀——百度对Elasticsearch的优化改进

斗鱼白凡——基于Elasticsearch的斗鱼搜索服务实现

苏宁云商彭燕卿——基于Kibana和ES的苏宁实时日志分析平台

趋势科技李啸——Elasticsearch在移动病毒侦测领域应用那些事儿

大众点评乐雷——美团点评搜索平台化实践之路

折800 秦强强——Packetbeat抓包监控服务质量实践

奇虎360 李振炜——Elasticsearch加速SparkSQL查询

文档介绍

相关会议文档推荐

Rashid Khan

相关会议

Title