基于社区的HDFS进行元信息的垂直扩展,且进一步优化针对二级目录的拆分,让HDFS的元数据更加均匀,降低GC time,提升HDFS稳定性到99.99%,同时业务发展制约于计算资源的缺乏,因此采用离线混布的计算模型,将资源进行统一管理,提供稳定高效的服务,极大的解决了业务方资源不足的问题。听众收益:了解HDFS当集群扩大一定阶段后需要应对的问题,以及具体的Fedration的技术,了解针对YARN改进弹性计算框架改进可能遇到的问题。
浏览5013次
浏览9672次
浏览3142次
浏览4091次
浏览7487次
浏览1422次
2024-08-23 上海
2024-07-20 上海
2024-06-28 上海
2024-04-25 上海
打开微信扫一扫,分享到朋友圈