基于社区的HDFS进行元信息的垂直扩展,且进一步优化针对二级目录的拆分,让HDFS的元数据更加均匀,降低GC time,提升HDFS稳定性到99.99%,同时业务发展制约于计算资源的缺乏,因此采用离线混布的计算模型,将资源进行统一管理,提供稳定高效的服务,极大的解决了业务方资源不足的问题。听众收益:了解HDFS当集群扩大一定阶段后需要应对的问题,以及具体的Fedration的技术,了解针对YARN改进弹性计算框架改进可能遇到的问题。
浏览5268次
浏览9837次
浏览3276次
浏览4222次
浏览7663次
浏览1642次
2025-06-20 深圳
2025-04-19 南京
2025-08-15 上海
2025-10-23 上海
打开微信扫一扫,分享到朋友圈