错误 #25823
计算的历史队列多次出现计算瓶颈,每次都是通过增加资源解决(数据堆积,kafka不消费)
由 刘玉 在 大约一年 之前添加.
更新于 大约一年 之前.
历史记录
原因:①计算能力不足 ②hbase的处理能力不足 ①增加taskManager的规则为1
方案:②hbase的配置调优,堆外内存的4G,调整为堆内③缓存与锁的优化
版本:5.29
经探讨,单个项目1年的历史数据完成迁移和计算的指标为48小时内,当前实际完成最大时间(加上碳计算)为37.5,去掉碳计算约为35,计算的效率在指定的指标范围内,故判定合格
ps:当前暂不考虑多项目并行迁移计算的性能
导出 Atom
PDF