记录一下配置presto的内存参数大致计算方法:
1、jvm.config
-Xmx :presto最大可以给到服务器总内存的50-70%,比如8GB*0.5=4G;如果需保留内存给其他服务,按需减少。
2、config.properties
query.max-memory-per-node :xmx的30%:4 x 0.3=1.2GB
query.max-memory :query.max-memory-per-node x worker节点数 1.2 x 3 = 3.6 GB
query.max-total-memory-per-node : 比query.max-memory-per-node大,比query.max-memory小,暂时设置2GB

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐