使用DataGrip执行Hive on Spark插入数据任务失败解决方案

报错1

org.apache.hadoop.hive.ql.parse.SemanticException:Failed to get a spark sess
解决方案:

1.去你的hive配置文件下找到hive-env.sh文件
2.调大参数

在这里插入图片描述
默认为256M,调大内存为2G,这样发在跑HIve on Spark 任务就可以成功,时间缩短。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐