sqoop从hdfs导出数据到mysql,卡在map100%, reduce 0%
利用sqoop从hdfs导出数据到mysql,卡在map100%, reduce 0%
·
-
问题

-
原因
遇到这种一直卡在map100%, reduce 0%,除了可能内存不足和导出语句语法错误外,还有可能是你导出的目标mysql表中和当前导出数据中有相同id的数据发生冲突了。 -
解决方法:
3.1 追加/更新:
DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐


所有评论(0)