如何解决使用sqoop一直卡在:mapreduce.Job: Running job: job_1703173956074_0001
- 修改hadoop配置
vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml
# 添加如下
<configuration>
<property>
<name>yarn.nodemanager.resource.memory-mb</name>
<value>20480</value>
</property>
<property>
<name>yarn.scheduler.minimum-allocation-mb</name>
<value>2048</value>
</property>
<property>
<name>yarn.nodemanager.vmem-pmem-ratio</name>
<value>2.1</value>
</property>
</configuration>
- 检查配置是否正确
vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml
# 将mapreduce\_shuffle改为mapreduce_shuffle
<configuration>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce\_shuffle</value>
</property>
</configuration>
- VMware中修改内存大小,改大一点,改为4GB
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。