hadoop:挂一个多小时在猪咕噜声中执行共同分组的转储
hadoop: hanging more than an hour to execute a dump of co-grouping in pig grunt
一个多小时过去了,作业还在运行,估计已经死了,我做的很简单:
我有两个非常小的文本文件,我已经将它们导入到 hdfs 中,并且想练习一些 pig latin 操作。这是我所做的:
1.我创建了两个关系,每个关系一个
2.我创建了一个共同分组
3. 我试图得到一个转储
转储现在持续了一个多小时,我在 GUI 中检查了几次,发现同样的工作已经结束并再次开始:
1.完成50%
- 又开始挂了
顺便说一句:这张截图(右上角)中显示的到底是什么神秘博士:
在这种情况下你可能想要终止作业,命令是:
yarn -kill application_xxxxxx
并在作业被杀死后刷新队列:
yarn rmadmin -refreshQueue
一个多小时过去了,作业还在运行,估计已经死了,我做的很简单: 我有两个非常小的文本文件,我已经将它们导入到 hdfs 中,并且想练习一些 pig latin 操作。这是我所做的: 1.我创建了两个关系,每个关系一个 2.我创建了一个共同分组 3. 我试图得到一个转储
转储现在持续了一个多小时,我在 GUI 中检查了几次,发现同样的工作已经结束并再次开始:
1.完成50%
- 又开始挂了
顺便说一句:这张截图(右上角)中显示的到底是什么神秘博士:
在这种情况下你可能想要终止作业,命令是:
yarn -kill application_xxxxxx
并在作业被杀死后刷新队列:
yarn rmadmin -refreshQueue