apache-Pig map-reduce group by 错误
apache-Pig map-reduce group by error
我想我现在 运行 遇到了一个真正的问题,需要一些专家建议。
我 运行 在 grunt shell 的脚本下面,一切都 运行 正常,除了 dump d;我收到以下错误。
2016-03-28 20:08:30,686
[main] ERROR org.apache.pig.tools.pigstats.
mapreduce.MRPigStatsUtil - 1 map reduce job(s) failed!
--I am this script below
a = LOAD '/user/admin/pig/scripts/pig1.csv' USING PigStorage(',') AS (pid chararray,id:int,city:chararray);
describe a ;
b = LIMIT a 100;
C = FOREACH a generate pid, id;
dump C;
d = group C by pid; dump d;
请帮忙。
如果问题仅出在 dump d;
上,可能那一行有一些隐藏字符。您可以使用 BBEdit 之类的编辑器并打开 show invisibles 以查看此行是否有任何隐藏的特殊字符。我按原样尝试了 运行 脚本,它工作正常。
我想我现在 运行 遇到了一个真正的问题,需要一些专家建议。 我 运行 在 grunt shell 的脚本下面,一切都 运行 正常,除了 dump d;我收到以下错误。
2016-03-28 20:08:30,686
[main] ERROR org.apache.pig.tools.pigstats. mapreduce.MRPigStatsUtil - 1 map reduce job(s) failed!
--I am this script below
a = LOAD '/user/admin/pig/scripts/pig1.csv' USING PigStorage(',') AS (pid chararray,id:int,city:chararray);
describe a ;
b = LIMIT a 100;
C = FOREACH a generate pid, id;
dump C;
d = group C by pid; dump d;
请帮忙。
如果问题仅出在 dump d;
上,可能那一行有一些隐藏字符。您可以使用 BBEdit 之类的编辑器并打开 show invisibles 以查看此行是否有任何隐藏的特殊字符。我按原样尝试了 运行 脚本,它工作正常。