Wyjątek podczas przesyłania zadania mapreduce z systemu zdalnego
Dostałem wyjątek podczas przesyłania zadania mapreduce z systemu zdalnego
13/10/28 18:49:52 BŁĄD security.UserGroupInformation: PriviledgedActionException jako: główna przyczyna: org.apache.hadoop.mapred.InvalidInputException: Ścieżka wejściowa nie istnieje: plik: / F: / Obszary robocze / Test / Hadoop / test
Mój hadoop i mapreduce envirnment jest skonfigurowany na komputerze z linuxem. Przesyłam zlecenie wordcount z lokalnego komputera z systemem Windows w następujący sposób:
public static void main(String[] args) throws Exception {
UserGroupInformation ugi = UserGroupInformation.createRemoteUser("root");
try {
ugi.doAs(new PrivilegedExceptionAction<Void>() {
public Void run() throws Exception {
JobConf conf = new JobConf(MapReduce.class);
conf.set("mapred.job.name", "MyApp");
conf.set("mapred.job.tracker", "192.168.1.149:9001");
conf.set("fs.default.name","hdfs://192.168.1.149:9000");
conf.set("hadoop.job.ugi", "root");
conf.setOutputKeyClass(Text.class);
conf.setOutputValueClass(IntWritable.class);
conf.setMapperClass(Map.class);
conf.setCombinerClass(Reduce.class);
conf.setReducerClass(Reduce.class);
conf.setInputFormat(TextInputFormat.class);
conf.setOutputFormat(TextOutputFormat.class);
FileInputFormat.setInputPaths(conf, new Path("test"));
FileOutputFormat.setOutputPath(conf, new Path("test"));
JobClient.runJob(conf);
return null;
}
});
} catch (Exception e) {
e.printStackTrace();
}
}
gdzie 192.168.1.149 jest linuxowym komputerem z konfiguracją hadoop. Zacząłem hadoop, usługi mapreduce tam. Równieżtest katalog został również utworzony przy użyciu tego samego interfejsu API Java, działał. Ale nie mapreduce.
**Proszę pomóż .. **