HBase-Anmeldeinformationen in oozie Java Action @ übergeb

Ich muss eine aktive Java-Aktion planen, die mit der gesicherten HBase interagiert, daher muss ich der Java-Aktion HBase-Anmeldeinformationen bereitstellen. Ich verwende eine gesicherte hortonworks 2.2-Umgebung. Mein Workflow-XML ist wie ...

Stammtabellen im YARN-Cluster-Modus nicht gefunden

Ich habe eine Spark-Anwendung (Version 1.4.1) auf HDP 2.3. Es funktioniert einwandfrei, wenn es im YARN-Client-Modus ausgeführt wird. Wenn es jedoch im YARN-Cluster-Modus ausgeführt wird, kann keine meiner Hive-Tabellen von der Anwendung gefunden ...

hadoop Benutzerdateiberechtigungen

Ich habe ein Problem beim Festlegen der Hadoop-Dateiberechtigungen in Hortonworks und Cloudera. Meine Anforderung lautet: 1. create a new user with new group 2. create user directory in hdfs ( ex. /user/myuser ) 3. Now this folder ( in this ...

Wie wird die Datenblockgröße in Hadoop eingestellt? Ist es von Vorteil, es zu ändern?

Wenn wir die Datenblockgröße in Hadoop ändern können, teilen Sie mir bitte mit, wie das geht. Ist es vorteilhaft, die Blockgröße zu ändern? Wenn ja, lassen Sie es mich wissen, warum und wie? Wenn nein, warum und wie?

Spark on YARN zu wenig vcores verwendet

Ich verwende Spark in einem YARN-Cluster (HDP 2.4) mit den folgenden Einstellungen: 1 Masternode 64 GB RAM (50 GB nutzbar) 24 Kerne (19 Kerne verwendbar) 5 Slavenodes 64 GB RAM (jeweils 50 GB nutzbar) 24 Kerne (19 Kerne verwendbar) jeYARN ...

HBase auf Hortonworks HDP-Sandbox: Master-Adresse kann nicht von ZooKeeper abgerufen werden

Ich habe HDP 2.1 von hortonworks für virtualbox heruntergeladen. Ich habe die folgende Fehlermeldung erhalten, wenn ich die Hbase-Shell für den Fall eines einfachen Befehls verwende: create 't1', {NAME => 'f1', VERSIONS => 5} Hortonworks ...

Issue beim Verbinden von Kafka von außen

Ich verwende hortonwork Sandbox für einen Kafka-Server, der versucht, Kafka von Eclipse mit Java-Code zu verbinden. Verwenden Sie diese Konfiguration, um eine Verbindung zum Produzenten herzustellen und die Nachricht @ zu ...

Installationsfehler: ftheader.h: Keine solche Datei oder Verzeichnis

Anforderungen hängen, wenn der Hiveserver2 Thrift Java-Client verwendet wird

Dies ist eine Folgefrage zudiese Frage wo ich frage, was die Hiveserver 2 Thrift Java Client API ist. Diese Frage sollte ohne diesen Hintergrund auskommen, w...

Integrieren von Hbase in Hive: Registrieren Sie die Hbase-Tabelle

Ich verwende Hortonworks Sandbox 2.0, die die folgende Version von Hbase und Hive enthält Component Version ------------------------ Apache Hadoop 2.2.0 Apache Hive 0.12.0 Apache HBase 0.96.0 Apache ZooKeeper 3.4.5... und ich versuche, ...