Suchergebnisse für Anfrage "hadoop"
HBase-Anmeldeinformationen in oozie Java Action @ übergeb
Ich muss eine aktive Java-Aktion planen, die mit der gesicherten HBase interagiert, daher muss ich der Java-Aktion HBase-Anmeldeinformationen bereitstellen. Ich verwende eine gesicherte hortonworks 2.2-Umgebung. Mein Workflow-XML ist wie ...
Spark Scala listet Ordner im Verzeichnis @ a
Ich möchte alle Ordner in einem HDFS-Verzeichnis mit Scala / Spark auflisten. In Hadoop kann ich dies mit dem Befehl tun:hadoop fs -ls hdfs://sandbox.hortonworks.com/demo/ Ich habe es versucht mit: val conf = new Configuration() val fs = ...
spark sbt compile error libraryDependencies
1.2.0-bin-hadoop2.4 und meine Scala-Version ist2.11.7. Ich erhalte eine Fehlermeldung, daher kann ich sbt nicht verwenden. ~/sparksample$ sbtStarting sbt: invoke with -help for other options [info] Set current project to Spark Sample (in build ...
Wie erhalte ich mit Hive @ die Datumsverschiebung in Minute
Below-Abfrage ist meine SQL Server-Abfrage, und ich möchte, dass sie in eine Hive-Abfrage konvertiert wird: select DATEDIFF([minute], '19000101', '2013-01-01 10:10:10')
So löschen Sie ein Thema in Apache Kafka [duplizieren]
Diese Frage hat hier bereits eine Antwort: Thema in Kafka 0.8.1.1 löschen [/questions/24287900/delete-topic-in-kafka-0-8-1-1] 13 answersIch muss ein Thema in kafka-0.8.2.2.3 löschen. Ich habe den folgenden Befehl zum Löschen des ...
Gibt es ein .NET-Äquivalent zu Apache Hadoop? [geschlossen
Also, ich habe @ gesuc Hadoop [http://hadoop.apache.org/] Mit großem Interesse, und um ehrlich zu sein, ich bin fasziniert, die Dinge werden nicht viel cooler. ein einziges kleines Problem ist, dass ich ein C # -Entwickler bin und es in Java ...
Get Table Properties mit Java API aus Hive entfernen
Ich versuche, mit dem Metastore-Client in Java Tabelleneigenschaften wie die Tabelle db, name, owner und hdfs location aus dem Hive-Metastore zu holen. Ich denke, ich kann die Tabellendatenbanken und Namen in Ordnung bringen, aber ich kann nicht ...
hive Verzeichnisverschiebungsprozess als distcp überschreiben?
Wenn ich ein @ starINSERT OVERWRITE DIRECTORY Abfrage in Hive, es scheint, die Ergebnisse in einem @ zu speiche.hivexxxx Staging-Ordner und verschieben Sie die Dateien von dort in das Verzeichnis ... Am Ende des Kartenverkleinerungsprozesses ...
Warum registriert sich der Dockerized Hadoop-Datenknoten mit der falschen IP-Adresse?
Ich habe separate Docker (1.9.1) Images für Hadoop (2.7.1) -Namen- und -Datenknoten. Ich kann daraus Container erstellen und diese über ein benutzerdefiniertes Docker-Netzwerk kommunizieren lassen. Der Datenknoten scheint sich jedoch als ...
Doppelte Spalten in Spark Dataframe
Ich habe eine 10-GB-CSV-Datei in Hadoop-Cluster mit doppelten Spalten. Ich versuche es in SparkR zu analysieren, also benutze ichspark-csv Paket, um es als @ zu analysierDataFrame: df <- read.df( sqlContext, FILE_PATH, source = ...