Suchergebnisse für Anfrage "hadoop"

2 die antwort

Wie Hive Conf Variable in Hive Udf übergeben?

Ich möchte die Variable hive conf an die Variable hive UDF übergeben. Unten ist ein Code-Snippet. hive -f ../hive/testHive.sql -hivevar testArg=${testArg}Unten ist ein Bienenstock-UDF-Aufruf. select ...

1 die antwort

So lesen Sie Dateien mit einem Versatz von Hadoop mit Java

Problem: Ich möchte einen Abschnitt einer Datei aus HDFS lesen und zurückgeben, z. B. die Zeilen 101-120 aus einer Datei mit 1000 Zeilen. Ich möchte nicht verwendenseek weil ich gelesen habe, dass es teuer ist. Ich habe Protokolldateien, die ...

2 die antwort

Welche Beziehung besteht zwischen 'mapreduce.map.memory.mb' und 'mapred.map.child.java.opts' in Apache Hadoop YARN?

Ich würde gerne die Beziehung zwischen dermapreduce.map.memory.mb undmapred.map.child.java.opts Parameter. Istmapreduce.map.memory.mb > mapred.map.child.java.opts? Danke, Kewal.

TOP-Veröffentlichungen

1 die antwort

Befehl zum Speichern der Datei in HDFS

Einführung Ein Hadoop NameNode und drei DataNodes wurden installiert und werden ausgeführt. Der nächste Schritt ist die Bereitstellung einer Datei für HDFS. Die folgenden Befehle wurden ausgeführt: hadoop fs -copyFromLocal ...

1 die antwort

Schreiben und Lesen von Raw-Byte-Arrays in Spark mithilfe der Sequenzdatei SequenceFile

Wie schreibst duRDD[Array[Byte]] zu einer Datei mit Apache Spark und lesen Sie es wieder zurück?

3 die antwort

java.lang.NoSuchFieldError: IBM_JAVA für einen einfachen Java-Datenbank-Client in Eclipse

Wie der Titel schon sagt. Mein Quellcode ist: package hbase; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.HColumnDescriptor; ...

7 die antwort

Wie vergleicht Hive mit HBase?

Ich bin daran interessiert, herauszufinden, wie die kürzlich veröffentlichten ( http://mirror.facebook.com/facebook/hive/hadoop-0.17/ [http://mirror.facebook.com/facebook/hive/hadoop-0.17/]) Hive ist leistungsmäßig mit HBase vergleichbar. Die von ...

4 die antwort

Delta / Inkrementelle Last im Bienenstock

Ich habe den Anwendungsfall unten: Meine Bewerbung hat eine Tabelle mitmehrjährige DatenimRDBMSDB. Wir haben benutztsqoopum Daten in HDFS zu laden und in eine von partitionierte Hive-Tabelle zu ladenJahr Monat. Die Anwendung wird nun täglich ...

1 die antwort

Wie kann Spark Streaming seine Ausgabe schreiben, damit Impala sie lesen kann?

Ich habe das folgende Problem mit Spark Streaming API. Momentan streame ich Eingabedaten über Flume zu Spark Streaming, mit dem ich die Daten vorverarbeiten möchte. Dann möchte ich die Daten in Hadoops Dateisystem speichern und mit Impala ...

5 die antwort

HBase auf Hortonworks HDP-Sandbox: Master-Adresse kann nicht von ZooKeeper abgerufen werden

Ich habe HDP 2.1 von hortonworks für virtualbox heruntergeladen. Ich habe die folgende Fehlermeldung erhalten, wenn ich die Hbase-Shell für den Fall eines einfachen Befehls verwende: create 't1', {NAME => 'f1', VERSIONS => 5} Hortonworks ...