Suchergebnisse für Anfrage "hadoop"
Wie Hive Conf Variable in Hive Udf übergeben?
Ich möchte die Variable hive conf an die Variable hive UDF übergeben. Unten ist ein Code-Snippet. hive -f ../hive/testHive.sql -hivevar testArg=${testArg}Unten ist ein Bienenstock-UDF-Aufruf. select ...
So lesen Sie Dateien mit einem Versatz von Hadoop mit Java
Problem: Ich möchte einen Abschnitt einer Datei aus HDFS lesen und zurückgeben, z. B. die Zeilen 101-120 aus einer Datei mit 1000 Zeilen. Ich möchte nicht verwendenseek weil ich gelesen habe, dass es teuer ist. Ich habe Protokolldateien, die ...
Welche Beziehung besteht zwischen 'mapreduce.map.memory.mb' und 'mapred.map.child.java.opts' in Apache Hadoop YARN?
Ich würde gerne die Beziehung zwischen dermapreduce.map.memory.mb undmapred.map.child.java.opts Parameter. Istmapreduce.map.memory.mb > mapred.map.child.java.opts? Danke, Kewal.
Befehl zum Speichern der Datei in HDFS
Einführung Ein Hadoop NameNode und drei DataNodes wurden installiert und werden ausgeführt. Der nächste Schritt ist die Bereitstellung einer Datei für HDFS. Die folgenden Befehle wurden ausgeführt: hadoop fs -copyFromLocal ...
Schreiben und Lesen von Raw-Byte-Arrays in Spark mithilfe der Sequenzdatei SequenceFile
Wie schreibst duRDD[Array[Byte]] zu einer Datei mit Apache Spark und lesen Sie es wieder zurück?
java.lang.NoSuchFieldError: IBM_JAVA für einen einfachen Java-Datenbank-Client in Eclipse
Wie der Titel schon sagt. Mein Quellcode ist: package hbase; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.HColumnDescriptor; ...
Wie vergleicht Hive mit HBase?
Ich bin daran interessiert, herauszufinden, wie die kürzlich veröffentlichten ( http://mirror.facebook.com/facebook/hive/hadoop-0.17/ [http://mirror.facebook.com/facebook/hive/hadoop-0.17/]) Hive ist leistungsmäßig mit HBase vergleichbar. Die von ...
Delta / Inkrementelle Last im Bienenstock
Ich habe den Anwendungsfall unten: Meine Bewerbung hat eine Tabelle mitmehrjährige DatenimRDBMSDB. Wir haben benutztsqoopum Daten in HDFS zu laden und in eine von partitionierte Hive-Tabelle zu ladenJahr Monat. Die Anwendung wird nun täglich ...
Wie kann Spark Streaming seine Ausgabe schreiben, damit Impala sie lesen kann?
Ich habe das folgende Problem mit Spark Streaming API. Momentan streame ich Eingabedaten über Flume zu Spark Streaming, mit dem ich die Daten vorverarbeiten möchte. Dann möchte ich die Daten in Hadoops Dateisystem speichern und mit Impala ...
HBase auf Hortonworks HDP-Sandbox: Master-Adresse kann nicht von ZooKeeper abgerufen werden
Ich habe HDP 2.1 von hortonworks für virtualbox heruntergeladen. Ich habe die folgende Fehlermeldung erhalten, wenn ich die Hbase-Shell für den Fall eines einfachen Befehls verwende: create 't1', {NAME => 'f1', VERSIONS => 5} Hortonworks ...