Resultados da pesquisa a pedido "hadoop"
Repetir diretórios hdfs
Minha estrutura de diretórios HDFS é semelhante a abaixo. /user/hive/warehouse/check.db/abcd/date=2015-02-02/xyz=hijk/000000_0 /user/hive/warehouse/check.db/abcd/date=2015-02-02/xyz=pqrs / 000000_0 Estou tentando percorrer todos os diretórios ...
Grupos de captura REGEXP_REPLACE
Eu queria saber se alguém poderia me ajudar a entender como usar a função regexp_replace do Hive para capturar grupos no regex e usá-los na seqüência de substituição. Eu tenho um exemplo de problema que estou trabalhando abaixo, que envolve ...
O nó / hbase não está no ZooKeeper
Sou novato no Hadoop tentando instalar o Hbase no modo pseudo-distribuído, versão hbase-0.98.10.1-hadoop1-bin, com o Hadoop 2.5.2. Não consigo adicionar uma tabela. O erro a seguir continua quando tento criar uma ...
O Apache Oozie falhou ao carregar o ShareLib
eu tenho o seguinte oozie.log: org.apache.oozie.service.ServiceException: E0104: Could not fully initialize service [org.apache.oozie.service.ShareLibService], Not able to cache sharelib. An Admin needs to install the sharelib with ...
usando o pyspark, leia / grave imagens 2D no sistema de arquivos hadoop
Quero poder ler / gravar imagens em um sistema de arquivos hdfs e aproveitar a localidade hdfs. Eu tenho uma coleção de imagens onde cada imagem é composta por Matrizes 2D de uint16informações adicionais básicas armazenadas como um ...
Como determino o tamanho das minhas tabelas HBase? Existe algum comando para fazer isso?
Tenho várias tabelas no meu shell Hbase que gostaria de copiar no meu sistema de arquivos. Algumas tabelas excedem 100gb. No entanto, só tenho 55 GB de espaço livre no meu sistema de arquivos local. Portanto, gostaria de saber o tamanho das ...
Conecte o Hive por meio do Java JDBC
Há uma pergunta aquiconectar do java ao Hive [https://stackoverflow.com/questions/25157273/connect-from-java-to-hive-using-jdbc] mas o meu édiferente Minha seção executando na máquina1 e preciso passar algumas consultas usando o servidor Java em ...
Erro de ramificação do Apache Mesclagem de credenciais não suportadas nesta versão do hadoop
Estou usando o hadoop 1.2.1, hbase 0.94.14 e hive 1.0.0. Existem três tipos de dados no meu clsuter e três servidores de região também. Eu tenho que importar alguns dados do hbase para o hive. Eu configurei a seção com êxito, mas quando executei ...
Qual é a melhor maneira de contar visitantes únicos com o Hadoop?
hey all, apenas começando no hadoop e curioso para saber qual a melhor maneira em mapreduce seria contar visitantes únicos se seus arquivos de registro fossem assim ... DATE siteID action username 05-05-2010 siteA pageview jim 05-05-2010 ...
Como posso criar um novo diretório em hdfs com java?
public static void main(String[] args) throws IOException, URISyntaxException {Configuration config = new Configuration (); config.set("fs.default.name","hdfs://127.0.0.1:50070/dfshealth.jsp"); FileSystem dfs = FileSystem.get(config); String ...