Resultados da pesquisa a pedido "dataframe"
Ocorreu um problema ao passar no lambda para solicitar o panda DataFrame
Estou tentando aplicar uma função a todas as linhas de um DataFrame do pandas (na verdade, apenas uma coluna nesse DataFrame) Tenho certeza de que este é um erro de sintaxe, mas sei com certeza o que estou fazendo de ...
Excluir duplicatas em um quadro de dados com base em duas combinações de colunas?
Eu tenho um dataframe com 3 colunas em Python: Name1 Name2 Value Juan Ale 1 Ale Juan 1e gostaria de eliminar as duplicatas com base nas combinações de colunas Nome1 e Nome2. No meu exemplo, as duas linhas são iguais (mas estão em ordem ...
Convertendo PeriodIndex em DateTimeIndex?
Eu tenho uma pergunta sobre a conversão de um tseries.period.PeriodIndex em um datetime. Eu tenho um DataFrame que se parece com isso: colors country time_month 2010-09 xxx xxx 2010-10 xxx xxx 2010-11 xxx xxx ... time_month é o ...
Anexar uma coluna ao Data Frame no Apache Spark 1.3
É possível e qual seria o método mais eficiente para adicionar uma coluna ao Data Frame? Mais especificamente, a coluna pode servir como IDs de linha para o quadro de dados existente. Em um caso simplificado, lendo um arquivo e não ...
Reorganizando a estrutura de muitos arquivos txt e depois mesclando-os em um quadro de dados
Gostaria muito de receber sua ajuda com isso! Eu tenho ~ 4.5k arquivos txt que se parecem com isso: Simple statistics using MSPA parameters: 8_3_1_1 on input file: 20130815 104359 875 000000 0528 0548_result.tif MSPA-class [color]: ...
Aleatoriamente linhas DataFrame
Eu tenho o seguinte DataFrame: Col1 Col2 Col3 Type 0 1 2 3 1 1 4 5 6 1 ... 20 7 8 9 2 21 10 11 12 2 ... 45 13 14 15 3 46 16 17 18 3 ...O DataFrame é lido de um arquivo CSV. Todas as linhas que possuemType 1 estão no topo, seguidas pelas linhas ...
Filtrar tabela de dados pelo nome da coluna dinâmica
digamos que eu tenha um data.table com as colunas A, B e C Gostaria de escrever uma função que aplique um filtro (por exemplo, A> 1), mas "A" precisa ser dinâmico (o parâmetro da função), portanto, se eu informar A, ele fará A> 1; Se eu informar ...
criar e exibir spark dataframe a partir de um arquivo json simples
O seguinte teste simples do json DataFrame funciona bem ao executar o Spark no modo local. Aqui está o trecho do Scala, mas também consegui trabalhar com a mesma coisa em Java e Python: sparkContext.addFile(jsonPath) val sqlContext = ...
Desenhando uma tangente para a plotagem e localizando o X-Intercept usando R
Para um quadro de dados cujas 2 colunas podem desenhar um gráfico usandoplot(data$x,data$y) como mostrado abaixo, como podemos desenhar uma tangente em um ponto arbitrário, digamosx=25, encontre a intercepção x da tangente com o ...
Spark: subtrair dois DataFrames
Na versão Spark1.2.0 alguém poderia usarsubtract com 2SchemRDDs para terminar com apenas o conteúdo diferente do primeiro val onlyNewData = todaySchemaRDD.subtract(yesterdaySchemaRDD)onlyNewData contém as linhas emtodaySchemRDD que não existem ...