Skip to main content

Respostas interessantes marcadas com a tag

13 votos

Como ler os microdados do ENEM no R?

As funções do tipo read.csv que o R possui carregam na memória RAM o conteúdo dos arquivos que estão sendo lidos. Assim, há três maneiras principais de se trabalhar com dados grandes que não cabem na ...
Marcus Nunes's user avatar
  • 19mil
10 votos
Aceito

Como alterar o nome da coluna do dataframe do pandas?

Segundo a documentação do comando rename, o retorno dessa função é um novo DataFrame com a(s) coluna(s) renomeada(s). Para você chegar na resposta desejada, (1) basta atribuir o retorno da função em ...
Terry's user avatar
  • 1.189
9 votos
Aceito

R não está reconhecendo os separadores do arquivo csv

Na função read.csv existe as opções de separador. No caso do arquivo com , especifique dentro da função dados <- read.csv("arquivo.csv", sep = ",")
Rafael Cunha's user avatar
  • 4.994
7 votos

Como ler os microdados do ENEM no R?

Uma solução elegante e que pode ser praticamente independente de recursos computacionais é utilizar um software de pré-processamento linha a linha, filtrando apenas os registros desejados. A ...
Marcelo Reis's user avatar
7 votos

Lendo arquivo CSV acentuado em Python?

Depende de qual codificação salvou o arquivo .csv Note: no python 2 o csv só suporta ASCII UTF-8 Se o arquivo .csv estiver salvo como UTF-8 pode fazer conforme a documentação do Python 3: import ...
Syzoth's user avatar
  • 100mil
7 votos
Aceito

Remover todas as quebras de linhas de apenas uma coluna de um arquivo csv no Linux

Eu sei que você solicitou ajuda para "awk" e "sed" (com base nas tags usadas). Mas, se me permite a sugestão, por que você não faz em Python? É bem simples porque você trata o arquivo como CSV mesmo (...
Luiz Vieira's user avatar
  • 34,5mil
7 votos
Aceito

Como somar valores de um csv usando Python?

O teu erro, pelo menos o que salta mais à vista, é estares a percorrer cada estado do Norte em cada registo, que são dois, e a somar o número da habitantes dessa linha duas vezes. E isso acontece em ...
Miguel's user avatar
  • 29,4mil
6 votos

Como ler arquivos CSV em Java

O código abaixo lê o os registros de um arquivo CSV, utilizando o OpenCSV. Neste exemplo obtemos uma List<String[]>. Reader reader = Files.newBufferedReader(Paths.get("nome-do-arquivo.csv")...
Gustavo Furtado's user avatar
6 votos
Aceito

Formatar csv via php

Seu erro está aqui, Você está concatentando tudo em uma string só: fputcsv($output,array($chamado.";".$nome.";".$telefone.";".$tentativa.";".$dataconvertida)); Maneira correta: // ...
Largato's user avatar
  • 92,9mil
6 votos
Aceito

como excluir uma coluna em um arquivo csv python

No Python existe o módulo nativo csv para trabalhar com arquivos CSV. Nesse são definidas as classes csv.DictReader e csv.DictWriter que facilitam trabalhar com os dados nomeados. Veja um exemplo: ...
Woss's user avatar
  • 77,2mil
6 votos
Aceito

Importar csv - 18 milhoes linhas no R

Esse é um trabalho para o readr! Com o readr você consegue ler a linhas e ele detecta automaticamente o tipo das variáveis. Veja um exemplo: library(readr) sc <- read_csv2(file = '/media/backup/...
Flavio Barros's user avatar
6 votos

Como descobrir o delimitador CSV pelo PHP?

Usar strpos ou preg_match pode conflitar, pois alguns CSV podem vir assim: "foo,bar","Nome";"Telefone" Ou então: "foo,bar";"Nome","Telefone"...
Syzoth's user avatar
  • 100mil
6 votos
Aceito

Como ler um arquivo csv pelo pandas sem apagar o primeiro numero?

Arquivos CSV não vem com definição dos tipos de dados de suas colunas. Então o módulo Pandas ao ler um CSV deve inferir qual o tipo de dados mais adequado. No seu caso a coluna teste foi avaliada como ...
Augusto Vasques's user avatar
  • 18,8mil
6 votos

Fatal Error com write.csv no R

Felizmente, tenho a mesma configuração de software aqui e pude reproduzir o erro. De fato, ao ler um arquivo csv com a função readr::read_csv e tentar sobrescrever este mesmo arquivo, o RStudio acusa ...
Marcus Nunes's user avatar
  • 19mil
5 votos
Aceito

Encontrar valores iguais entre 2 colunas de .csv diferentes e atualizar outra coluna X

Faça da seguinte forma: Leia os dados de ambos os arquivos em um dicionário. A melhor forma de fazer isso é, na minha opinião, usando o DictReader. Processe cada item do dicionário criado a partir de ...
Luiz Vieira's user avatar
  • 34,5mil
5 votos
Aceito

Como ler os microdados do ENEM no R?

Conceitos Foram ótimas respostas até agora mas vou acrescentar aqui meus dois centavos. Eu diria que quando estamos trabalhando com conjuntos de dados que superam bastante o tamanho da memória RAM, ...
Flavio Barros's user avatar
5 votos

Como salvar um arquivo XLSX (Excel) ao invés de CSV?

Você pode fazer isso usando a biblioteca de interoperabilidade do Excel (Microsoft.Office.Interop.Excel.dll), mas para isso o Excel terá que estar instalado no computador que for executar a sua ...
Pedro Gaspar's user avatar
  • 3.368
5 votos
Aceito

Como manipular dados CSV em python?

Arquivos CSV sempre são lidos linha a linha. No entanto, a não ser que sejam realmente muito grandes, os dados cabem todos na memória (se não couberem, um sistema especializado é necessário - mesmo a ...
jsbueno's user avatar
  • 31,5mil
5 votos

Como alterar o nome da coluna do dataframe do pandas?

Você pode passar uma lista com os novos nomes que você deseja: df.columns = ['nome_completo', 'idade'] Apenas um adendo, o comando df.rename(columns = {'nome':'nome_completo'}) está correto, mas ...
Lucas's user avatar
  • 4.275
4 votos

Como ler os microdados do ENEM no R?

Uma solução muito boa é usar a função read_csv_chunked() do pacote readr. Esta função permite a leitura e aplicação de uma função a cada chunk (número de linhas) iterativamente. Suponha que você quer ...
José's user avatar
  • 641
4 votos

Erro ao importar dados .csv para o RStudio

O arquivo Melipona.csv não está localizado no diretório C:/Users/N1na3/Documents/R/win-library/3.4/dismo/ex/. Eu listei o conteúdo deste diretório no meu computador e há apenas dois arquivos .csv, ...
Marcus Nunes's user avatar
  • 19mil
4 votos
Aceito

foreach - Percorrendo arquivo CSV

Você precisa abrir o csv e percorrer em array. Veja esse exemplo removido do próprio site do PHP com uma leve alterada: $row = 1; if (($handle = fopen("csv.csv", "r")) !== FALSE) { //...
AnthraxisBR's user avatar
  • 4.384
4 votos

Script PHP para abrir arquivos CSVs diretamente, sem necessidade de envio de fomulário

Você pode utilizar a função glob() para procurar os arquivos CSV. $files = glob('*.csv'); var_dump(files); Saida: array(3) { [0]=> string(8) "test.csv" [1]=> string(9) "test1.csv" [...
Fernando Souza's user avatar
4 votos

Gerar CSV com resultados lado a lado no PHP

$codigo_cliente = 0; $pula_linha="\n"; while: if ($ano_atual2==0) { $ano_atual2 = $ano; } if ( $ano != $ano_atual2 ) : $ano_atual2 = $ano; $dadosTXT2 ...
Marcus Italo's user avatar
4 votos
Aceito

Compressão e Leitura de arquivo CSV com grande escala de linhas x colunas via Pandas

Se você tem um arquivo .csv quer visualizar o seu conteúdo, a melhor opção é abrir o mesmo numa planilha, como o LibreOffice ou o Excel. Se o número de linhas supera oque so seu programa de ...
jsbueno's user avatar
  • 31,5mil
3 votos

Remover todas as quebras de linhas de apenas uma coluna de um arquivo csv no Linux

Com um ficheiro deste tamanho, é claramente recomendável usar um parser/módulos de CSV. No entanto assumindo que as "" estão correctas e que não há \"dentro das aspas podemos tentar ...
JJoao's user avatar
  • 5.189
3 votos
Aceito

Leitura de csv com django

Se suas colunas estão baseadas em 1, então seu menor valor [válido] será 1 e seu maior valor será 12. Isso significa que você só deve resetar o mês quando o valor não se tornar mais válido - ou seja, ...
mgibsonbr's user avatar
  • 82,6mil
3 votos

Porque meu programa não gera CSV em UTF-8 que possa ser lido corretamente pelo Excel, mas o notepad gera

Tente iniciar seu arquivo com \ufeff. Essa é a marca BOM (Binary Byte Order) do UTF-8.
LSouza's user avatar
  • 196
3 votos

Escrever em um arquivo CSV

Em writer.writerows([dia,hora]) voce está tentando gravar uma lista e csv.DictWriter espera um dicionário. Sem conhecer o conteúdo do seu arquivo de entrada, Fiz uma adptação do seu código e gerei o ...
Sidon's user avatar
  • 6.699
3 votos

Remover a última vírgula de um array de um While

Se entendi direito o seu problema é somente em eliminar uma vírgula no final da string se for só isso tente: rtrim($number_Aut,',') Porém pelo seu código acredito que tenha que tirar o ' também, ...
Solange's user avatar
  • 301

Only top scored, non community-wiki answers of a minimum length are eligible