13
votos
Como ler os microdados do ENEM no R?
As funções do tipo read.csv que o R possui carregam na memória RAM o conteúdo dos arquivos que estão sendo lidos. Assim, há três maneiras principais de se trabalhar com dados grandes que não cabem na ...
10
votos
Aceito
Como alterar o nome da coluna do dataframe do pandas?
Segundo a documentação do comando rename, o retorno dessa função é um novo DataFrame com a(s) coluna(s) renomeada(s). Para você chegar na resposta desejada, (1) basta atribuir o retorno da função em ...
9
votos
Aceito
R não está reconhecendo os separadores do arquivo csv
Na função read.csv existe as opções de separador. No caso do arquivo com , especifique dentro da função
dados <- read.csv("arquivo.csv", sep = ",")
7
votos
Como ler os microdados do ENEM no R?
Uma solução elegante e que pode ser praticamente independente de recursos computacionais é utilizar um software de pré-processamento linha a linha, filtrando apenas os registros desejados. A ...
7
votos
Lendo arquivo CSV acentuado em Python?
Depende de qual codificação salvou o arquivo .csv
Note: no python 2 o csv só suporta ASCII
UTF-8
Se o arquivo .csv estiver salvo como UTF-8 pode fazer conforme a documentação do Python 3:
import ...
7
votos
Aceito
Remover todas as quebras de linhas de apenas uma coluna de um arquivo csv no Linux
Eu sei que você solicitou ajuda para "awk" e "sed" (com base nas tags usadas). Mas, se me permite a sugestão, por que você não faz em Python? É bem simples porque você trata o arquivo como CSV mesmo (...
7
votos
Aceito
Como somar valores de um csv usando Python?
O teu erro, pelo menos o que salta mais à vista, é estares a percorrer cada estado do Norte em cada registo, que são dois, e a somar o número da habitantes dessa linha duas vezes. E isso acontece em ...
6
votos
Como ler arquivos CSV em Java
O código abaixo lê o os registros de um arquivo CSV, utilizando o OpenCSV.
Neste exemplo obtemos uma List<String[]>.
Reader reader = Files.newBufferedReader(Paths.get("nome-do-arquivo.csv")...
6
votos
Aceito
Formatar csv via php
Seu erro está aqui, Você está concatentando tudo em uma string só:
fputcsv($output,array($chamado.";".$nome.";".$telefone.";".$tentativa.";".$dataconvertida));
Maneira correta:
// ...
6
votos
Aceito
como excluir uma coluna em um arquivo csv python
No Python existe o módulo nativo csv para trabalhar com arquivos CSV. Nesse são definidas as classes csv.DictReader e csv.DictWriter que facilitam trabalhar com os dados nomeados.
Veja um exemplo:
...
6
votos
Aceito
Importar csv - 18 milhoes linhas no R
Esse é um trabalho para o readr!
Com o readr você consegue ler a linhas e ele detecta automaticamente o tipo das variáveis. Veja um exemplo:
library(readr)
sc <- read_csv2(file = '/media/backup/...
6
votos
Como descobrir o delimitador CSV pelo PHP?
Usar strpos ou preg_match pode conflitar, pois alguns CSV podem vir assim:
"foo,bar","Nome";"Telefone"
Ou então:
"foo,bar";"Nome","Telefone"...
6
votos
Aceito
Como ler um arquivo csv pelo pandas sem apagar o primeiro numero?
Arquivos CSV não vem com definição dos tipos de dados de suas colunas. Então o módulo Pandas ao ler um CSV deve inferir qual o tipo de dados mais adequado.
No seu caso a coluna teste foi avaliada como ...
6
votos
Fatal Error com write.csv no R
Felizmente, tenho a mesma configuração de software aqui e pude reproduzir o erro. De fato, ao ler um arquivo csv com a função readr::read_csv e tentar sobrescrever este mesmo arquivo, o RStudio acusa ...
5
votos
Aceito
Encontrar valores iguais entre 2 colunas de .csv diferentes e atualizar outra coluna X
Faça da seguinte forma:
Leia os dados de ambos os arquivos em um dicionário. A melhor forma de fazer isso é, na minha opinião, usando o DictReader.
Processe cada item do dicionário criado a partir de ...
5
votos
Aceito
Como ler os microdados do ENEM no R?
Conceitos
Foram ótimas respostas até agora mas vou acrescentar aqui meus dois centavos. Eu diria que quando estamos trabalhando com conjuntos de dados que superam bastante o tamanho da memória RAM, ...
5
votos
Como salvar um arquivo XLSX (Excel) ao invés de CSV?
Você pode fazer isso usando a biblioteca de interoperabilidade do Excel (Microsoft.Office.Interop.Excel.dll), mas para isso o Excel terá que estar instalado no computador que for executar a sua ...
5
votos
Aceito
Como manipular dados CSV em python?
Arquivos CSV sempre são lidos linha a linha. No entanto, a não ser que sejam realmente muito grandes, os dados cabem todos na memória (se não couberem, um sistema especializado é necessário - mesmo a ...
5
votos
Como alterar o nome da coluna do dataframe do pandas?
Você pode passar uma lista com os novos nomes que você deseja:
df.columns = ['nome_completo', 'idade']
Apenas um adendo, o comando df.rename(columns = {'nome':'nome_completo'}) está correto, mas ...
4
votos
Como ler os microdados do ENEM no R?
Uma solução muito boa é usar a função read_csv_chunked() do pacote readr. Esta função permite a leitura e aplicação de uma função a cada chunk (número de linhas) iterativamente. Suponha que você quer ...
4
votos
Erro ao importar dados .csv para o RStudio
O arquivo Melipona.csv não está localizado no diretório C:/Users/N1na3/Documents/R/win-library/3.4/dismo/ex/. Eu listei o conteúdo deste diretório no meu computador e há apenas dois arquivos .csv, ...
4
votos
Aceito
foreach - Percorrendo arquivo CSV
Você precisa abrir o csv e percorrer em array.
Veja esse exemplo removido do próprio site do PHP com uma leve alterada:
$row = 1;
if (($handle = fopen("csv.csv", "r")) !== FALSE)
{
//...
4
votos
Script PHP para abrir arquivos CSVs diretamente, sem necessidade de envio de fomulário
Você pode utilizar a função glob() para procurar os arquivos CSV.
$files = glob('*.csv');
var_dump(files);
Saida:
array(3) {
[0]=>
string(8) "test.csv"
[1]=>
string(9) "test1.csv"
[...
4
votos
Gerar CSV com resultados lado a lado no PHP
$codigo_cliente = 0;
$pula_linha="\n";
while:
if ($ano_atual2==0) {
$ano_atual2 = $ano;
}
if ( $ano != $ano_atual2 ) :
$ano_atual2 = $ano;
$dadosTXT2 ...
4
votos
Aceito
Compressão e Leitura de arquivo CSV com grande escala de linhas x colunas via Pandas
Se você tem um arquivo .csv quer visualizar o seu conteúdo, a melhor opção é abrir o mesmo numa planilha, como o LibreOffice ou o Excel.
Se o número de linhas supera oque so seu programa de ...
3
votos
Remover todas as quebras de linhas de apenas uma coluna de um arquivo csv no Linux
Com um ficheiro deste tamanho, é claramente recomendável usar um parser/módulos de CSV.
No entanto assumindo que as "" estão correctas e que não há \"dentro das aspas podemos tentar ...
3
votos
Aceito
Leitura de csv com django
Se suas colunas estão baseadas em 1, então seu menor valor [válido] será 1 e seu maior valor será 12. Isso significa que você só deve resetar o mês quando o valor não se tornar mais válido - ou seja, ...
3
votos
Porque meu programa não gera CSV em UTF-8 que possa ser lido corretamente pelo Excel, mas o notepad gera
Tente iniciar seu arquivo com \ufeff.
Essa é a marca BOM (Binary Byte Order) do UTF-8.
3
votos
Escrever em um arquivo CSV
Em writer.writerows([dia,hora]) voce está tentando gravar uma lista e csv.DictWriter espera um dicionário.
Sem conhecer o conteúdo do seu arquivo de entrada, Fiz uma adptação do seu código e gerei o ...
3
votos
Remover a última vírgula de um array de um While
Se entendi direito o seu problema é somente em eliminar uma vírgula no final da string se for só isso tente:
rtrim($number_Aut,',')
Porém pelo seu código acredito que tenha que tirar o ' também, ...
Only top scored, non community-wiki answers of a minimum length are eligible
Tags relacionadas
csv × 352python × 139
php × 70
pandas × 39
python-3.x × 32
mysql × 31
java × 22
r × 22
microsoft-excel × 22
arquivo × 15
c# × 14
javascript × 13
banco-de-dados × 12
txt × 12
array × 10
sql × 8
dataframe × 7
json × 6
node.js × 6
sql-server × 5
django × 5
lista × 5
vba × 5
importação × 5
ciência-de-dados × 5