Skip to main content

Linha do tempo de Importação e leitura de arquivo

Licença atual: CC BY-SA 3.0

16 eventos
quando alternar formato o que por licença comentário
17/12/2018 às 15:49 resposta adicionado Bruno Henrique linha do tempo pontuação: 0
1/06/2016 às 18:21 voto aceitação Jedaias Rodrigues
1/06/2016 às 17:39 histórico editada Leonel Sanches da Silva
Retagging.
31/05/2016 às 22:22 resposta adicionado Leonel Sanches da Silva linha do tempo pontuação: 3
31/05/2016 às 22:18 comentário adicionado Randrade Como eu disse para você, e o @TobyMosque disse acima, podes utilizar o SqlBulk. Necessitava salvar na faixa de 100 mil registros em meu BD. Utilizando o foreach demorava uns 5 minutos. Ao invés de salvar direto, eu utilizei o foreach para salvar os dados em uma lista, e utilizei o BulkInsert, para inserir os dados. A tarefa mudou de 5 minutos para cerca de 15 segundos. Caso precise, avise que elaboro uma resposta mais tarde.
31/05/2016 às 20:25 comentário adicionado Tobias Mesquita @JedaiasRodrigues, te aconselho a não fazer uso do List<T>.ForEach, ele torna o codigo ruim de debuggar, é mais lento, e está atribuindo uma função a lista que não é dela. Quando a ler o CSV, tome cuidado com caracteres de escape e outras regrinhas do mesmo, então te aconselho a usar o CsvHelper. Por fim, por questões de perfomance, evite salvar os 15.000 registros de uma vez, faça um SaveChanges a cada 100~1000 registros, ou melhor faça uso do SqlBulkCopy
31/05/2016 às 20:11 histórico editada Jedaias Rodrigues CC BY-SA 3.0
adicionou 73 caracteres ao conteúdo
31/05/2016 às 20:10 comentário adicionado Jedaias Rodrigues @João entendi, estarei editando a pergunta. Estou usando MVC 4, o projeto é antigo.
31/05/2016 às 20:06 comentário adicionado user46523 @JedaiasRodrigues qual a versão do ASP MVC?
31/05/2016 às 19:58 comentário adicionado user46523 Então, @JedaiasRodrigues você não postou isso na sua pergunta, esse cenário de 15.000 mil linhas até para SQLClient puro é complicado. eu entendi a leitura em memória, mas, faltam pré requisitos que você acabou de falar por exemplo 15.000 mil linhas é um fator preocupante para Entity Framework. Vendo assim A primeira é a melhor com um ajuste de try catch roolback
31/05/2016 às 19:55 comentário adicionado Jedaias Rodrigues @João na verdade minha dúvida não é como fazer, mas sim qual a melhor maneira de fazer. O trecho acima é só um exemplo, neste caso teríamos duas colunas, uma descrição e um valor separados por ponto e vírgula. A ideia é fazer a leitura do arquivo sem salva-lo no disco, mas para isso surgem algumas dúvidas: qual solução requer menos uso de memória? Ao criar uma TransactionScope com 15000 itens posso prejudicar o desempenho da aplicação ou do banco?
31/05/2016 às 19:55 comentário adicionado Marciano.Andrade @João é isso mesmo, e o modelo é Descrição;Valor pelos dados da pergunta. :P
31/05/2016 às 19:46 comentário adicionado user46523 Bom eu acho que quase entendi, você está lendo o arquivo e adicionado cada linha na sua base de dados? Modelo do arquivo .csv? ajudaria bastante!
31/05/2016 às 19:43 comentário adicionado Jedaias Rodrigues não não, quero fazer tudo na memória...
31/05/2016 às 19:41 comentário adicionado user46523 Você está salvando um arquivo .csv na sua base de dados num array de bytes?
31/05/2016 às 19:39 histórico perguntada Jedaias Rodrigues CC BY-SA 3.0