Linha do tempo de Importação e leitura de arquivo
Licença atual: CC BY-SA 3.0
16 eventos
quando alternar formato | o que | por | licença | comentário | |
---|---|---|---|---|---|
17/12/2018 às 15:49 | resposta | adicionado | Bruno Henrique | linha do tempo pontuação: 0 | |
1/06/2016 às 18:21 | voto | aceitação | Jedaias Rodrigues | ||
1/06/2016 às 17:39 | histórico | editada | Leonel Sanches da Silva |
Retagging.
|
|
31/05/2016 às 22:22 | resposta | adicionado | Leonel Sanches da Silva | linha do tempo pontuação: 3 | |
31/05/2016 às 22:18 | comentário | adicionado | Randrade | Como eu disse para você, e o @TobyMosque disse acima, podes utilizar o SqlBulk. Necessitava salvar na faixa de 100 mil registros em meu BD. Utilizando o foreach demorava uns 5 minutos. Ao invés de salvar direto, eu utilizei o foreach para salvar os dados em uma lista, e utilizei o BulkInsert, para inserir os dados. A tarefa mudou de 5 minutos para cerca de 15 segundos. Caso precise, avise que elaboro uma resposta mais tarde. | |
31/05/2016 às 20:25 | comentário | adicionado | Tobias Mesquita |
@JedaiasRodrigues, te aconselho a não fazer uso do List<T>.ForEach , ele torna o codigo ruim de debuggar, é mais lento, e está atribuindo uma função a lista que não é dela. Quando a ler o CSV, tome cuidado com caracteres de escape e outras regrinhas do mesmo, então te aconselho a usar o CsvHelper. Por fim, por questões de perfomance, evite salvar os 15.000 registros de uma vez, faça um SaveChanges a cada 100~1000 registros, ou melhor faça uso do SqlBulkCopy
|
|
31/05/2016 às 20:11 | histórico | editada | Jedaias Rodrigues | CC BY-SA 3.0 |
adicionou 73 caracteres ao conteúdo
|
31/05/2016 às 20:10 | comentário | adicionado | Jedaias Rodrigues | @João entendi, estarei editando a pergunta. Estou usando MVC 4, o projeto é antigo. | |
31/05/2016 às 20:06 | comentário | adicionado | user46523 | @JedaiasRodrigues qual a versão do ASP MVC? | |
31/05/2016 às 19:58 | comentário | adicionado | user46523 |
Então, @JedaiasRodrigues você não postou isso na sua pergunta, esse cenário de 15.000 mil linhas até para SQLClient puro é complicado. eu entendi a leitura em memória, mas, faltam pré requisitos que você acabou de falar por exemplo 15.000 mil linhas é um fator preocupante para Entity Framework . Vendo assim A primeira é a melhor com um ajuste de try catch roolback
|
|
31/05/2016 às 19:55 | comentário | adicionado | Jedaias Rodrigues | @João na verdade minha dúvida não é como fazer, mas sim qual a melhor maneira de fazer. O trecho acima é só um exemplo, neste caso teríamos duas colunas, uma descrição e um valor separados por ponto e vírgula. A ideia é fazer a leitura do arquivo sem salva-lo no disco, mas para isso surgem algumas dúvidas: qual solução requer menos uso de memória? Ao criar uma TransactionScope com 15000 itens posso prejudicar o desempenho da aplicação ou do banco? | |
31/05/2016 às 19:55 | comentário | adicionado | Marciano.Andrade |
@João é isso mesmo, e o modelo é Descrição;Valor pelos dados da pergunta. :P
|
|
31/05/2016 às 19:46 | comentário | adicionado | user46523 | Bom eu acho que quase entendi, você está lendo o arquivo e adicionado cada linha na sua base de dados? Modelo do arquivo .csv? ajudaria bastante! | |
31/05/2016 às 19:43 | comentário | adicionado | Jedaias Rodrigues | não não, quero fazer tudo na memória... | |
31/05/2016 às 19:41 | comentário | adicionado | user46523 |
Você está salvando um arquivo .csv na sua base de dados num array de bytes?
|
|
31/05/2016 às 19:39 | histórico | perguntada | Jedaias Rodrigues | CC BY-SA 3.0 |