Skip to main content
título editado
Link
vinicius
  • 21,7mil
  • 18
  • 85
  • 152

Como evitar a lotação da memória em SELECT grande -no Rails?

tags editadas
Fonte Link
vinicius
  • 21,7mil
  • 18
  • 85
  • 152

Na rotina que estou desenvolvendo, faço um SELECT simples no banco, apenas em uma tabela:

Model.select("id").where(:tipo => 2).find_each do |registro|
    puts registro.id
end

Mas este select retorna em torno de 160.000 registros. Aí o sistema dá o erro:

pid 258 SIGKILL (signal 9)

Se eu comentar esta linha e seguir o meu código, tudo roda normalmente. pesquisei sobre isso e comecei a usar a função find_each no lugar de each, mas o erro continuou. Se eu limitar a query, também funciona normalmente. Pelo

Pelo que entendi, o erro é somente por conta do volume de dados que é maior do que a memória pode suportar. Analisando http://guides.rubyonrails.org/active_record_querying.html#retrieving-multiple-objects-in-batches e https://www.webascender.com/blog/rails-tips-speeding-activerecord-queries/, observei que o find_eachfind_each melhora essa situação, mas não adiantou. Como resolvo isso?

Na rotina que estou desenvolvendo, faço um SELECT simples no banco, apenas em uma tabela:

Model.select("id").where(:tipo => 2).find_each do |registro|
    puts registro.id
end

Mas este select retorna em torno de 160.000 registros. Aí o sistema dá o erro:

pid 258 SIGKILL (signal 9)

Se eu comentar esta linha e seguir o meu código, tudo roda normalmente. pesquisei sobre isso e comecei a usar a função find_each no lugar de each, mas o erro continuou. Se eu limitar a query, também funciona normalmente. Pelo que entendi, o erro é somente por conta do volume de dados que é maior do que a memória pode suportar. Analisando http://guides.rubyonrails.org/active_record_querying.html#retrieving-multiple-objects-in-batches e https://www.webascender.com/blog/rails-tips-speeding-activerecord-queries/, observei que o find_each melhora essa situação, mas não adiantou. Como resolvo isso?

Na rotina que estou desenvolvendo, faço um SELECT simples no banco, apenas em uma tabela:

Model.select("id").where(:tipo => 2).find_each do |registro|
    puts registro.id
end

Mas este select retorna em torno de 160.000 registros. Aí o sistema dá o erro:

pid 258 SIGKILL (signal 9)

Se eu comentar esta linha e seguir o meu código, tudo roda normalmente. pesquisei sobre isso e comecei a usar a função find_each no lugar de each, mas o erro continuou. Se eu limitar a query, também funciona normalmente.

Pelo que entendi, o erro é somente por conta do volume de dados que é maior do que a memória pode suportar. Analisando http://guides.rubyonrails.org/active_record_querying.html#retrieving-multiple-objects-in-batches e https://www.webascender.com/blog/rails-tips-speeding-activerecord-queries/, observei que o find_each melhora essa situação, mas não adiantou. Como resolvo isso?

Fonte Link

Como evitar a lotação da memória em SELECT grande - Rails

Na rotina que estou desenvolvendo, faço um SELECT simples no banco, apenas em uma tabela:

Model.select("id").where(:tipo => 2).find_each do |registro|
    puts registro.id
end

Mas este select retorna em torno de 160.000 registros. Aí o sistema dá o erro:

pid 258 SIGKILL (signal 9)

Se eu comentar esta linha e seguir o meu código, tudo roda normalmente.Já pesquisei sobre isso e comecei a usar a função find_each no lugar de each, mas o erro continuou. Se eu limitar a query, também funciona normalmente. Pelo que entendi, o erro é somente por conta do volume de dados que é maior do que a memória pode suportar. Analisando http://guides.rubyonrails.org/active_record_querying.html#retrieving-multiple-objects-in-batches e https://www.webascender.com/blog/rails-tips-speeding-activerecord-queries/, observei que o find_each melhora essa situação, mas não adiantou. Como resolvo isso?