Tenho uma base de dados muito grande a qual tenho que copiar uma informação. Para diminuir o uso de memória pensei em fazer a inserção da informação em partes, utilizando um CURSOR
e paginando os dados, realizando assim a inserção.
Porém para fazer isso eu necessitaria de um COMMIT
após a inserção, que a ainda seria dentro do do CURSOR
. Como posso realizar isso? Existe alguma forma de diminuir o custo de memória dessa operação sem precisar dessa solução?
Edit:
A tabela que eu tenho é de LOG
de movimentação com um BLOB
com a mensagem (que é um XML
comprimido). A estrutura é similar a seguinte:
identificador INTEGER -- Agrupador
identificador_log INTEGER -- Identificador único (Não segue uma sequência)
processamento DATETIME -- A data em que o log foi gravado
mensagem BLOB -- XML comprimido com todas as informações da mensagem
A solução próxima ao que eu gostaria que eu cheguei foi a seguinte:
DECLARE
dias INTEGER;
indice INTEGER;
BEGIN
-- Diferença de dias entre as datas de logs
SELECT TRUNC(MAX(l.processamento)) - TRUNC(MIN(l.processamento)) INTO dias
FROM LOG l
ORDER BY l.processamento;
FOR indice IN REVERSE 1 .. dias LOOP
INSERT INTO TEMP_LOG(
identificador,
identificador_log,
processamento,
mensagem
)
SELECT tl.identificador,
tl.identificador_log,
tl.processamento,
l.mensagem
FROM (
SELECT l.identificador,
MAX(l.processamento) AS processamento,
MAX(l.identificador_log) KEEP (DENSE_RANK FIRST ORDER BY l.processamento DESC) AS identificador_log
FROM LOG l
GROUP BY l.identificador
) tl
INNER JOIN LOG l
ON tl.identificador = l.identificador
AND tl.identificador_log = l.identificador_log
AND tl.processamento = l.processamento
WHERE TRUNC(l.processamento) = TRUNC(sysdate - indice);
COMMIT;
END LOOP;
END;
/
A questão é que tenho muitas movimentações e muitos arquivos no BLOB
portanto não posso fazer essa cópia de uma vez só, senão o uso de memória vai ser exorbitante e é esse problema que eu quero resolver: Realizar a cópia sem consumir recursos de forma que possa ativar algum alerta de uso.
commit
dentro de um cursor, desde que não seja na tabela usada pelo cursor, que não é o seu caso, mas o seu problema maior é performance, certo? podes usar umbulk collect
para melhorar a performance, já tentou essa ideia?OPEN seu_cursor; LOOP FETCH seu_cursor BULK COLLECT INTO table_para_inserir END LOOP;
, onde os campos o cursor devem ser os mesmos do "table_para_inserir", ou seu type