Skip to main content
adicionou 189 caracteres ao conteúdo
Fonte Link
Evilmaax
  • 2,7mil
  • 1
  • 23
  • 40

Tenho um dataset de 60 milhões de registros que, mês passado, efetuei um recorte e restaram 45 milhões. Pois bem, pensando que poderia precisar destes 15 milhões um dia, salvei o index destes registros excluídos em um .csv a parte.

O dia chegou e, hoje, estou tentando, sem sucesso, aplicar este arquivo .csv com os index sobre o arquivo de 60 milhões original para gerar um arquivo contendo apenas os registros que foram excluídos na última operação.

Como posso gerar uma nova lista booleana de indexes usando o arquivo original e passando apenas os indexes salvos no arquivo a parte como true? Esta é a estrutura do meu arquivo com os indexes:

0              38424
1               3606
2           60994093
3              23182
4              25694

Entre outras coisas, tentei o seguinte:

new_df = df[df.index == index_excluidos]

P.S. Já converti o index_excluidos para series.

Tenho um dataset de 60 milhões de registros que, mês passado, efetuei um recorte e restaram 45 milhões. Pois bem, pensando que poderia precisar destes 15 milhões um dia, salvei o index destes registros excluídos em um .csv a parte.

O dia chegou e, hoje, estou tentando, sem sucesso, aplicar este arquivo .csv com os index sobre o arquivo de 60 milhões original para gerar um arquivo contendo apenas os registros que foram excluídos na última operação.

Como posso gerar uma nova lista booleana de indexes usando o arquivo original e passando apenas os indexes salvos no arquivo a parte como true? Entre outras coisas, tentei o seguinte:

new_df = df[df.index == index_excluidos]

P.S. Já converti o index_excluidos para series.

Tenho um dataset de 60 milhões de registros que, mês passado, efetuei um recorte e restaram 45 milhões. Pois bem, pensando que poderia precisar destes 15 milhões um dia, salvei o index destes registros excluídos em um .csv a parte.

O dia chegou e, hoje, estou tentando, sem sucesso, aplicar este arquivo .csv com os index sobre o arquivo de 60 milhões original para gerar um arquivo contendo apenas os registros que foram excluídos na última operação.

Como posso gerar uma nova lista booleana de indexes usando o arquivo original e passando apenas os indexes salvos no arquivo a parte como true? Esta é a estrutura do meu arquivo com os indexes:

0              38424
1               3606
2           60994093
3              23182
4              25694

Entre outras coisas, tentei o seguinte:

new_df = df[df.index == index_excluidos]

P.S. Já converti o index_excluidos para series.

Fonte Link
Evilmaax
  • 2,7mil
  • 1
  • 23
  • 40

Comparando indexes de um dataframe baseado em arquivo externo

Tenho um dataset de 60 milhões de registros que, mês passado, efetuei um recorte e restaram 45 milhões. Pois bem, pensando que poderia precisar destes 15 milhões um dia, salvei o index destes registros excluídos em um .csv a parte.

O dia chegou e, hoje, estou tentando, sem sucesso, aplicar este arquivo .csv com os index sobre o arquivo de 60 milhões original para gerar um arquivo contendo apenas os registros que foram excluídos na última operação.

Como posso gerar uma nova lista booleana de indexes usando o arquivo original e passando apenas os indexes salvos no arquivo a parte como true? Entre outras coisas, tentei o seguinte:

new_df = df[df.index == index_excluidos]

P.S. Já converti o index_excluidos para series.