Estou com um data frame que precisa ser removido as duplicidades e posteriormente do dataframe anterior eu preciso somar um coluna específica. Na verdade eu tenho 5 DF, 4 já deram certo, mas um por conter duplicidade de valores após o groupby ele dá erro de index. Alguém pode me ajudar? Já tentei de diversas formas.
DF1['TOTAL KBYTES VAN'] = DFORIGINAL.groupby(['CONVENIO', 'CNPJ', 'PRODUTO', 'RATEIO VAN'])['TOTAL KBYTES VAN'].transform(np.sum)
este código funciona para 4 DF, porém em um deles o TOTAL KBYTES se "duplica" diversas vezes, e isso é uma realidade, eu preciso somar também os duplicados.
já tentei ele de diversas formas mas sem êxito.
exemplos de tentativas:
DF1['TOTAL KBYTES VAN'] = DFORIGINAL.groupby(['CONVENIO', 'CNPJ', 'PRODUTO', 'RATEIO VAN'])['TOTAL KBYTES VAN'].sum()
DF1['TOTAL KBYTES VAN'] = DFORIGINAL.groupby(['CONVENIO', 'CNPJ', 'PRODUTO', 'RATEIO VAN'])['TOTAL KBYTES VAN'].cumsum()
DF1['TOTAL KBYTES VAN'] = DFORIGINAL.groupby(['CONVENIO', 'CNPJ', 'PRODUTO', 'RATEIO VAN'], as_index=False)['TOTAL KBYTES VAN'].sum()
DF1['TOTAL KBYTES VAN'] = DFORIGINAL.groupby(['CONVENIO', 'CNPJ', 'PRODUTO', 'RATEIO VAN'], as_index=False)['TOTAL KBYTES VAN'].transform(np.sum)
DFORIGINAL
VAN;CNPJ;CLIENTE;PRODUTO;RATEIO VAN;TOTAL KBYTES VAN;CONVENIO;% MARGEM
EMPRESA;0123456789777;EMPRESA;OUTROS;100;2,63671875;220000000;1
EMPRESA;0123456789777;EMPRESA;PAGAMENTO;100;2,63671875;220000000;1
EMPRESA;0123456789777;EMPRESA;OUTROS;100;2,63671875;220000000;1
EMPRESA;0123456789777;EMPRESA;OUTROS;100;2,63671875;220000000;1
EMPRESA;0123456789777;EMPRESA;PAGAMENTO;100;2,63671875;220000000;1
EMPRESA;0123456789777;EMPRESA;OUTROS;100;2,63671875;220000000;1
VAN | CNPJ | CLIENTE | PRODUTO | RATEIO VAN | TOTAL KBYTES VAN | CONVENIO | % MARGEM |
---|---|---|---|---|---|---|---|
EMPRESA | 0123456789777 | EMPRESA | OUTROS | 100 | 2,63671875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | PAGAMENTO | 100 | 2,63671875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | OUTROS | 100 | 2,63671875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | OUTROS | 100 | 2,63671875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | PAGAMENTO | 100 | 2,63671875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | OUTROS | 100 | 2,63671875 | 220000000 | 1 |
Só consegui desta forma, veja que o resultado esperado. Obs. Antes de fazer a soma, eu faço um "drop_duplicates" no DF1, usando o mesmo criterio do groupby, assim o DF1 trás apenas as 2 linhas únicas, e delas eu espero entregar a soma do TOTAL KBYTES VAN
RESULTADO ESPERADO DF1
VAN;CNPJ;CLIENTE;PRODUTO;RATEIO VAN;TOTAL KBYTES VAN;CONVENIO;% MARGEM
EMPRESA;0123456789777;EMPRESA;OUTROS;100;10,546875;220000000;1
EMPRESA;0123456789777;EMPRESA;PAGAMENTO;100;5,2734375;220000000;1
VAN | CNPJ | CLIENTE | PRODUTO | RATEIO VAN | TOTAL KBYTES VAN | CONVENIO | % MARGEM |
---|---|---|---|---|---|---|---|
EMPRESA | 0123456789777 | EMPRESA | OUTROS | 100 | 10,546875 | 220000000 | 1 |
EMPRESA | 0123456789777 | EMPRESA | PAGAMENTO | 100 | 5,2734375 | 220000000 | 1 |