Perguntas com a tag [pandas]
Pandas é uma biblioteca open source, que fornece estruturas de dados de alto desempenho e ferramentas de análise de dados para a linguagem de programação Python.
819
perguntas
-1
votos
0
respostas
4
visitas
Agrupar DataFrame por Data Máxima de cada mês considerando a coluna de nome com Python
Olá!
Estou tentando agrupar um df a partir da data máxima de cada mês considerando a coluna NOME.
Tenho o seguinte data frame:
NOME DATA
ABC 05/01/2023
ABC 07/01/2023
DEF 01/02/2023
DEF 09/...
-2
votos
0
respostas
16
visitas
Leitura de arquivo json com pandas [fechada]
Estou tentando ler estes arquivos json e transformá-los em um dataset de fácil visualização (como se fosse em formato CSV) mas até o momento não sei quais parâmetros utilizar.
Tentativa1
Tentativa2
Os ...
-3
votos
0
respostas
23
visitas
Como gerar uma coluna com máximo móvel no python em um dataframe?
O meu objetivo é ao gerar uma coluna com máximo móvel de 12 linhas no python, substituir as 11 primeiras linhas de NaN por números de uma coluna fonte do mesmo dataframe.
O máximo móvel de 12 linhas ...
0
votos
0
respostas
8
visitas
como criar um novo data frame atraves de valores de vindos de um for, não estou conseguindo criar ele atraves do tabela_df["dist dinamo"] = dist [fechada]
for i in range(len(tabela_df)):
slat = radians(float(tabela_df["LATITUDE"].loc[i])) # latitude inicial do serviço
elat = radians(float(tabela_df["LATITUDE - DINAMO"].loc[i])...
-1
votos
0
respostas
13
visitas
Filter lines in a Data frame using columns [fechada]
i wanna filter one dataframe where have a specific value for different columns.
Like a :
Df.columns (a,b,c,d,e,f)
values inside (1,2,3,4,5)
I wanna filter this Data Frame like this:
df2 = df[(df[a] ==...
-4
votos
0
respostas
19
visitas
Python Somar Horas Uteis [fechada]
Ola, preciso desenvolver uma função que calcule horas uteis a partir de um campo data em um dataframe.
tenho que considerar que meu expediente é (8:00 as 18:00) de (segunda a sexta) assim gostaria de ...
-3
votos
1
resposta
24
visitas
Retornar soma de casos de uma tabela
Utilizando a base de dados dos passageiros do Titanic, preciso contar o número de sobreviventes e "printar" a seguinte mensagem: "O número de sobreviventes é igual a: 342 pessoas"
...
0
votos
0
respostas
17
visitas
Problema de importação da classe DataError ao utilizar a biblioteca pandas_profiling [fechada]
Estou estudando a biblioteca streamlit e em um dos exemplos utilizando a plataforma 30 days of streamlit usa-se a biblioteca pandas_profiling, juntamente com a streamlit_pandas_profiling. Executei a ...
-3
votos
0
respostas
23
visitas
Como comparar se todas as listas estão iguais caso contrario adicionar NAN [fechada]
Estou tentando fazer um programa para meu trabalho e estou usando uma planilha excel como banco de dados. Porém eu preciso no final do programa gravar novamente na planilha(sobrepor) para que no outro ...
-4
votos
0
respostas
27
visitas
Como devo entregar o produto código para o meu cliente? [fechada]
Eu sou um programador iniciante, mas já recebi minha primeira proposta de serviço. Meu trabalho é desenvolver um código que automatize algumas operações envolvendo excel, para isso estou usando python....
0
votos
1
resposta
48
visitas
Transformar colunas em linhas Python
Preciso transformar colunas de ocorrências em linhas para cada CPF.
Exemplo, tenho uma coluna em que as ocorrências de data e valor estão separadas em colunas, conforme abaixo:
df = pd.DataFrame({
...
-2
votos
2
respostas
43
visitas
Como mostrar mais de um valor em um data frame?
Estou usando uma base de dados com o seguinte dataframe
Código Venda Data ID Loja Produto Quantidade Valor Unitário Valor Final
0 1 2019-01-01 Iguatemi Esplanada Sapato Estampa 1 358 ...
-3
votos
1
resposta
44
visitas
Pandas - Criar coluna nova com contagem de ocorrências
Tenho um dataframe relativamente grande e gostaria de criar uma coluna chamada contagem com o número de ocorrências da mesma linha no mesmo dataframe, quando o valor de determinadas linhas for igual ...
1
voto
1
resposta
30
visitas
Quero pegar a linha que tenha a maior nota do Enem em um Dataframe
Quero saber como pegar a linha com a maior nota dentro de um DataFrame com as notas do Enem.
Eu usei a função .max() na coluna que eu queria, mas ela só retorna o valor daquela coluna e eu quero ...
0
votos
1
resposta
21
visitas
Como criar um "subdataset" a partir de um filtro
O dataset em questão(df) possui 249072 rows × 46 columns.
Criei um filtro pois não preciso de todas informações.
df.query('LOCTUDET=="C50"')
totalizando 37659 rows × 46 columns
Queria criar ...
1
voto
1
resposta
43
visitas
Contar sequencias de zeros baseado em outra coluna
Estou tentando fazer uma rotina onde eu possa contar os registros zero em sequencia de uma coluna de frutas.
Funciona assim: Cada linha uma fruta é mostrada e a coluna C representa se a fruta foi ...
0
votos
2
respostas
29
visitas
Como ler um arquivo txt com tamanho dos campos fixos usando Pandas
Ola, tenho um arquivo .txt que esta da seguinte forma:
"001","nome sobrenome","masculino","1231111322","email@msdsd"
Como eu posso ler ele usando ...
-2
votos
1
resposta
24
visitas
como escolher a primeira linha do retorno de um loc - PANDAS?
no meu exemplo abaixo:
RETORNO = DATAFRAME.loc[DATAFRAME['CPF'] == "000.000.000-00"]
CONTROLE = RETORNO["COLUNA_CONTROLE"]
a variavel CONTROLE, retorna 1 ou mais linhas (como faço ...
0
votos
1
resposta
47
visitas
como retornar duas ou mais colunas usando o .loc ou .iloc no pandas?
atualmente eu uso o seguinte metodo:
retorno = DATAFRAME.loc[:,'coluna_a'].unique()
onde eu retorno todos os dados unicos daquela coluna, porem so obtenho o retorno dos dados daquela coluna, eu ...
-1
votos
1
resposta
52
visitas
Machine Learning - Correlação baixa com o target
Tenho um problema de regressão linear múltipla pra realizar previsões, porém todas as minhas variáveis tem uma correlação baixa com a variável target.
Isso acaba afetando na hora da previsão?
Tem ...
0
votos
1
resposta
38
visitas
Deletar todas as palavras depois de um caractere específico
Gostaria de deletar todas as palavras, caracteres e espaços que aparecem depois da barra (/) em um dataframe pandas, porém não sei como fazer.
Eu usei este código para substituir erros em vogais em ...
-2
votos
1
resposta
55
visitas
LEFT OUTER JOIN NO DATAFRAME COM PANDAS
JÁ SANEI MINHA DÚVIDA, E DESCOBRI QUE POSSUE CAMPOS UC'S REPETIDOS NA BASE DE DADOS, porém segue abaixo quem quiser ler a pergunta e resolução:
Estou tentando receber depois da união de 2 dataframes, ...
-1
votos
1
resposta
36
visitas
Como excluir os últimos caracteres de uma coluna? [fechada]
Estou no Jupyter Notebook trabalhando com Python, utilizando Pandas.
Estou trabalhando em uma planilha com 4 colunas.
Na coluna ('Data Inicial'), preciso remover os 9 últimos caracteres.
O primeiro ...
0
votos
1
resposta
20
visitas
Como eliminar colunas sem títulos e dados no dataframe criado a partir do Openpyxl
Transformei o objeto Openpyxl (pasta_quimica), criado a partir de uma planilha, em um Dataframe.
# Transforma objeto openpyxl em DataFrame
dados = pasta_quimica.values
cabecalho = next(dados)[0:]
df = ...
-3
votos
1
resposta
44
visitas
filtrar numero dentro de um texto (.txt ou .csv) com python [fechada]
Sou novo no Python e não estou conseguindo encontrar uma forma de buscar um número dentro de um .txt. Basicamente, quero buscar um número dentro de um arquivo de texto independente de como ele esteja ...
0
votos
1
resposta
18
visitas
Adicionar no DF pandas: Cada valor da linha dos arquivos .txt em cada coluna
Tenho a seguinte situação:
1)Tenho milhares de arquivos txt dentro de uma pasta.
2)Esses arquivos possuem 24 linhas e não tem cabeçalho.
3)O conteúdo de cada arquivo deve ocular uma linha do df/pandas
...
0
votos
1
resposta
20
visitas
Reunir dataframes
Bom dia.
Para aplicar um algoritmo de balanceamento, separo um dataframe em X e y:
X = df.drop(['covid_longa'], axis=1)
y = df['covid_longa']
Balanceamento:
from collections import Counter
from ...
-1
votos
1
resposta
66
visitas
Como concatenar vários json como dict no pandas?
Eu tenho dois arquivos json que eu gostaria de concatenar em um. Existe alguma abordagem para combinar esses dataframesjson?
json1 = {
"105912": {
"name": "Avatar - ...
0
votos
0
respostas
18
visitas
Valores Booleanos contrários python
meu df no tem seguintes informações
Data pagamento Data contábil Valor Grupo Cota contrato Data adesão Data vencimento Valor parcela
0 17/11/2022 22/11/2022 627,0 467 ...
-2
votos
1
resposta
34
visitas
Loop no Python com sql
tenho o seguinte codigo
for contrato in df_raw['Contrato']:
cursor = cnxn.cursor()
cursor.execute(f"""
SELECT TOP 1 * FROM
(
SELECT
...
-3
votos
1
resposta
38
visitas
Converter String para Timestamp Pandas
No df estou recebendo uma coluna com o tipo String e preciso converter ela para Timestamp para integração em outro banco.
Tentei dessa forma:
if str(df.head(1)).__contains__('timeline.entrada.date'):
...
-4
votos
1
resposta
24
visitas
Agrupar uma coluna por uma quantidade de dados específica
Olá,
Estou tentando fazer uma consulta em um dataset do Airbnb no Python onde gostaria de agrupar por bairros e saber quais imoveis tem o shape(quantidade) maior que 30.
Eu fiz esse agrupamento abaixo ...
-2
votos
1
resposta
22
visitas
Porque quando faço a importação dos dados com pd.read_html a virgula some?
Tentando jogar os dados para um dataFrame, mas estou tendo problemas com a formatação dos números.
o código é bem simples
url = 'http://ipeadata.gov.br/ExibeSerie.aspx?stub=1&serid32099=32099&...
-1
votos
1
resposta
58
visitas
Como fazer dois Groupby seguidos no python
Bom dia.
Estou precisando fazer um groupby numa base de dados porém agrupando duas vezes (primeiro a coluna "Pedido Marketplace" e segundo a coluna "Tipo da Transação (e depois somar o ...
-4
votos
1
resposta
28
visitas
Erro no IF (importando o df com Pandas)
Boa noite.
Estou com o seguinte problema. Toda vez que tento fazer um IF usando um DF, dá esse erro (The truth value of a Series is ambiguous. Use a.empty, a.bool(), a.item(), a.any() or a.all()). Já ...
-2
votos
1
resposta
49
visitas
Como escolher as colunas específicas de uma tabela em python
Bom pessoal, estou com uma tabela e estou querendo retornar em uma variavel x apenas algumas colunas dessa tabela e para isto estou utilizando o .iloc
Exemplo: x_dataset = dataset.iloc[:, 29 & 19]....
-3
votos
2
respostas
43
visitas
Contagem de dados com Python
Bom dia pessoal!
Estou manipulando uma base, e estou tentando criar uma coluna com a quantidade de vezes que uma pessoa aparece em uma determinada coluna.
dados = ['laranja', 'banana', 'maçã', '...
1
voto
1
resposta
130
visitas
Pandas - Populando múltiplas planilhas a partir de uma
Tenho um relatório com informações gerais e preciso gerar um reporte específico para cada escritório (eles são especificados pelo nome mesmo).
No caso, já criei planilhas separadas em uma pasta ...
0
votos
1
resposta
51
visitas
Como NÃO arredondar valores no PANDAS?
Estou manipulando um DataFrame no Pandas que é um relatório que emito do meu sistema. Como os valores vem em R$ (Real Brasileiro) eu faço um replace da string nos valores substituindo a ',' por '.', ...
2
votos
2
respostas
50
visitas
Como substituir dados de uma coluna por dados de outro dataframe usando condições comparativas?
Estou tentando substituir os valores de uma coluna baseado em duas colunas de outro dataframe.
O dataframeX que receberá a substituição possui uma coluna que é uma lista de municípios do Brasil.
O ...
-3
votos
1
resposta
43
visitas
Filtrar dataset com Pandas
Estou querendo filtrar um dataset usando duas condições, porém quando pego esse filtro, eu não consigo armazenar ele, pois ele acaba retornando um objeto e não um array de boolean.Não consegui fazer a ...
0
votos
1
resposta
33
visitas
Como percorrer um dicionário que possui valor None
Eu tenho um dataframe que possui uma coluna multivalorada. Essa coluna possui um dicionário dentro de uma lista. Pode ser que em alguma linha venha como None ou o dicionário dentro da lista. A ideia é ...
-2
votos
1
resposta
26
visitas
Como fazer comparacoes(e alteracoes) entre tipos float e string com .loc
Estou tentando reduzir a variabilidade de uma var. float para uma categórica:
df['DDD'] = df['DDD'].astype(float)
df.loc[df['DDD']> '90.0', 'DDD']= 'Norte'
df.loc[df['DDD']> '80.0', 'DDD']= '...
-1
votos
1
resposta
132
visitas
Como obter a quantidade de dias entre duas datas em python
Basicamente preciso obter a diferença de dias entre o dia de hoje e uma data que extraio de um csv.
Estou salvando o dia de hoje e a data que puxei do csv em objetos e subtraindo os dois para obter a ...
-2
votos
1
resposta
49
visitas
Erro de data no Pandas
Estou usando o Pandas para ler uma planilha gigantesca em formato .xlsb para depois tratar os campos e gerar um gráfico.
Infelizmente, o campo de data vem no formato float64 e quando faço a conversão ...
0
votos
1
resposta
25
visitas
Trazer valores do DataFrame2 para o DataFrame1 [Pandas + Python]
Salve pessoal!
Estou em fase de aprendizado com o Python, e tenho a necessidade de agrupar a descrição idêntica do mesmo ID que estão na Tabela 2, e retornar em colunas diferente na Tabela 1.
Tabela - ...
0
votos
2
respostas
32
visitas
Criar coluna categórica a partir de outra coluna usando listas
Olá, estou tentando criar uma nova coluna no pandas a partir de uma coluna existente. Essa coluna contém nome de partidos políticos. Na nova coluna eu quero classificar a ideologia do partido. Para ...
-5
votos
1
resposta
73
visitas
CALCULO DO VALOR DE UMA COLUNA MENOS O VALOR DEBAIXO DA OUTRA COLUNA PYSPARK [fechada]
Estou tentando fazer o seguinte cálculo:
quando a ação for 0, fazer o tempoInicial - tempoFinal do segundo 0 e fazer isso até o fim do dataframe
já tentei usar o LEAD, mas infelizmente não se encaixa. ...
1
voto
1
resposta
70
visitas
Quero copiar para outro dataframe as informações das Linhas nas colunas X e Y quando as celulas abaixo na coluna X e Y estão vazias
Tenho uma planilha excel que estou usando como dataframe, ela contem os dados de assinaturas de clientes em colunas:
CLIENTE
NUCLIENTE
NUASSINATURA
NUASSANTERIOR
DTEMISSAO - Dia-mês
VLASSINATURA
...
0
votos
1
resposta
70
visitas
Contar valores não nulos entre determinadas colunas de dataframe
Possuo um dataframe com colunas de janeiro a setembro. Em cada uma dessas colunas existem linhas com valores numéricos, algumas são nulas.
O que preciso fazer é adicionar uma coluna total nesse ...