Perguntas com a tag [pandas]
Pandas é uma biblioteca open source, que fornece estruturas de dados de alto desempenho e ferramentas de análise de dados para a linguagem de programação Python.
828 perguntas
-1
votos
1
resposta
499
visitas
Como concatenar vários json como dict no pandas?
Eu tenho dois arquivos json que eu gostaria de concatenar em um. Existe alguma abordagem para combinar esses dataframesjson?
json1 = {
"105912": {
"name": "Avatar - ...
-2
votos
1
resposta
48
visitas
Valores Booleanos contrários python
meu df no tem seguintes informações
Data pagamento Data contábil Valor Grupo Cota contrato Data adesão Data vencimento Valor parcela
0 17/11/2022 22/11/2022 627,0 467 ...
-2
votos
1
resposta
121
visitas
Loop no Python com sql
tenho o seguinte codigo
for contrato in df_raw['Contrato']:
cursor = cnxn.cursor()
cursor.execute(f"""
SELECT TOP 1 * FROM
(
SELECT
...
-3
votos
1
resposta
268
visitas
Converter String para Timestamp Pandas
No df estou recebendo uma coluna com o tipo String e preciso converter ela para Timestamp para integração em outro banco.
Tentei dessa forma:
if str(df.head(1)).__contains__('timeline.entrada.date'):
...
-4
votos
1
resposta
70
visitas
Agrupar uma coluna por uma quantidade de dados específica
Olá,
Estou tentando fazer uma consulta em um dataset do Airbnb no Python onde gostaria de agrupar por bairros e saber quais imoveis tem o shape(quantidade) maior que 30.
Eu fiz esse agrupamento abaixo ...
-2
votos
1
resposta
76
visitas
Porque quando faço a importação dos dados com pd.read_html a virgula some?
Tentando jogar os dados para um dataFrame, mas estou tendo problemas com a formatação dos números.
o código é bem simples
url = 'http://ipeadata.gov.br/ExibeSerie.aspx?stub=1&serid32099=32099&...
-1
votos
1
resposta
514
visitas
Como fazer dois Groupby seguidos no python
Bom dia.
Estou precisando fazer um groupby numa base de dados porém agrupando duas vezes (primeiro a coluna "Pedido Marketplace" e segundo a coluna "Tipo da Transação (e depois somar o ...
-4
votos
1
resposta
68
visitas
Erro no IF (importando o df com Pandas)
Boa noite.
Estou com o seguinte problema. Toda vez que tento fazer um IF usando um DF, dá esse erro (The truth value of a Series is ambiguous. Use a.empty, a.bool(), a.item(), a.any() or a.all()). Já ...
-2
votos
1
resposta
1mil
visitas
Como escolher as colunas específicas de uma tabela em python
Bom pessoal, estou com uma tabela e estou querendo retornar em uma variavel x apenas algumas colunas dessa tabela e para isto estou utilizando o .iloc
Exemplo: x_dataset = dataset.iloc[:, 29 & 19]....
-3
votos
2
respostas
152
visitas
Contagem de dados com Python
Bom dia pessoal!
Estou manipulando uma base, e estou tentando criar uma coluna com a quantidade de vezes que uma pessoa aparece em uma determinada coluna.
dados = ['laranja', 'banana', 'maçã', '...
1
voto
1
resposta
1mil
visitas
Pandas - Populando múltiplas planilhas a partir de uma
Tenho um relatório com informações gerais e preciso gerar um reporte específico para cada escritório (eles são especificados pelo nome mesmo).
No caso, já criei planilhas separadas em uma pasta ...
0
votos
1
resposta
163
visitas
Como NÃO arredondar valores no PANDAS?
Estou manipulando um DataFrame no Pandas que é um relatório que emito do meu sistema. Como os valores vem em R$ (Real Brasileiro) eu faço um replace da string nos valores substituindo a ',' por '.', ...
2
votos
2
respostas
422
visitas
Como substituir dados de uma coluna por dados de outro dataframe usando condições comparativas?
Estou tentando substituir os valores de uma coluna baseado em duas colunas de outro dataframe.
O dataframeX que receberá a substituição possui uma coluna que é uma lista de municípios do Brasil.
O ...
-3
votos
1
resposta
271
visitas
Filtrar dataset com Pandas
Estou querendo filtrar um dataset usando duas condições, porém quando pego esse filtro, eu não consigo armazenar ele, pois ele acaba retornando um objeto e não um array de boolean.Não consegui fazer a ...
0
votos
1
resposta
148
visitas
Como percorrer um dicionário que possui valor None
Eu tenho um dataframe que possui uma coluna multivalorada. Essa coluna possui um dicionário dentro de uma lista. Pode ser que em alguma linha venha como None ou o dicionário dentro da lista. A ideia é ...
-2
votos
1
resposta
65
visitas
Como fazer comparacoes(e alteracoes) entre tipos float e string com .loc
Estou tentando reduzir a variabilidade de uma var. float para uma categórica:
df['DDD'] = df['DDD'].astype(float)
df.loc[df['DDD']> '90.0', 'DDD']= 'Norte'
df.loc[df['DDD']> '80.0', 'DDD']= '...
-1
votos
1
resposta
1mil
visitas
Como obter a quantidade de dias entre duas datas em python
Basicamente preciso obter a diferença de dias entre o dia de hoje e uma data que extraio de um csv.
Estou salvando o dia de hoje e a data que puxei do csv em objetos e subtraindo os dois para obter a ...
-2
votos
1
resposta
401
visitas
Erro de data no Pandas
Estou usando o Pandas para ler uma planilha gigantesca em formato .xlsb para depois tratar os campos e gerar um gráfico.
Infelizmente, o campo de data vem no formato float64 e quando faço a conversão ...
0
votos
1
resposta
70
visitas
Trazer valores do DataFrame2 para o DataFrame1 [Pandas + Python]
Salve pessoal!
Estou em fase de aprendizado com o Python, e tenho a necessidade de agrupar a descrição idêntica do mesmo ID que estão na Tabela 2, e retornar em colunas diferente na Tabela 1.
Tabela - ...
0
votos
2
respostas
132
visitas
Criar coluna categórica a partir de outra coluna usando listas
Olá, estou tentando criar uma nova coluna no pandas a partir de uma coluna existente. Essa coluna contém nome de partidos políticos. Na nova coluna eu quero classificar a ideologia do partido. Para ...
-5
votos
1
resposta
417
visitas
CALCULO DO VALOR DE UMA COLUNA MENOS O VALOR DEBAIXO DA OUTRA COLUNA PYSPARK [fechada]
Estou tentando fazer o seguinte cálculo:
quando a ação for 0, fazer o tempoInicial - tempoFinal do segundo 0 e fazer isso até o fim do dataframe
já tentei usar o LEAD, mas infelizmente não se encaixa. ...
2
votos
1
resposta
478
visitas
Quero copiar para outro dataframe as informações das Linhas nas colunas X e Y quando as celulas abaixo na coluna X e Y estão vazias
Tenho uma planilha excel que estou usando como dataframe, ela contem os dados de assinaturas de clientes em colunas:
CLIENTE
NUCLIENTE
NUASSINATURA
NUASSANTERIOR
DTEMISSAO - Dia-mês
VLASSINATURA
...
0
votos
1
resposta
604
visitas
Contar valores não nulos entre determinadas colunas de dataframe
Possuo um dataframe com colunas de janeiro a setembro. Em cada uma dessas colunas existem linhas com valores numéricos, algumas são nulas.
O que preciso fazer é adicionar uma coluna total nesse ...
-1
votos
1
resposta
137
visitas
Erro com o pandas na hora de compilar o apk com o google colab
estou recebendo erro com o panda ao tentar compilar meu apk, mas nao acho uma solução que funcione, alguem sabe como posso consertar esse erro ou tem alguma dica do que pode ser feito?
# (list) ...
0
votos
2
respostas
1mil
visitas
como renomear os dados de uma coluna com pandas?
tenho 2 datasets csv mergeados e preciso renomear os dados da coluna colocando somente a abreviação, tipo "new york" virar "NY".
-2
votos
1
resposta
49
visitas
Como mesclar uma lista de df mantendo a coluna data?
import pandas as pd
t1 = pd.DataFrame(
{
"data": ["01/01/2022", "02/01/2022", "03/01/2022", "04/01/2022"],
"A": ["...
-3
votos
1
resposta
280
visitas
Nomear Variáveis com base em lista (Python)
A ideia é transformar varias listas de format list para text. E nomear esse texto com o mesmo nome da lista.
O último passo "print(lista)" deve retornar o mesmo dado da da lista porém, em ...
-1
votos
1
resposta
157
visitas
Como tirar o índice da variável em python
Aqui está um trecho do meu código. Basicamente ele lê um excel e retira de cada coluna as informações que eu preciso. Quando eu peço pra ele pegar a primeira variável, que é o nome no caso, ele ...
0
votos
1
resposta
208
visitas
coluna vazia no arquvio excel utilizando pandas
ao criar um arquivo do excel utilizando o codigo:
import pandas as pd
banco=pd.DataFrame({"Names": [], "Pay": [], "offices": []}).to_excel('teste.xlsx')
tabela=pd....
3
votos
2
respostas
262
visitas
Aplicar função lamba para uma subtração e soma python
Como aplicar a função lambda para executar duas operações, por exemplo:
import pandas as pd
df = pd.DataFrame({'temperatura':[42.31, 38.51, 39.93, 46.63, 46.50]})
df
O que gostaria era de transformar ...
-2
votos
1
resposta
923
visitas
Como salvar uma lista/txt para excel/xlsx sem a utilização do pandas para que fique mais rápido a execução do script?
Qual o comando para salvar uma lista de dados do python em Excel sem a utilização do Pandas. Se eu transformar o list em dataframe e depois gravar em excel, igual o código abaixo fica muito lenta a ...
0
votos
1
resposta
403
visitas
Uso do pandas.concat()
Eu estou usando o pandas.concat() pra concatenar dois df que eu dei pandas.merge()
df3 =pd.merge(joi,df, on=['cpf'], how='outer', suffixes=['', '_'], indicator=True)
klog = df3.loc[df3['_merge'] == '...
1
voto
1
resposta
836
visitas
Duplicar linhas a partir de um intervalo de valores entre duas colunas PANDAS
Como exemplo, tenho esse Dataframe:
df = {
'col1': ['a', 'b', 'c'],
'col2': [1, 4, 5],
'col3': [1, 6, 9],
}
col1 col2 col3
0 a 1 1
1 b 4 6
2 c 5 9
...
-1
votos
1
resposta
178
visitas
Contabilizar registros de um dataframe
Estou tratando um arquivo de LOG de conexões WIFI. Serão analisados os dados por intervalo de tempo de 15 em 15 minutos e agrupados as conexões dos usuarios por local de conexão dentro do intervalo de ...
-4
votos
1
resposta
390
visitas
Popular um dataframe vazio com dados de outro dataframe seguindo condições
Estou com dificuldade em visualizar como eu posso solucionar o meu problema com dataframes no Pandas. Vou explicar com exemplos menores:
Há uma lista que contém 3 dataframes.
frames = [df_maria, ...
1
voto
1
resposta
3mil
visitas
Desvio Padrão diferente com as bibliotecas NUMPY, PANDAS E STATISTICS
Me deparei com o resultado diferente do desvio padrão com as bibliotecas PANDAS e NUMPY, sendo que o dataframe possui o mesmo valor para ambos.
numbers = [1, 3.4, 3, 8, 5.5, 6]
df = pd.DataFrame(...
-4
votos
1
resposta
141
visitas
Múltiplos filtros usando outro df python [fechada]
Estou usando o seguinte df
# importando o dataframe
url = 'https://raw.githubusercontent.com/ipauchner/DNC/main/kc_house_data.csv'
df = pd.read_csv(url)
Após algumas análises eu consegui separar 25 ...
0
votos
0
respostas
1mil
visitas
"Could not convert string to float" em um dataset "pandas"
Preciso montar vários gráficos a partir de um arquivo ".data". Usei a biblioteca "pandas" para importar o banco de dados. Antes de mais nada, vou mostrar o código inteiro para ...
-2
votos
1
resposta
260
visitas
Adicionar elementos a uma lista no pandas
tenho um dataframe com a seguinte característica:
Incidente DT_INI DT_FIM Status Descrição
0 IN100 01/01/2022 01/02/2022 Encerrado Abend no job XX_01
1 IN200 01/02/2022 01/03/...
-3
votos
1
resposta
1mil
visitas
Multiplicação Condicional de Coluna - Pandas (Python)
inserir a descrição da imagem aqui
Tenho esse df e preciso multiplicar todos os valores da coluna 'QUANTIDADE' por -1 caso o valor da coluna 'TIPOMOV' seja 'S'. Como faço isso?
-1
votos
1
resposta
1mil
visitas
Como trazer dado de uma coluna dataframe para outro
Tenho um dataframe onde tenho informações como id, name, company e preciso juntar ele em outro dataframe que só tenho o ownerId.
Ex:
users= pd.DataFrame([['Jay',16,'BBA'],
['Jack',...
-1
votos
1
resposta
271
visitas
Calculo DataFrame Pandas
Ola, gostaria de uma ajuda com Pandas em uma DataFrame
Tipo CreatedDate CompanyName TotalRepasseACia
1969 Flight 2022-01 KLM 3531.49
1970 Flight 2022-01 LATAM ...
0
votos
0
respostas
543
visitas
Python Pandas - erro na leitura do csv - coluna contém delimitador
Tenho um arquivo csv com campos delimitados por ';'.
Dois campos desse arquivo apresentam conteúdo texto com ';', não sendo o delimitador.
Isso impede a leitura do arquivo.
Como tratar esse problema?
...
-2
votos
1
resposta
42
visitas
Python - Gerar uma nova planilha de ocorrência de espécies por ano
Imagem da planilha
Tenho uma planilha de dados no Python com ocorrência de espécies e vários anos (1700 a 2019).
Gostaria de gerar uma nova planilha (DataFrame) a partir desses dados, essa nova ...
-3
votos
2
respostas
760
visitas
Verificar valores entre dois dataframes e retornar o maior (Pyhton e Pandas)
O problema é o seguinte: tenho um DataFrame que eu construí com informações de index, Name e Total. Podem acessar pelo link (o formato dele é csv), mas podem ver resumidamente ele aqui
O que quero ...
-2
votos
1
resposta
535
visitas
Juntar várias tabelas
Boa tarde,
Por gentileza, poderiam me ajudar? Estou executando o código abaixo:
import yfinance as yf
import pandas as pd
symbol ="SPY"
ticker = yf.Ticker(symbol)
ticker.options
i=0
while ...
-3
votos
1
resposta
177
visitas
Criar uma series booleana cujo nome é a variável de um for no python
Quero fazer um for considerando uma lista de nomes.
A segunda linha funciona normalmente, criando novas colunas com o nome da variável na lista. O Problema está na segunda.
Como integro o nome da ...
-3
votos
1
resposta
302
visitas
Como recarregar página web caso find_element não encontre o XPath escolhido
Boa tarde!
Estou estruturando um bot de coleta de dados, mas como o site que estou fazendo a raspagem demora as vezes pra carregar ou nem carrega, o bot da erro por não encontrar o XPath.
Assim que ...
-2
votos
1
resposta
533
visitas
Como combinar os valores de duas colunas diferentes em uma só em PYTHON?
Estou em processo de automatização de planilhas em meu trabalho, porém estou com dificuldade para combinar duas colunas em uma nova.
O display:
Preciso combinar a coluna NUM_SS e SEQ com um "-0&...
0
votos
1
resposta
1mil
visitas
ValueError: The truth value of an array with more than one element is ambiguous. Use a.any() or a.all()
Boa tarde.
Fiz um for para ser verificado alguns valores e me dar um retorno para me mostrar quais valores se encaixam dentro do padrão estabelecido e quais não estão.
o final do código é esse:
if (...