Perguntas com a tag [dataframe]
Um data frame é semelhante a uma matriz mas as suas colunas têm nomes e podem conter dados de tipo diferente. Um data frame pode ser visto como uma tabela de uma base de dados, em que cada linha corresponde a um registo (linha) da tabela.
275
perguntas
-2
votos
2
respostas
35
visitas
Excluir linhas com determinadas condições (R)
Tenho um dataframe com as seguintes linhas e variáveis:
| Cidade.estado | Cultura.de.produção |
| ------------------------------ | --------------------|
| Alta Floresta D'oeste - RO ...
-3
votos
0
respostas
22
visitas
Como comparar se todas as listas estão iguais caso contrario adicionar NAN [fechada]
Estou tentando fazer um programa para meu trabalho e estou usando uma planilha excel como banco de dados. Porém eu preciso no final do programa gravar novamente na planilha(sobrepor) para que no outro ...
-3
votos
0
respostas
28
visitas
como eu posso replicar fórmulas do excel no python utilizando o pandas? [fechada]
planilha que precisa ser replicada
formulas1: =B2*1,01+1
formulas2: =C4^252-1
formulas3: =TRUNCAR(ARRED(C4;9)*E3;2)
formulas4: =SE(DATADIF($A$2;HOJE();"d")<=IR!$A$3;(F7-G7)*IR!$B$3;SE(...
0
votos
1
resposta
34
visitas
Imputar dados no dataframe baseado na verificação de strings de uma lista se estão contidas em na coluna X
Eu estou tentando fazer uma espécie de OHE mas preciso verificar a string contida, isso porque a coluna que diz a área do conhecimento do usuário não possui apenas um item de string, pode conter todos ...
-2
votos
1
resposta
40
visitas
Como adicionar um objeto dentro de um JSON
Oi sou novo em python e estou tentendo ver um jeito de colocar um id dentro da estrutura do json
obs. fiz com replace mas acho que não ficou legal.
Estrutura do json:
[
{
"status_online&...
-3
votos
1
resposta
41
visitas
Pandas - Criar coluna nova com contagem de ocorrências
Tenho um dataframe relativamente grande e gostaria de criar uma coluna chamada contagem com o número de ocorrências da mesma linha no mesmo dataframe, quando o valor de determinadas linhas for igual ...
-2
votos
1
resposta
54
visitas
LEFT OUTER JOIN NO DATAFRAME COM PANDAS
JÁ SANEI MINHA DÚVIDA, E DESCOBRI QUE POSSUE CAMPOS UC'S REPETIDOS NA BASE DE DADOS, porém segue abaixo quem quiser ler a pergunta e resolução:
Estou tentando receber depois da união de 2 dataframes, ...
-3
votos
1
resposta
54
visitas
Remover linhas com uma condição em um Dataframe python
Gostaria de saber como excluir as linhas baseado na coluna cliente_id segue a imagem abaixo:
O Objetivo é deletar as linhas onde cliente_id aparece somente uma vez que nesse caso seria o ID 4 e o 5, ...
0
votos
0
respostas
15
visitas
Adicionar no DF pandas: Cada valor da linha dos arquivos .txt em cada coluna
Tenho a seguinte situação:
1)Tenho milhares de arquivos txt dentro de uma pasta.
2)Esses arquivos possuem 24 linhas e não tem cabeçalho.
3)O conteúdo de cada arquivo deve ocular uma linha do df/pandas
...
0
votos
0
respostas
18
visitas
Valores Booleanos contrários python
meu df no tem seguintes informações
Data pagamento Data contábil Valor Grupo Cota contrato Data adesão Data vencimento Valor parcela
0 17/11/2022 22/11/2022 627,0 467 ...
-2
votos
1
resposta
34
visitas
Loop no Python com sql
tenho o seguinte codigo
for contrato in df_raw['Contrato']:
cursor = cnxn.cursor()
cursor.execute(f"""
SELECT TOP 1 * FROM
(
SELECT
...
0
votos
0
respostas
38
visitas
Como extrair e concatenar todas as tabelas existentes de um arquivo pdf usando pdfplumber (python)?
Estou desenvolvendo um projeto no qual o programa extrai todas as tabelas existentes em um arquivo pdf, compila todas em um único dataframe, para futuramente passar pelo processo de correção. Nem ...
-3
votos
1
resposta
36
visitas
Converter String para Timestamp Pandas
No df estou recebendo uma coluna com o tipo String e preciso converter ela para Timestamp para integração em outro banco.
Tentei dessa forma:
if str(df.head(1)).__contains__('timeline.entrada.date'):
...
0
votos
0
respostas
10
visitas
Encontrar str parcial em dataframe
Olá, gostaria de saber como posso procurar os modelos abaixo (na lista ddd3) somente nos 4 primeiros números de cada célula da coluna do dataframe. Dessa forma que está escrito, está procurando na str ...
-2
votos
1
resposta
37
visitas
Label Encoding do Data Frame no R
Tenho uma tabela com 150 colunas de um questionário. E estou tentando fazer um Label Encoding dos dados para fazer análise estatística. Consegui usar o pacote CatEconders para isso que tem a função ...
0
votos
1
resposta
49
visitas
Como NÃO arredondar valores no PANDAS?
Estou manipulando um DataFrame no Pandas que é um relatório que emito do meu sistema. Como os valores vem em R$ (Real Brasileiro) eu faço um replace da string nos valores substituindo a ',' por '.', ...
0
votos
0
respostas
71
visitas
Como gerar um csv através de um dataframe no pyspark?
import sys
from pyspark import SparkConf, SparkContext
from pyspark.conf import SparkConf
from pyspark.sql import SparkSession, DataFrame
from pyspark.sql.functions import *
from pyspark.sql.functions ...
0
votos
1
resposta
33
visitas
Como percorrer um dicionário que possui valor None
Eu tenho um dataframe que possui uma coluna multivalorada. Essa coluna possui um dicionário dentro de uma lista. Pode ser que em alguma linha venha como None ou o dicionário dentro da lista. A ideia é ...
-5
votos
1
resposta
66
visitas
CALCULO DO VALOR DE UMA COLUNA MENOS O VALOR DEBAIXO DA OUTRA COLUNA PYSPARK [fechada]
Estou tentando fazer o seguinte cálculo:
quando a ação for 0, fazer o tempoInicial - tempoFinal do segundo 0 e fazer isso até o fim do dataframe
já tentei usar o LEAD, mas infelizmente não se encaixa. ...
1
voto
1
resposta
67
visitas
Quero copiar para outro dataframe as informações das Linhas nas colunas X e Y quando as celulas abaixo na coluna X e Y estão vazias
Tenho uma planilha excel que estou usando como dataframe, ela contem os dados de assinaturas de clientes em colunas:
CLIENTE
NUCLIENTE
NUASSINATURA
NUASSANTERIOR
DTEMISSAO - Dia-mês
VLASSINATURA
...
-2
votos
1
resposta
65
visitas
Geração de Objetos em Json + Python
To começando agora em Python + Json e queria saber como posso fazer para gerar um OBJETO dentro do JSON.
Vejam só eu tenho um dataframe que tem as colunas
Name fancyName birthday rg document ...
1
voto
1
resposta
229
visitas
Duplicar linhas a partir de um intervalo de valores entre duas colunas PANDAS
Como exemplo, tenho esse Dataframe:
df = {
'col1': ['a', 'b', 'c'],
'col2': [1, 4, 5],
'col3': [1, 6, 9],
}
col1 col2 col3
0 a 1 1
1 b 4 6
2 c 5 9
...
-1
votos
1
resposta
56
visitas
Contabilizar registros de um dataframe
Estou tratando um arquivo de LOG de conexões WIFI. Serão analisados os dados por intervalo de tempo de 15 em 15 minutos e agrupados as conexões dos usuarios por local de conexão dentro do intervalo de ...
-4
votos
1
resposta
88
visitas
Popular um dataframe vazio com dados de outro dataframe seguindo condições
Estou com dificuldade em visualizar como eu posso solucionar o meu problema com dataframes no Pandas. Vou explicar com exemplos menores:
Há uma lista que contém 3 dataframes.
frames = [df_maria, ...
0
votos
1
resposta
57
visitas
Lista de lista para DataFrame - Parenteses atrapalhando
Eu preciso transformar uma lista de listas em DataFrame, colocando título em cada coluna. O problema é que os "()" englobando cada lista (que no caso seriam as linhas) está atrapalhando.
...
-3
votos
1
resposta
400
visitas
Multiplicação Condicional de Coluna - Pandas (Python)
inserir a descrição da imagem aqui
Tenho esse df e preciso multiplicar todos os valores da coluna 'QUANTIDADE' por -1 caso o valor da coluna 'TIPOMOV' seja 'S'. Como faço isso?
-1
votos
1
resposta
196
visitas
Como trazer dado de uma coluna dataframe para outro
Tenho um dataframe onde tenho informações como id, name, company e preciso juntar ele em outro dataframe que só tenho o ownerId.
Ex:
users= pd.DataFrame([['Jay',16,'BBA'],
['Jack',...
-2
votos
1
resposta
42
visitas
Python - Groupby - Excel - como retirar a mesclagem do index
Estou tentando fazer um groupby de valores de um dataframe para em seguida exportar para o excel.
Escrevi as duas linhas abaixo para realizar esse procedimento:
df_dados_entradas2 = pd.DataFrame(...
1
voto
0
respostas
11
visitas
Como gerar os dados para inferir sobre a população a partir da amostra? (Censo demográfico) [fechada]
Gerei o DataFrame com as variáveis de interesse, variável de controle e o peso amostral.
Agora preciso expandir os dados amostrais para poder começar a retirar informações corretas da base, tais como: ...
-3
votos
2
respostas
159
visitas
Verificar valores entre dois dataframes e retornar o maior (Pyhton e Pandas)
O problema é o seguinte: tenho um DataFrame que eu construí com informações de index, Name e Total. Podem acessar pelo link (o formato dele é csv), mas podem ver resumidamente ele aqui
O que quero ...
0
votos
1
resposta
41
visitas
clmfires: como juntar duas colunas (variável e covariável) de dimensões diferentes numa mesma dataframe, associadas às mesmas coordenadas?
Estou a trabalhar com a base de dados do R clmfires, do pacote spatstat. Contém informação (variáveis + covariáveis) sobre 8488 incêndios ocorridos numa janela espaço-temporal.
library(spatstat)
data(...
-2
votos
2
respostas
310
visitas
Verificar se uma lista contém os elementos de outra lista ao longo das linhas de um dataframe
Tenho o seguinte data frame:
As colunas 2 e 5 contém listas em seus conteúdos, preciso verificar ao longo do dataframe, se os items presentes na lista da coluna 5 estão presentes na lista da coluna 2....
-4
votos
1
resposta
93
visitas
Como 'explodir' a coluna CIDADE EXECUÇÃO do DF, transformando cada lista em uma linha separada, usando explode()
df = pd.read_excel ('C:/Users/jrbon/PROJETOS.xlsx', sheet_name='EM EXECUÇÃO', usecols= ['Nº SLIE/SLI', 'CIDADE EXECUÇÃO'])
#df = df.assign(Nº SLIE/SLI' = df['Nº SLIE/SLI''].str.split(',')).explode('...
0
votos
1
resposta
46
visitas
Como armazenar os resultados de operações em um dataframe no R
Estou tentando criar um código para armazenar a média e o intervalo de confiança para 4 parâmetros em um único data frame.
Seguem as primeiras 50 linhas do meu banco (o original tem 45.000 linhas)
...
1
voto
2
respostas
612
visitas
Substituir valor de um DATAFRAME, com lista, for e replace
Tenho duas listas, uma com nome errado e outra com o nome correto, como fazer o REPLACE usando as listas e o FOR, esse código não funcionou:
Lista com o dados a serem corrigidos:
lista_original = ['...
-3
votos
1
resposta
108
visitas
Como alterar o mês de uma coluna com valores de outra
Tenho uma coluna de datas (Mês_fechamento) que gostaria de substituir apenas os meses, usando os valores de uma outra coluna (Clone1).
Esse é o df:
Dat_Avs_Sin Dat_Fch_Sin Mês_fechamento ...
-2
votos
1
resposta
516
visitas
Como acessar um indice de nomes em uma Series?
Estou fazendo uma função que informa se há uma coluna no dataframe que possui valores nulos. O metodo isnull() me retorna uma Serie onde o indice é o próprio nome da coluna. Eu não estou coseguindo ...
-2
votos
1
resposta
1mil
visitas
Transformar linhas de dataframe em coluna python
Eu tenho um data frame que contém 3 colunas. A primeira coluna é uma data, a segunda um grupo e a terceira a quantidade de registros para aquela data/grupo.
A primeira coluna repete a data para cada ...
-1
votos
1
resposta
145
visitas
Contar ocorrencias de certos caracteres nos valores de uma coluna
Bom, eu tenho um dataframe nesse estilo só que bem maior e as siglas de abreviação dos estados se repetem por toda a coluna, alterando apenas os valores em X, fazendo com que cada valor de uma linha ...
1
voto
1
resposta
194
visitas
incrementar uma variável index durante uma atribuição vetorizada no pandas
Bom, eu tenho um dataframe assim.
index
Mobile Phone
1
+XXXXXXXXXXXXX
2
+XXXXXXXXXXXXX
3
+XXXXXXXXXXXXX
e eu preciso adicionar nele mais uma coluna, que ira guardar os dados que representam um ...
-1
votos
1
resposta
574
visitas
Preencher valores nulos de uma coluna
Tenho o seguinte df de exemplo:
df = pd.DataFrame({'Animal': ['Falcon', 'Falcon',
'Parrot', 'Parrot',
'Eagle', 'Eagle'],
...
0
votos
1
resposta
170
visitas
Selecionar 2 valores dentro de uma coluna de um Dataframe em Python e usar eles como "hue"
Bom, o código abaixo é para mostrar em um gráfico de barras a comparação do volume de vendas por ano das plataformas Xbox One e PS4 apenas, e não de todas as plataformas. O data base está no github: ...
0
votos
1
resposta
121
visitas
Mostrar graficamente a soma das vendas de vários jogos no mesmo ano
Bom, o código abaixo printa na tela a tabela com os valores corretos de quantos jogos foram vendidos globalmente em cada ano de 1980 até 2016. O data base está no github: https://github.com/malegopc/...
0
votos
1
resposta
438
visitas
Separar dados dentro de coluna e colocar em novas linhas
Eu tenho um data frame como:
df = {'Column1': ['A, B, C', 'D', 'E, F'], 'Column2': [3, 2, 4]}
df = pd.DataFrame(df)
que aparece como:
Column1 Column2
A, B, C 3
D 2
...
-4
votos
1
resposta
118
visitas
comprar dois dataframes com pandas - python [fechada]
Estou tentando realizar a comparação entre 2 campos, onde 1 é um dataframe e o outro esta em branco, onde após a verificação que os objetos são diferetes(pois futuramente a ideia é salvar um novo ...
3
votos
1
resposta
141
visitas
Como criar um data.frame a partir de uma lista de vetores com diferentes comprimentos?
Eu tenho uma lista de vetores com comprimentos diferentes:
l<- list(a=c(1,2,4,3,2,5,6),b=c(3,2,3,2,1),c=c(32,3,2,6,7,6))
Eu gostaria de criar um data.frame a partir desta lista aonde as colunas ...
-1
votos
3
respostas
862
visitas
Alterar apenas valores NaN de uma coluna com base em valores de outra coluna
Achei que o problema fosse simples, porém não me parece tão óbvio. Tenho duas colunas de um dataframe: df['Country'] e df['City']. Algumas células da coluna "City" possuem valores NaN e ...
2
votos
1
resposta
85
visitas
Fazendo JOIN no Pandas com intervalos de tempo
Tenho os seguintes dataframes:
df_equip
Equipamento
Data
Operador
X
2022-01-03 12:09:00
NaN
X
2022-01-03 12:19:00
NaN
X
2022-01-03 12:29:00
NaN
X
2022-01-03 13:19:00
NaN
Y
2022-01-03 12:13:00
...
-1
votos
1
resposta
197
visitas
Agrupar ou dividir o dataframe a cada valor específico na linha
Tenho um dataframe de uma coluna e várias linhas com dados de notas fiscais e produtos com a seguinte estrutura:
NF
0 100
1 500
2 200
3 200
4 100
5 500
6 200
7 100
...
3
votos
1
resposta
962
visitas
Remover Registros Duplicados em apenas uma coluna de um data-frame
tudo bem ?
Estou com uma duvida relacionada a Pandas no Python e após muito quebrar a cabeça, não cheguei a uma conclusão do que posso fazer.
Após alguns cruzamentos eu fico com um produto cartesiano ...