No colab da um erro:
"A sessão falhou depois de usar toda a RAM disponível. Se você tiver interesse em acessar ambientes de execução com mais memória RAM, confira o Colab Pro."
Eu queria diminuir o arquivo csv para nao dar mais este problema ao importar, o que faço? Ele é muito grande 3 GB, devido a isto a RAM disponível no google Colab não é suficiente para importá-lo. O arquivo esta em https://download.inep.gov.br/microdados/microdados_enem_2019.zip , e so fazer o download se precisar. Este e o caminho ao baixar no drive para pegar o arquivo que estou me referindo /content/drive/MyDrive/Microdados_Enem_2019/DADOS/MICRODADOS_ENEM_2019.csv. Se poderem me ajudar a diminuir o arquivo csv para conseguir importa-lo no google colab, agradeceria muito, e simples e so me ajudar a diminuir a quantidade de linha no arquivo csv, neste arquivo possui 5 milhao, seria mais facil se tivesse meio milhao ou menos, para conseguir importar no colab.
from google.colab import drive
drive.mount('/content/drive')
import pandas as pd
#aqui que dá o erro, ao importar o arquivo csv, eu só queria diminuir ele para conseguir importar
microdados = pd.read_csv('/content/drive/MyDrive/Microdados_Enem_2019/DADOS/MICRODADOS_ENEM_2019.csv',sep=";", encoding="ISO-8859-1")
microdados.head()
confira o Colab Pro
... Significa que você tem que pagar por um serviço para ter mais memória disponível. Minha sugestão caso você não tenha orçamento para isso é instala o Jupyter na sua máquina. Acredito que dividir o arquivo não seja a solução, pois vc terá que carregar todos do mesmo jeito, certo?read_csv
pode receber um parâmentronrows
que especifica quantas linhas do arquivo você quer ler.