Olá, amigos!
Atualmente faço uma pesquisa científica no ramo da IA, o Machine Learning - Classificação, usando a linguagem Python.
Em vista disso, eu tenho alguns dados para desenvolver um algoritmo, que será usado para treinar e testar a minha máquina. Porém são mais de 300.000 e, por estar alocando muito dado numa única variável, meu ambiente de desenvolvimento sofre erro de memória.
A minha estratégia é fracionar esse DataFrame e impor um limite, mas procurei e não encontro nada. O objetivo é pegar esses 300.000 dados e limitar para 5.000 ou 10.000. Assim consigo uma quantidade boa para treinar minha máquina sem sofrer erro de memória.
Vocês têm ideia de como eu faço isso?
read_csv(..., nrows=5000)