Opa!
O pandas tem o método read_html (pandas.read_html)! Se você conseguir atribuir o conteúdo html da página a alguma variável, você só precisaria passar essa variável como parâmetro para o método read_html, que ele já retorna um DataFrame para você.
Acho que esse é o metodo mais simples e rápido!
com o pacote requests, fica assim:
import requests as re
import pandas as pd
url = "http://www2.bmf.com.br/pages/portal/bmfbovespa/lumis/lum-ajustes-do-pregao-ptBR.asp"
params = {
'type': 'js',
'session': '6$6E079F1ED270FE09AAAF72AD1C802103|5286dfffe4e737f8|1',
'svrid': 6,
'flavor': 'post',
'visitID': 'HIGOKLAIJAFBOMFPQKMPCHLOALJFEIDG',
'modifiedSince': 1569350877570,
'app': '5286dfffe4e737f8',
'dData1': '16/09/2019'
}
page = re.post(url, data=params, verify=False)
df = pd.read_html(page.content)
O campo 'dData1' você pode alterar p data que você quiser!
Até onde eu testei, funcionou...