Estou tentando pegar um texto depois de uma tag que está dentro de uma div, em um html. O problema que estou tendo é que não estou recebendo o texto, só uma string vazia. Pesquisei em outros lugares e não vi ninguém com um problema semelhante :/
Aqui vai o código html:
<div class="list-view-item-title-wrapper">
<div class="list-view-item-title-top">
<div class="list-view-item-type">
"Webcast"
</div>
</div>
<a href="/resources/actionable-awareness-unlock-your-influence" class="list-view-item-title">
<h2>
"Actionable Awareness: Unlock Your Influence"
</h2>
</a>
<div class="list-view-item-date">
<i class="fa fa-calendar"></i>
"September 24, 2020"
</div>
...
</div>
E o python:
def get_posts_elements(self, html):
posts = self.get_posts(html)
# - get_posts -> retorna html.xpath("//div[@class='list-view-item-title-wrapper']")
# - html -> lxml.html.fromstring(requests.get('https://www.scrum.org/resources'))
for post in posts:
# --- Recebendo com sucesso:
try:
self.data['Type'].append(post.xpath(".//div[@class='list-view-item-type']")[0].text.strip())
except:
self.data['Type'].append('')
try:
self.data['Title'].append(post.xpath(".//a[@class='list-view-item-title']/h2")[0].text.strip())
except:
self.data['Type'].append('')
try:
self.data['Link'].append(urljoin(self.base_url, post.xpath(".//a[@class='list-view-item-title']/@href")[0]))
except:
self.data['Link'].append('')
# --- Recebendo com falha:
data = post.xpath(".//div[@class='list-view-item-date']")[0].text
print(data)
No caso, quero pegar os textos referentes as datas de cada post, como faço com o título e tipo. No exemplo acima seria "September 24, 2020" mas só recebo uma string vazia.
Meus imports:
import lxml.html as parser
import requests
from urllib.parse import urlsplit, urljoin