python+selenium 获取元素文本为空None的解决办法_selenium js加载为空

用某8同城练习selenium的时候,有一个"加载更多"的按钮,通常是不可见的.通过selenium获取这个文本内容总是为空

无效方法

1\ text属性

        element.text

2\ 虽然在浏览器F12的控制台,可以获取该元素文本内容,但是用selenium发送js获取内容还是为空

有效方法 

1\确定元素是否为空

2\解决办法

(1)selenium 只会与可见元素交互,所以获取隐藏元素的文本为空None.可以修改元素相关属性为可见

(2)通过get_attribute()方法获取元素文本

        在获取隐藏元素的文本信息时，可以使用get_attribute()方法，通过textContent、innerText、innerHTML等属性获取。

　　innerHTML会返回元素内部的HTML，包含所有的HTML标签。

　　textContent和innerText置灰得到文本内容，而不会包含HTML标签。textContent是W3C兼容的文字内容属性，但是IE不支持；innerText不是W3C DOM的指定内容，但是FireFox不支持。

from selenium import webdriver
from selenium.webdriver.common.by import By
import time
 
driver = webdriver.Firefox(keep_alive=True)
driver.maximize_window()
driver.get("https://XXXXX.58.com/pinpaigongyu/")
 
 
xpath = (By.XPATH,'//div[@class="loadbtn "]')
element = driver.find_element(*xpath)
 
text = element.get_attribute("innerText")
 
# 对于不可见元素,虽然能在浏览器F12的控制台可以获取文本,但是selenium发送的js还是无法获取
# script = "arguments[0].textContent"
# text = driver.execute_script(script,element)
print(text)
time.sleep(4)
driver.quit()