如何解决从2015年至2020年,有没有一种方法可以使用“美丽汤硒”来获得每年1月的“这个家”的Zestimate?
我希望从下面的链接中抓取数据。但是,当我使用美丽汤时,我无法在html中找到它,美丽汤不起作用。此外,我想也许我可以使用硒来抓取这些数据,但是我也找不到该内容。您知道从2015-2020年每年1月如何使用硒或美丽汤来获得“这个家”的Zestimate吗?感谢您的帮助。我正在使用Python。
https://www.zillow.com/homedetails/1954-Sandy-Point-Ln-Mount-Pleasant-SC-29466/10938706_zpid/
解决方法
尝试以下代码,它将使Zestimate成为家。
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver import ActionChains
from selenium.webdriver.common.by import By
from selenium.webdriver.chrome.options import Options
import time
options = Options()
user_agent = 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML,like Gecko) Chrome/60.0.3112.50 Safari/537.36'
options.add_argument('user-agent={0}'.format(user_agent))
driver = webdriver.Chrome(options=options)
wait = WebDriverWait(driver,20)
action = ActionChains(driver)
driver.get("https://www.zillow.com/homedetails/1954-Sandy-Point-Ln-Mount-Pleasant-SC-29466/10938706_zpid/")
Home_Value = wait.until(EC.presence_of_element_located((By.XPATH,"//a[text()='Home value']")))
action.move_to_element(Home_Value).click().perform()
Zestimate = driver.find_element_by_xpath('//*[@id="ds-home-values"]/div/div[1]/div/div[1]/div/div/p').text
print(Zestimate)
关于-“从2015年至2020年的每年1月?” -您可以在1月手动运行相同的脚本以获取最新的Zestimate。您还可以创建一个cron作业。但是我不确定该怎么做。
P.S-运行此脚本大约3-4次后,我现在面临验证码。 THIS链接上有很好的解释
,要提取 Zestimate 即Zestimate®: $4,232,581
,您必须为element_to_be_clickable()
引入WebDriverWait,并且可以使用以下任一Locator Strategies:
-
使用
XPATH
:driver.get('https://www.zillow.com/homedetails/1954-Sandy-Point-Ln-Mount-Pleasant-SC-29466/10938706_zpid/') print(WebDriverWait(driver,20).until(EC.visibility_of_element_located((By.XPATH,"//span[contains(.,'For sale')]//following::span[contains(@class,'ds-dashed-underline') and contains(.,'Zestimate')]//ancestor::span[2]"))).text)
-
注意:您必须添加以下导入:
from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.common.by import By from selenium.webdriver.support import expected_conditions as EC
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。