无法使用selenium从网站下载该文件
我正在尝试使用selenium & python从NSE-印度网站下载每日报告。
下载每日报告的方法
- 没有数据的网站加载
- 在X时间之后，页面将加载报表信息。
- 一旦页面加载了报表数据，"table@id='etfTable'“就会出现。
- 在代码中添加显式等待，直到"table@id='etfTable'“加载
显式等待代码
element=WebDriverWait(driver,50).until(EC.visibility_of_element_located(By.xpath,"//table[@id='etfTable']"))
- 使用xpath提取onclick事件
downloadcsv= driver.find_element_by_xpath("//div[@id='esw-etf']/div[2]/div/div[3]/div/ul/li/a") - 触发单击以下载文件。
全码
从selenium.webdriver.common.by导入from驱动程序从selenium.webdriver.support.ui导入WebDriverWait从selenium.webdriver.support导入expected_conditions作为EC选项=webdriver.ChromeOptions()；options.binary_location=r'/Applications/Google Chrome 2.try/Content/MacOS/Google‘chrome_driver_binary =r'/usr/local/Caskroom/chromedriver/94.0.4606.61/chromedriver’options.add_experimental_option("prefs"，prefs)驱动程序=webdriver.Chrome(chrome_driver_binary，options=options)尝试：#driver.implicity_wait(10) driver.get('https://www.nseindia.com/market-data/exchange-traded-funds-etf')元素=WebDriverWait(driver,50).until(EC.visibility_of_element_located(By.xpath，“//table@id=‘etfTable’”( downloadcsv= downloadcsv= print(downloadcsv) downloadcsv.click() time.sleep(5) driver.close()除外:print(“无效URL")
我面临的问题。
- 该页一直在加载，但在没有selenium的情况下启动时，每日报告将被加载。
- 无法下载每日报告
回答 2
Stack Overflow用户
发布于 2021-10-13 05:29:56
程序中有一些语法错误。就像几行分号一样，和使用WebDriverWait查找element时，括号缺少了。
试着像下面这样确认一下。
可以使用Javascript单击该元素。
driver.get("https://www.nseindia.com/market-data/exchange-traded-funds-etf")
element =WebDriverWait(driver,50).until(EC.visibility_of_element_located((By.XPATH,"//table[@id='etfTable']/tbody/tr[2]")))
downloadcsv= driver.find_element_by_xpath("//img[@title='csv']/parent::a")
print(downloadcsv)
driver.execute_script("arguments[0].click();",downloadcsv)Stack Overflow用户
发布于 2021-10-14 07:18:51
这不是代码的问题，而是网站的问题。我检查了它的大部分时间，它不允许我点击CSV文件。而不是下载CSV文件，您可以刮表。
# for direct to the page delete cookies is very important otherwise it will deny the access
browser.delete_all_cookies()
browser.get('https://www.nseindia.com/market-data/exchange-traded-funds-etf')
sleep(5)
soup = BeautifulSoup(browser.page_source, 'html.parser')
# scrape the table from the souphttps://stackoverflow.com/questions/69549543
复制相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号