Selenium scroll down slowly(《硒》慢慢向下滚动)
本文介绍了《硒》慢慢向下滚动的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我正在尝试使用Python语言在呈现为Java脚本的网页上进行动态Web抓取。
1)但是,元素仅在我缓慢向下滚动页面时加载。
我已尝试:
driver.execute_script("window.scrollTo(0, Y)")
(这不起作用,因为它只滚动到页面上的某个点,而忽略了其他结果)
和
driver.execute_script("window.scrollTo(0, document.body.scrollHeight);")
(这不起作用,因为元素在向下滚动到页面末尾时不会加载-它需要用户缓慢地滚动整个页面)
2)如何让Selify等待加载完所有元素后再将它们返回给我?
我知道此解决方案存在:
myElem = WebDriverWait(browser, delay).until(EC.presence_of_element_located((By.ID, 'IdOfMyElement')))
但是,如果结果在用户向下滚动页面时不断出现,这将如何工作?此代码会不会在检测到该元素第一次出现时使Selify停止?
推荐答案
使用execute_async_script
向下滚动到页面末尾:
driver.execute_async_script(
"""
count = 400;
let callback = arguments[arguments.length - 1];
t = setTimeout(function scrolldown(){
console.log(count, t);
window.scrollTo(0, count);
if(count < (document.body.scrollHeight || document.documentElement.scrollHeight)){
count+= 400;
t = setTimeout(scrolldown, 1000);
}else{
callback((document.body.scrollHeight || document.documentElement.scrollHeight));
}
}, 1000);"""
)
这篇关于《硒》慢慢向下滚动的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
沃梦达教程
本文标题为:《硒》慢慢向下滚动


猜你喜欢
- CTR 中的 AES 如何用于 Python 和 PyCrypto? 2022-01-01
- 使用 Cython 将 Python 链接到共享库 2022-01-01
- 如何使用PYSPARK从Spark获得批次行 2022-01-01
- 我如何透明地重定向一个Python导入? 2022-01-01
- ";find_element_by_name(';name';)";和&QOOT;FIND_ELEMENT(BY NAME,';NAME';)";之间有什么区别? 2022-01-01
- 检查具有纬度和经度的地理点是否在 shapefile 中 2022-01-01
- YouTube API v3 返回截断的观看记录 2022-01-01
- 计算测试数量的Python单元测试 2022-01-01
- 我如何卸载 PyTorch? 2022-01-01
- 使用公司代理使Python3.x Slack(松弛客户端) 2022-01-01