1 Star 0 Fork 0

Wangzg97/crawler_learning

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
文件
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
35-selenium滚动条的使用.py 618 Bytes
一键复制 编辑 原始数据 按行查看 历史
Wangzg97 提交于 2019-01-31 15:56 +08:00 . Add files via upload
from selenium import webdriver
from lxml import etree
from time import sleep
chrome = webdriver.Chrome()
url = "https://search.jd.com/Search?keyword=macbook&enc=utf-8&suggest=4.def.0.V13&pvid=b929e83e486f4016ae2846d35ecab2f1"
chrome.get(url)
# 滚动条滚动至最底部
js = "document.documentElement.scrollTop=10000"
chrome.execute_script(js)
sleep(10)
html = chrome.page_source
e = etree.HTML(html)
prices = e.xpath('//li[@class="gl-item"]//strong/i/text()')
names = e.xpath('//li/div/div[3]/a/em/text()')
print(len(names))
for name, price in zip(names, prices):
print(name, ":", price)
Loading...
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化
Python
1
https://gitee.com/wangzg97/crawler_learning.git
git@gitee.com:wangzg97/crawler_learning.git
wangzg97
crawler_learning
crawler_learning
master

搜索帮助

371d5123 14472233 46e8bd33 14472233