Python3-爬虫~selenium\phantomjs\爬取XX网页电影过程中向下滚动网页问题
生活随笔
收集整理的這篇文章主要介紹了
Python3-爬虫~selenium\phantomjs\爬取XX网页电影过程中向下滚动网页问题
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
from selenium import webdriver
import os,timedriver=webdriver.PhantomJS()driver.get('https://movie.douban.com/typerank?type_name=%E5%89%A7%E6%83%85&type=11&interval_id=100:90&action=')
time.sleep(10)
driver.save_screenshot('douban/movie1.png')#滾動條滾動
js='document.body.scrollTop=10000'
time.sleep(3)
driver.execute_script(js)
time.sleep(10)
driver.save_screenshot('douban/movie2.png')content=driver.page_sourcewith open('douban/movie.html','w',encoding='utf-8') as f:f.write(content)driver.quit()
/Library/Frameworks/Python.framework/Versions/3.6/bin/python3.6 /Users/apple/PycharmProjects/stage4/spider/2018_3_14/04scroll.py
Process finished with exit code 0
總結
以上是生活随笔為你收集整理的Python3-爬虫~selenium\phantomjs\爬取XX网页电影过程中向下滚动网页问题的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: python井字棋_python实现简单
- 下一篇: 广州楼市:这种楼盘谨慎购买,未来难转手,