pythonselenium滾動
㈠ python下使用selenium怎麼才能控制瀏覽器載入某個元素
你可能需要兩個函數
1、implicitly_wait(30)智能等待，最大30s
2、location_once_scrolled_into_view 滾動到某個元素處，也就是滾動直到這個元素出現在屏幕里
㈡ python 如何操作在注冊頁面有div內嵌滾動條
#encoding=utf-8
from selenium import webdriver
from selenium.common.exceptions import NoSuchElementException
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import Select
import time
"""滾動條操作，****把想要的元素展示在頁面看得見的地方*****"""
driver=webdriver.Chrome(executable_path="c:\\Python27\\chromedriver")
driver.get("http://www.sohu.com/")
driver.maximize_window()
#將滾動條拖到底部
js="var q=document.body.scrollTop=100000"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\buttom.png")
#將滾動條拖到頂部
js="var q=document.body.scrollTop=0"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\top.png")
#將滾動條拖動到頁面的任意位置
js="var q=document.body.scrollTop=555"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\mid.png")
#將滾動條拖動到需要顯示的元素的位置！！！！
target=driver.find_element("link text",u"明星八卦")
driver.execute_script("arguments[0].scrollIntoView();",target)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\port.png")
㈢ 從零開始學Python-使用Selenium抓取動態網頁數據
AJAX（Asynchronouse JavaScript And XML：非同步JavaScript和XML）通過在後台與伺服器進行少量數據交換，Ajax 可以使網頁實現非同步更新，這意味著可以在不重帶洞新載入整個網頁的情況下，對網頁的某部分進行局部更新。傳統的網頁（不使用Ajax）如果需要更新內容，必蠢者枯須重載整個網頁頁面。
因為傳統的網頁在傳輸數據格式方面，使用的是 XML 語法，因此叫做 AJAX ，其實現在數據交互基本上都是使用 JSON 。使用AJAX載入的數據，即使使用了JS將數據渲染到了瀏覽器中，在 右鍵->查看網頁源代碼 還是不能看到通嫌隱過ajax載入的數據，只能看到使用這個url載入的html代碼。
法1：直接分析ajax調用的介面。然後通過代碼請求這個介面。
法2：使用Selenium+chromedriver模擬瀏覽器行為獲取數據。
Selenium 相當於是一個機器人。可以模擬人類在瀏覽器上的一些行為，自動處理瀏覽器上的一些行為，比如點擊，填充數據，刪除cookie等。 chromedriver 是一個驅動 Chrome 瀏覽器的驅動程序，使用他才可以驅動瀏覽器。當然針對不同的瀏覽器有不同的driver。以下列出了不同瀏覽器及其對應的driver：
現在以一個簡單的獲取網路首頁的例子來講下 Selenium 和 chromedriver 如何快速入門：
參考：Selenium的使用
直接直接分析ajax調用的介面爬取
selenium結合lxml爬取
㈣ 關於Python的Selenium框架全解，一篇完整的說明書
目錄
安裝 selenium 第三方庫
下載瀏覽器驅動：
需要把這些瀏覽器驅動放入 Python 應用目錄裡面的 Script 文件夾裡面
① 200 多本 Python 電子書（和經典的書籍）應該有
② Python標准庫資料（最全中文版）
③ 項目源碼（四五十個有趣且可靠的練手項目及源碼）
④ Python基礎入門、爬蟲、網路開發、大數據分析方面的視頻（適合小白學習）
⑤ Python學習路線圖（告別不入流的學習）
私信我01即可獲取大量Python學習資源
每次當selenium啟動chrome瀏覽器的時候，chrome瀏覽器很乾凈，沒有插件、沒有收藏、沒有 歷史 記錄，這是因為selenium在啟動chrome時為了保證最快的運行效率，啟動了一個裸瀏覽器，這就是為什麼需要配置參數的原因，但是有些時候我們需要的不僅是一個裸瀏覽器
selenium啟動配置參數接收是ChromeOptions類，創建方式如下 ：
創建了ChromeOptions類之後就是添加參數，添加參數有幾個特定的方法，分別對應添加不同類型的配置項目
常用配置參數：
其他配置項目參數
製作無頭瀏覽器
規避檢測
門戶網站檢測如果是selenium請求的，有可能會拒絕訪問。這也是一種反爬機制
實現規避檢測
注意：這里只能使用 options 添加
如果有其他的模塊要添加，注意要分開添加
元素定位語法
常用語法：
在 element 變成 elements 時，返回符合條件的所有元素組成的數組
控制瀏覽器大小
瀏覽器後退，前進
刷新
在搜索框模擬回車操作
在 WebDriver 中， 將這些關於滑鼠操作的方法封裝在 ActionChains 類提供
ActionChains 類提供了滑鼠操作的常用方法：
語法：
想使用selenium中的鍵盤事件，首先我們必須導入Keys包，需要注意的是包名稱Keys首字母需要大寫。Keys類中提供了幾乎所有的鍵盤事件包括組合按鍵如 Ctrl+A、 Ctrl+C 等
使用語法：
其他事件可以通過查看源碼獲取
顯式等待使WebdDriver等待某個條件成立時繼續執行，否則在達到最大時長時拋出超時異常
實例：
WebDriverWait類是由WebDirver 提供的等待方法。在設置時間內，默認每隔一段時間檢測一次當前頁面元素是否存在，如果超過設置時間檢測不到則拋出異常
語法：
參數：
如果某些元素不是立即可用的，隱式等待是告訴WebDriver去等待一定的時間後去查找元素。 默認等待時間是0秒，一旦設置該值，隱式等待是設置該WebDriver的實例的生命周期
案例
語法：
alert 裡面的方法
WebDriver操作cookie的方法：
參考鏈接： https://www.jianshu.com/p/773c58406bdb
與普通的在headers里添加 {'Cookies':' '} 不一樣的是，此方法需要按照cookie的name,value,path,domain格式逐個cookie添加
通過execute_script()方法執行JavaScripts代碼來移動滾動條的位置
㈤ python寫爬蟲怎麼處理動態載入的網頁，就是邊拉動滾動條邊載入的那種
這個用phantomjs或者selenium都可以，這兩個工具能模擬瀏覽器操作，就像你在操作瀏覽器一樣，具體資料，網路之。
㈥ python和selenium怎麼判斷進度條
phython:
首先利用pip快速安裝第三方庫，tqdm
使用tqdm的函數之前需要導入qdm庫
在tqdm的應用中，直接在for結構上，添加一個tdqm()即可。
執行上一步的操作，就可以觀察到進度條。
selenium：
拿到瀏覽器滾動條的js代碼，然後執行，就可以看到進度條
.通過模擬鍵盤的形式去滾動屏幕，就可以看到進度條
其中通過 driver.execute_script（）執行js代碼時，可以用兩個語法，語法：scrollBy(x,y)和語法：scrollBy(x,y