pythonselenium滚动
㈠ python下使用selenium怎么才能控制浏览器加载某个元素
你可能需要两个函数
1、implicitly_wait(30)智能等待，最大30s
2、location_once_scrolled_into_view 滚动到某个元素处，也就是滚动直到这个元素出现在屏幕里
㈡ python 如何操作在注册页面有div内嵌滚动条
#encoding=utf-8
from selenium import webdriver
from selenium.common.exceptions import NoSuchElementException
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import Select
import time
"""滚动条操作，****把想要的元素展示在页面看得见的地方*****"""
driver=webdriver.Chrome(executable_path="c:\\Python27\\chromedriver")
driver.get("http://www.sohu.com/")
driver.maximize_window()
#将滚动条拖到底部
js="var q=document.body.scrollTop=100000"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\buttom.png")
#将滚动条拖到顶部
js="var q=document.body.scrollTop=0"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\top.png")
#将滚动条拖动到页面的任意位置
js="var q=document.body.scrollTop=555"
driver.execute_script(js)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\mid.png")
#将滚动条拖动到需要显示的元素的位置！！！！
target=driver.find_element("link text",u"明星八卦")
driver.execute_script("arguments[0].scrollIntoView();",target)
time.sleep(2)
driver.save_screenshot("c:\\Python27\\port.png")
㈢ 从零开始学Python-使用Selenium抓取动态网页数据
AJAX（Asynchronouse JavaScript And XML：异步JavaScript和XML）通过在后台与服务器进行少量数据交换，Ajax 可以使网页实现异步更新，这意味着可以在不重带洞新加载整个网页的情况下，对网页的某部分进行局部更新。传统的网页（不使用Ajax）如果需要更新内容，必蠢者枯须重载整个网页页面。
因为传统的网页在传输数据格式方面，使用的是 XML 语法，因此叫做 AJAX ，其实现在数据交互基本上都是使用 JSON 。使用AJAX加载的数据，即使使用了JS将数据渲染到了浏览器中，在 右键->查看网页源代码 还是不能看到通嫌隐过ajax加载的数据，只能看到使用这个url加载的html代码。
法1：直接分析ajax调用的接口。然后通过代码请求这个接口。
法2：使用Selenium+chromedriver模拟浏览器行为获取数据。
Selenium 相当于是一个机器人。可以模拟人类在浏览器上的一些行为，自动处理浏览器上的一些行为，比如点击，填充数据，删除cookie等。 chromedriver 是一个驱动 Chrome 浏览器的驱动程序，使用他才可以驱动浏览器。当然针对不同的浏览器有不同的driver。以下列出了不同浏览器及其对应的driver：
现在以一个简单的获取网络首页的例子来讲下 Selenium 和 chromedriver 如何快速入门：
参考：Selenium的使用
直接直接分析ajax调用的接口爬取
selenium结合lxml爬取
㈣ 关于Python的Selenium框架全解，一篇完整的说明书
目录
安装 selenium 第三方库
下载浏览器驱动：
需要把这些浏览器驱动放入 Python 应用目录里面的 Script 文件夹里面
① 200 多本 Python 电子书（和经典的书籍）应该有
② Python标准库资料（最全中文版）
③ 项目源码（四五十个有趣且可靠的练手项目及源码）
④ Python基础入门、爬虫、网络开发、大数据分析方面的视频（适合小白学习）
⑤ Python学习路线图（告别不入流的学习）
私信我01即可获取大量Python学习资源
每次当selenium启动chrome浏览器的时候，chrome浏览器很干净，没有插件、没有收藏、没有 历史 记录，这是因为selenium在启动chrome时为了保证最快的运行效率，启动了一个裸浏览器，这就是为什么需要配置参数的原因，但是有些时候我们需要的不仅是一个裸浏览器
selenium启动配置参数接收是ChromeOptions类，创建方式如下 ：
创建了ChromeOptions类之后就是添加参数，添加参数有几个特定的方法，分别对应添加不同类型的配置项目
常用配置参数：
其他配置项目参数
制作无头浏览器
规避检测
门户网站检测如果是selenium请求的，有可能会拒绝访问。这也是一种反爬机制
实现规避检测
注意：这里只能使用 options 添加
如果有其他的模块要添加，注意要分开添加
元素定位语法
常用语法：
在 element 变成 elements 时，返回符合条件的所有元素组成的数组
控制浏览器大小
浏览器后退，前进
刷新
在搜索框模拟回车操作
在 WebDriver 中， 将这些关于鼠标操作的方法封装在 ActionChains 类提供
ActionChains 类提供了鼠标操作的常用方法：
语法：
想使用selenium中的键盘事件，首先我们必须导入Keys包，需要注意的是包名称Keys首字母需要大写。Keys类中提供了几乎所有的键盘事件包括组合按键如 Ctrl+A、 Ctrl+C 等
使用语法：
其他事件可以通过查看源码获取
显式等待使WebdDriver等待某个条件成立时继续执行，否则在达到最大时长时抛出超时异常
实例：
WebDriverWait类是由WebDirver 提供的等待方法。在设置时间内，默认每隔一段时间检测一次当前页面元素是否存在，如果超过设置时间检测不到则抛出异常
语法：
参数：
如果某些元素不是立即可用的，隐式等待是告诉WebDriver去等待一定的时间后去查找元素。 默认等待时间是0秒，一旦设置该值，隐式等待是设置该WebDriver的实例的生命周期
案例
语法：
alert 里面的方法
WebDriver操作cookie的方法：
参考链接： https://www.jianshu.com/p/773c58406bdb
与普通的在headers里添加 {'Cookies':' '} 不一样的是，此方法需要按照cookie的name,value,path,domain格式逐个cookie添加
通过execute_script()方法执行JavaScripts代码来移动滚动条的位置
㈤ python写爬虫怎么处理动态加载的网页，就是边拉动滚动条边加载的那种
这个用phantomjs或者selenium都可以，这两个工具能模拟浏览器操作，就像你在操作浏览器一样，具体资料，网络之。
㈥ python和selenium怎么判断进度条
phython:
首先利用pip快速安装第三方库，tqdm
使用tqdm的函数之前需要导入qdm库
在tqdm的应用中，直接在for结构上，添加一个tdqm()即可。
执行上一步的操作，就可以观察到进度条。
selenium：
拿到浏览器滚动条的js代码，然后执行，就可以看到进度条
.通过模拟键盘的形式去滚动屏幕，就可以看到进度条
其中通过 driver.execute_script（）执行js代码时，可以用两个语法，语法：scrollBy(x,y)和语法：scrollBy(x,y