python下载器
‘壹’ python爬虫用什么框架
python爬虫框架概述
爬虫框架中比较好用的是 Scrapy 和PySpider。pyspider上手更简单，操作更加简便，因为它增加了 WEB 界面，写爬虫迅速，集成了phantomjs，可以用来抓取js渲染的页面。Scrapy自定义程度高，比 PySpider更底层一些，适合学习研究，需要学习的相关知识多，不过自己拿来研究分布式和多线程等等是非常合适的。
PySpider
PySpider是binux做的一个爬虫架构的开源化实现。主要的功能需求是：
抓取、更新调度多站点的特定的页面
需要对页面进行结构化信息提取
灵活可扩展，稳定可监控
pyspider的设计基础是：以python脚本驱动的抓取环模型爬虫
通过python脚本进行结构化信息的提取，follow链接调度抓取控制，实现最大的灵活性
通过web化的脚本编写、调试环境。web展现调度状态
抓取环模型成熟稳定，模块间相互独立，通过消息队列连接，从单进程到多机分布式灵活拓展
pyspider的架构主要分为 scheler（调度器）, fetcher（抓取器）, processor（脚本执行）：
各个组件间使用消息队列连接，除了scheler是单点的，fetcher 和 processor 都是可以多实例分布式部署的。 scheler 负责整体的调度控制
任务由 scheler 发起调度，fetcher 抓取网页内容， processor 执行预先编写的python脚本，输出结果或产生新的提链任务（发往 scheler），形成闭环。
每个脚本可以灵活使用各种python库对页面进行解析，使用框架API控制下一步抓取动作，通过设置回调控制解析动作。
Scrapy
Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。
其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的， 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试
Scrapy主要包括了以下组件：
引擎(Scrapy): 用来处理整个系统的数据流处理, 触发事务(框架核心)
调度器(Scheler): 用来接受引擎发过来的请求, 压入队列中, 并在引擎再次请求的时候返回. 可以想象成一个URL（抓取网页的网址或者说是链接）的优先队列, 由它来决定下一个要抓取的网址是什么, 同时去除重复的网址
下载器(Downloader): 用于下载网页内容, 并将网页内容返回给蜘蛛(Scrapy下载器是建立在twisted这个高效的异步模型上的)
爬虫(Spiders): 爬虫是主要干活的, 用于从特定的网页中提取自己需要的信息, 即所谓的实体(Item)。用户也可以从中提取出链接,让Scrapy继续抓取下一个页面
项目管道(Pipeline): 负责处理爬虫从网页中抽取的实体，主要的功能是持久化实体、验证实体的有效性、清除不需要的信息。当页面被爬虫解析后，将被发送到项目管道，并经过几个特定的次序处理数据。
下载器中间件(Downloader Middlewares): 位于Scrapy引擎和下载器之间的框架，主要是处理Scrapy引擎与下载器之间的请求及响应。
爬虫中间件(Spider Middlewares): 介于Scrapy引擎和爬虫之间的框架，主要工作是处理蜘蛛的响应输入和请求输出。
调度中间件(Scheler Middewares): 介于Scrapy引擎和调度之间的中间件，从Scrapy引擎发送到调度的请求和响应。
Scrapy运行流程大概如下：
首先，引擎从调度器中取出一个链接(URL)用于接下来的抓取
引擎把URL封装成一个请求(Request)传给下载器，下载器把资源下载下来，并封装成应答包(Response)
然后，爬虫解析Response
若是解析出实体（Item）,则交给实体管道进行进一步的处理。
若是解析出的是链接（URL）,则把URL交给Scheler等待抓取
‘贰’ python写一个stm32下载器
python写一个stm32下载器的方槐禅法是：
1、用裂雀C语言编写，经过优化可在微控制器和受限环境中运行。
2、将MicroPython微控制器硬件之上的完全的Python编铅源尘译器和运行时系统打开。
‘叁’ python下载安装教程
python下载安装教程：自定义安装目录，点击install进行安装，打开cmd窗口，输入python，显示python的版本，安装成功。
Python语言更适合初学者，Python语言并不会让初学者感到晦涩，它突破了传统程序语言入门困难的语法屏障，初学者在学习Python的同时，还能够锻炼自己的逻辑思维，同时Python也是入门人工智能的首选语言。
由于Python
语言的简洁性、易读性以及可扩展性，在国外用Python做科学计算的研究机构日益增多，一些知名大学已经采用Python来教授程序设计课程。例如卡耐基梅隆大学的编程基础、麻省理工学院的计算机科学及编程导论就使用Python语言讲授。
‘肆’ 如何在电脑下载python
在电脑上，登陆python官网。选择对应自己电脑操作系统版本的安装包。比如Windows的64位操作系统。然后根据安装包的提示，一步步安装即可
‘伍’ Python下载安装（mac）
https://www.runoob.com/python3/python3-data-type.html
https://www.python.org/downloads/mac-osx/
Python3 的六个标准数据类型中：
不可变数据（3 个）：Number（数字）、String（字符串）、Tuple（元组）；
可变数据（3 个）：List（列表）、Dictionary（字典）、Set（集合）。
string、list 和 tuple 都属于 sequence（序列）
Python3 支持 int、float、bool、complex（复数）
type() 函数可以用来查询变量所指的对象类型
isinstance()来判断是否为某一种类型
是不可变结构(immutable)
Python中的字符串用单引号 ' 或双引号 " 括起来，
同时使用反斜杠 \ 转义特殊字符；+r可防止转义
索引：索引值以 0 为开始值，-1 为从末尾的开始位置
截取 ：变量[头下标:尾下标:步长]
放置任意数据类型的有序集合,动态可变(mutable)
支持索引，切片，可修改
列表是写在方括号 [] 之间、用逗号分隔开的元素列表。
变量[头下标:尾下标]
reverse():是python中列表的一个内置方法,其实返回的是None,只有在print()的时候才看出反转的效果。
reversed()：是python自带的一个方法，返回的是一个把序列值经过反转之后的迭代器。
join():python中 字符串 自带的一个方法，S.join（可迭代） - > str返回一个字符串，该字符串是字符串的串联迭代。 元素之间的分隔符是S。
split()：通过指定分隔符对字符串进行切片为列表，如果参数 num 有指定值，则分隔 num+1 个子字符串。str.split(str="", num=string.count(str)).
放置任意数据类型的有序集合,静态不可变(immutable)
支持索引、切片但不可修改
虽然tuple的元素不可改变，但它可以包含可变的对象，比如list列表。
构造包含 0 个或 1 个元素的元组比较特殊，所以有一些额外的语法规则：
是由一个或数个形态各异的大小整体组成的，构成集合的事物或对象称作元素或是成员。
基本功能是进行成员关系测试和删除重复元素。
可以使用大括号 { } 或者 set() 函数创建集合，注意：创建一个空集合必须用 set() 而不是 { }，因为 { } 是用来创建一个空字典。
字典（dictionary）是Python中另一个非常有用的内置数据类型。
列表是有序的对象集合，字典是无序的对象集合。两者之间的区别在于：字典当中的元素是通过键来存取的，而不是通过偏移存取。
字典是一种映射类型，字典用 { } 标识，它是一个无序的 键(key) : 值(value) 的集合。
键(key)必须使用不可变类型。在同一个字典中，键(key)必须是唯一的。
构造函数 dict() 可以直接从键值对序列中构建字典如下：
用于移除字符串头尾指定的字符（默认为空格或换行符）或字符序列
方法用于截掉字符串左边的空格或指定字符
通过指定分隔符对字符串进行切片为列表，如果参数 num 有指定值，则分隔
str.count(sub, start= 0,end=len(string))
用于从列表中找出某个值第一个匹配项的索引位置
list.index(x[, start[, end]])
list.sort( key=None, reverse=False)升序
函数sort()会默认地按升序排列
list.sort() 不会返回对象，会改变原有的list
sorted与sort区别
前者是内置函数，后者是列表、字典的方法；前者返回一个新列表
前者是内置函数，后者是列表、字典的方法。前者返回一个新列表
‘陆’ python下载安装教程
首先打开浏览器，网络搜索【python】。出现搜索结果后，再进入下图所示的官网中。进入官网后，鼠标移至【download】再选择自己的系统。进入下载页面后，再选择python的版本。下载完成后，再点击打开安装包即可安装。
工具／原料：
联想小新
Windows10
浏览器10.36
1、首先打开浏览器，网络搜索【python】。
‘柒’ 华硕电脑下载python的步骤
从浏览器搜索下载
1.首先打开电脑上的浏览器,在搜索框中输入“python”
2.点击划线处网站,进入python的官方网站
3.选择“download”下“windows”
下载完成以后，进行程序的安装。先将下方的【Addpython3.6toPYTH】打勾，表示变量的添加。上方的【InstallNow】代表默认的安装路线，【Customizeinstallation】代表自定义的安装路线。
‘捌’ 如何在手机上下载python
应用市场内搜索下载
下载Python
在您开始之前，在你的计算机将需要Python，但您可能不需要下载它。首先检查(在命令行窗口输入python)有没有安装Python!如果你看到了一个Python解释器的响应，那么就能在它的显示窗口中得到一个版本号。通常较新的版本都可以做到Python的向后兼容。
如果您需要安装， 您不妨下载最近稳定的版本。 就是那个以没有被标记作为alpha或Beta发行的最高的版本。最稳定的版本是Python3.0以上
如果你使用的操作系统是Windows：当前最稳定的Windows版本下载是"Python 3.7.3 for Windows"
如果你使用的是Mac，MacOS 10.2 (Jaguar), 10.3 (Panther) and 10.4 (Tiger)已经集成安装了Python，但是你大概需要安装最近通用的构架(build)。
对于Red Hat，安装python2和python2-devel包。
对于Debian，安装python2.5和python2.5-dev包。