pythonhtml提取資料庫數據
最簡單可以用urllib，python2.x和python3.x的用法不同，以python2.x為例：
import
urllib
html
=
urllib.open(url)
text
=
html.read()
復雜些可以用requests庫，支持各種請求類型，支持cookies，header等
再復雜些的可以用selenium，支持抓取javascript產生的文本
2. Python怎樣抓取當前頁面HTML內容
Python用做數據處理還是相當不錯的，如果你想要做爬蟲，Python是很好的選擇，它有很多已經寫好的類包，只要調用，即可完成很多復雜的功能，此文中所有的功能都是基於BeautifulSoup這個包。
1 Pyhton獲取網頁的內容(也就是源代碼)
page = urllib2.urlopen(url)
contents = page.read()
#獲得了整個網頁的內容也就是源代碼 print(contents)
url代表網址，contents代表網址所對應的源代碼，urllib2是需要用到的包，以上三句代碼就能獲得網頁的整個源代碼
2 獲取網頁中想要的內容(先要獲得網頁源代碼，再分析網頁源代碼，找所對應的標簽，然後提取出標簽中的內容)
3. python進行資料庫查詢時怎麼把結果提取出來
設置索引欄位。在開始提取數據前，先將member_id列設置為索引欄位。然後開始提取數據。
按行提取信息。第一步是按行提取數據，例如提取某個用戶的信息。
按列提取信息。第二步是按列提取數據，例如提取用戶工作年限列的所有信息。
按行與列提取信息。第三步是按行和列提取信息，把前面兩部的查詢條件放在一起，查詢特定用戶的特定信息。
在前面的基礎上繼續增加條件，增加一行同時查詢兩個特定用戶的貸款金額信息。
在前面的代碼後增加sum函數，對結果進行求和。
除了增加行的查詢條件以外，還可以增加列的查詢條件。
多個列的查詢也可以進行求和計算，在前面的代碼後增加sum函數，對這個用戶的貸款金額和年收入兩個欄位求和，並顯示出結果。
提取特定日期的信息。數據提取中還有一種很常見的需求就是按日期維度對數據進行匯總和提取，如按月，季度的匯總數據提取和按特定時間段的數據提取等等。
設置索引欄位。首先將索引欄位改為數據表中的日期欄位，這里將issue_d設置為數據表的索引欄位。按日期進行查詢和數據提取。
4. 如何用python把返回的html提取相應的內容到excel
解決方法：
正則提取出多個列表，然後利用 Pandas 的 DataFrame 數據類型寫入 excel，具體格式你自己安排，這里給出個基本示例：
text="""<tdheight="20"align="center">1</td>
<tdalign="center">產品</td>
<tdalign="center">red</td>
<tdalign="center">單價</td>
<tdalign="center">價格</td>
<tdalign="center">備注</td>
<tdheight="20"align="center">2</td>
<tdalign="center">產品</td>
<tdalign="center">red</td>
<tdalign="center">單價</td>
<tdalign="center">價格</td>
<tdalign="center">備注</td>
importpandasaspd
importre
p=re.compile('>(S+)</td>')
q=p.findall(text)
table=pd.read_excel(r'D: est.xlsx')
table['yourtitle']=pd.Series(q)
table.to_excel(r'D: est.xlsx')
結果：
5. 從資料庫里python獲取數據存到本地資料庫
python項目中從介面獲取數據並存入本地資料庫
首先用postman測試介面
根據請求方式將數據存入資料庫中
首先用postman測試介面
通過url，選擇相應的請求方式，頭部，數據格式，點擊send看能否獲取數據
根據請求方式將數據存入資料庫中
下面是post請求方式def get() URL = '' HEADERS = {'Content-Type': 'application/json'} JSON = {} response = request.post(URL,headers=HEADERS,json=JSON) #json.loads()用於將str類型的數據轉成dict jsondata = json.load(response.txt) for i in jsondata: date1 = i[data] type1 = i[type] ... #拼接sql語句 sql="" conn=MySQLdb.connect(host="localhost",user="root",passwd="sa",db="mytable") cursor=conn.cursor() ursor.execute(sql)
6. 如何用python抓取網頁上的數據
使用內置的包來抓取，就是在模仿瀏覽器訪問頁面，再把頁面的數據給解析出來，也可以看做是一次請求。
7. python如何讀取網頁中的數據
用Beautiful Soup這類解析模塊：
Beautiful Soup 是用Python寫的一個HTML/XML的解析器，它可以很好的處理不規范標記並生成剖析樹(parse tree)；
它提供簡單又常用的導航(navigating)，搜索以及修改剖析樹的操作；
用urllib或者urllib2(推薦)將頁面的html代碼下載後，用beautifulsoup解析該html；
然後用beautifulsoup的查找模塊或者正則匹配將你想獲得的內容找出來，就可以進行相關處理了，例如：
html='<html><head><title>test</title></head><body><p>testbody</p></body></html>'
soup=BeautifulSoup(html)
soup.contents[0].name
#u'html'
soup.comtents[0].contents[0].name
#u'head'
head=soup.comtents[0].contents[0]
head.parent.name
#u'html'
head.next
#u'<title>test</title>
8. python 怎麼提取html內容啊（正則）
python提取html內容的方法。如下參考：
1.首先，打開Python來定義字元串，在定義的字元串後面加上中括弧，然後在要提取的字元位置輸入。