python翻頁
A. 多才多藝必備!_免費自學!_喜提新技能
1.Art set 4丨繪畫
一款繪畫很美的i Pad繪畫軟體, 功能強大且專業,每一樣功能都會有詳細的說明,新手小白也能很好使用,可設置紙張材質,能呈現出在紙上繪畫的效果,超愛油彩筆觸,真的隨便畫畫都好看~
小白也可以自學Python, 會代碼的女生想想都很酷,可參考一下天才基本法女主林朝夕, python的語法簡單、執行方便,現在用一包辣條就可以體驗Python課哦, 還可以發展成職業, 用來寫有用的小工具或者小游戲都可以~
3.與子同袍丨漢服設計
一款可以設計漢服的APP, 喜歡漢服的姐妹必備!提供多朝多代的漢服模板和漢服圖案元素,可按照自己的想法去搭配設計,調配顏色和款式,設計出自己的漢服,還能欣賞學習到其他網友的漢服設計作品噢!
4.X架子鼓丨自學架子鼓
一般學架子鼓的都是男孩子,但如果喜歡的話,女孩子也可以學呀!這個APP就是架子鼓模擬器,小白可以根據曲譜的顏色和架子鼓的顏色來練習敲打, 除了架子鼓, 這個APP還可以架子鼓和鋼琴鍵盤同時練習哦,而且是免費的哦~
5.簡訊丨認知拓展
一個小而美的知識閱讀APP, 每天用幾分鍾的時間刷一刷,專用來提升自己的知識領域,了解各行各業的知識點結論,比如地理,歷史,生活技巧,行業規則,和萬卷中各種優秀書籍的精華總結,隨著時間的堆積,你會發現自己知道的東西越來越多!
6.青團社I大學生必備
一款適合學生黨實習工作搞副業的APP, 有的內容用手機就可以完成,你可以根據需求選擇線下或線上的工作,就算只有周末/寒暑假方便也可以。你還會看到裡面有一些有趣的崗位, 比如鬼屋NPC,劇本殺寫作等...
7.懂音律丨樂譜
這是一個可隨身攜帶的樂譜工具,裡面有一些比較常見的鋼琴譜、吉他譜、尤克里里譜等各樂器曲譜,你也可以自行添加樂譜。曲譜可以滾動翻頁,不用手翻,很方便。它的AI樂譜可以在你練習的時候實時反饋錯音,讓你一個人也可以練琴,幫你糾錯。
8.愛花草丨養護花草
喜歡種植花卉植物的可以備一下這個APP,裡面有三千多種植物的科普介紹和養護知識,找一下自己種植或想種植的植物,看一下它適合什麼樣的生長環境,需要多久澆水、施肥、修剪...這還真是個文藝優雅的技能呢!
B. 【Python爬蟲】分析網頁真實請求
1、抓取網頁、分析請求
2、解析網頁、尋找數據
3、儲存數據、多頁處理
翻頁有規律:
很多網址在第一頁時並沒有變化,多翻下一頁後規律就出來,比如 豆瓣第一頁 和 豆瓣第三頁
發現start為40,limit=20,所以猜測start=0就是第一頁,每頁顯示20條數據,對於第三頁顯示的參數可以一個個刪除驗證,可以減去不必要的參數, 但是刪除前一定要做好數據的對比
(1) 文本框輸入後產生一個請求,如常見的登錄、注冊頁面
Referer:表示當前請求的來源
Request URL:表示實際請求地址
翻頁後URL不變,該如何尋找請求?
如: http://www.zkh360.com/zkh_catalog/3.html
通過對比可以發現網站是通過pageIndex參數控制翻頁的,?表示連接
接下來用抓包工具分析下 ,從第四頁開始看URL就知道了,但是前面幾面需要查看請求的參數,這里偏多,就切換到【Inspectors--Webforms】選項,看的比較直觀
類似的網站還有 今日頭條 ,有興趣的朋友可以去研究下
(可通過獲取max_behot_time的值而改變as和cp)