採集器源碼

『壹』 火車頭採集器 可以採集網站源碼嗎

可以試試用八爪魚採集器對網頁的源碼進行採集，
八爪魚採集器用的是可視化的採集模塊，
操作比起其他採集器更加的便捷，技術沒什麼基礎的，
通過簡單的學習就可以自己採集需要的數據了，
挺不錯的一個軟體你可以試試看。
http://rj..com/soft/detail/35629.html

『貳』 什麼是帶採集的網站源碼

採集就是按照一定的規則自動採集別人網站上的文章，現在大多cms網站都有採集功能，如果沒有的可以用一些採集軟體，比如火車頭、狂人採集器等等！不過採集會影響網路對自己網站的收錄，嚴重話還會導致降權甚至K站，所以，建議網站初期用下採集，當正式步入軌道以後就停止，自己更新高質量文章，當然，如果是做垃圾站就無所謂了！

『叄』 網站數據採集開始代碼跟結束代碼怎麼看

要看你用什麼軟體採集哈，寫法不一樣的。

要查找開始與結束的標識，打開網頁看源代碼，在你採集目標網頁的列表（或內容頁）前後分別找出唯一的那一段html，以supesite的寫法為例: 開始的html[list]結束的html。然後採集器會截取這兩段html之間的東西。

『肆』 數據採集源代碼從哪裡獲得

數據爬蟲代碼如果自己去開發爬蟲技術爬取時間跟人力起碼需要在一年左右。現在有一些平台是專門提供這些介面服務，可以直接調用現成的數據獲得數據。
以下是一些數據開放平台：
1.京東獲取單個商品價格介面:
1.//ps:商品ID這么獲取:http://item.jd.com/954086.html
2.http://p.3.cn/prices/mgets?skuIds=J_商品ID&type=1

2.淘寶商品搜索建議:
1.http://suggest.taobao.com/sug?code=utf-8&;q=商品關鍵字&callback=cb
2.//ps:callback是回調函數設定

3.全網商品比價介面：
1.慢慢買比價API免費介面
2.比一比價API免費介面
3.歷史價格查詢比價介面

4.快遞介面:
1.//ps:快遞公司編碼:申通="shentong" EMS="ems" 順豐="shunfeng" 圓通="yuantong" 中通="zhongtong" 韻達="yunda" 天天="tiantian"
2.匯通="huitongkuaidi" 全峰="quanfengkuaidi" 德邦="debangwuliu" 宅急送="zhaijisong"
3.http://www.kuaidi100.com/query?type=快遞公司代號&postid=快遞單號

5.網路介面:
1.http://ke..com/api/openapi/BaikeLemmaCardApi?scope=103&;format=json&appid=379020&bk_key=關鍵字&bk_length=600
2.//查詢出錯示例如下：查看原始頁面 {"error_code":"20000","error_msg":"search word not found"}音樂介面

6.蝦米音樂介面
1.http://kuang.xiami.com/app/nineteen/search/key/歌曲名稱/diandian/1/page/歌曲當前頁?_=當前毫秒&callback=getXiamiData

7.QQ空間音樂介面
1.http://qzone-music.qq.com/fcg-bin/cgi_playlist_xml.fcg?uin=QQ號碼&json=1&g_tk=1916754934

『伍』 我想採集一個網站的數據，為什麼源碼裡面沒有這部分東西

有些數據 是通過外部調用 或者js跳轉等形式展示的
一般的採集工具 或者說 一般的操作能力
只適合採集 一眼就能看到的代碼
所以會找不到

其實只要瀏覽器能顯示的 可以說都可以做到

『陸』 萬能採集網站php源碼

可以參考以下幾種方法：

方法一：file_get_contents獲取

spanstyle="white-space:pre"?/span$url="";

spanstyle="white-space:pre"?/span$fh=file_get_contents

('');spanstyle="white-space:pre"?/spanecho$fh;

方法二：使用fopen獲取網頁源代碼

spanstyle="white-space:pre"?/span$url="";

spanstyle="white-space:pre"?/span$handle=fopen($url,"rb");

spanstyle="white-space:pre"?/span$contents="";

spanstyle="white-space:pre"?/spanwhile(!feof($handle)){

spanstyle="white-space:pre"??/span$contents.=fread($handle,8192);

spanstyle="white-space:pre"?/span}

spanstyle="white-space:pre"?/spanfclose($handle);

spanstyle="white-space:pre"?/spanecho$contents;//輸出獲取到得內容。

方法三：使用CURL獲取網頁源代碼

$url="";

$UserAgent='Mozilla/4.0(compatible;MSIE7.0;WindowsNT6.0;SLCC1;.NETCLR2.0.50727;.NETCLR3.0.04506;.NETCLR3.5.21022;.NETCLR1.0.3705;.NETCLR1.1.4322)'

$curl=curl_init();?//創建一個新的CURL資源

curl_setopt($curl,CURLOPT_URL,$url);?//設置URL和相應的選項

curl_setopt($curl,CURLOPT_HEADER,0);?//0表示不輸出Header，1表示輸出

curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);?//設定是否顯示頭信息,1顯示，0不顯示。//如果成功只將結果返回，不自動輸出任何內容。如果失敗返回FALSE

curl_setopt($curl,CURLOPT_SSL_VERIFYPEER,false);

curl_setopt($curl,CURLOPT_SSL_VERIFYHOST,false);

curl_setopt($curl,CURLOPT_ENCODING,'');?//設置編碼格式，為空表示支持所有格式的編碼

//header中「Accept-Encoding:」部分的內容，支持的編碼格式為："identity"，"deflate"，"gzip"。

curl_setopt($curl,CURLOPT_USERAGENT,$UserAgent);

curl_setopt($curl,CURLOPT_FOLLOWLOCATION,1);

//設置這個選項為一個非零值(象「Location:「)的頭，伺服器會把它當做HTTP頭的一部分發送(注意這是遞歸的，PHP將發送形如「Location:「的頭)。

$data=curl_exec($curl);

echo$data;

//echocurl_errno($curl);//返回0時表示程序執行成功

curl_close($curl);?//關閉cURL資源，並釋放系統資源

拓展資料

PHP（外文名:PHP:HypertextPreprocessor，中文名：「超文本預處理器」）是一種通用開源腳本語言。語法吸收了C語言、Java和Perl的特點，利於學習，使用廣泛，主要適用於Web開發領域。PHP獨特的語法混合了C、Java、Perl以及PHP自創的語法。它可以比CGI或者Perl更快速地執行動態網頁。

用PHP做出的動態頁面與其他的編程語言相比，PHP是將程序嵌入到HTML（標准通用標記語言下的一個應用）文檔中去執行，執行效率比完全生成HTML標記的CGI要高許多；PHP還可以執行編譯後代碼，編譯可以達到加密和優化代碼運行，使代碼運行更快。

『柒』 八爪魚採集器可以下載網站整站的源碼和資料庫嗎

下載你沒有許可權登錄的網站源碼和資料庫，除非滲透入侵進去才能做到。互聯網上流傳的合法工具。沒有任何一個工具可以做到，包括八爪魚。

不過可以使用整站下載工具，可以把HTML代碼和樣式圖片下載下來。作為離線瀏覽和樣式學習還是有工具的。如：iis7整站下載