信息採集源碼
Ⅰ jsp在線信息採集器怎麼做的啊
可以調用現成的採集程序,比如樂思採集系統之類的,既好用又省事。
Ⅱ 求助,如何實現ASP自動採集。。。。。
按下面代碼可以實現:
' 從網頁取信息---參考代碼
'
' rn=100 每頁100條
dim regEx
myurl="http://www..com/s?wd="&kw&"&pn="&pn&"&tn=site888_1_pg&rn="&DLT&"&usm=1" '參考網址
HtmlCldeContent = getHTTPPage(myurl) '目標頁面的url地址
set regEx=new RegExp
regEx.Pattern = "(<br><span class=\""g\"">)(.*)(</span> - <a href=\"")(.*)(\"" target=\""_blank\"" class=\""m\"">網路快照)"
' 此處改成 你關注的頁面的特徵代碼。
regEx.Global=true
set Matches=regEx.execute(HtmlCldeContent)
MNn=Matches.count-1
For i=0 To MNn '遍歷匹配集合。
thisline=Trim(Matches(i).SubMatches(1))
WholeLine=thisline & "【網路快照:"&Matches(i).SubMatches(3)
Response.Write "<br>鏈接網址:"&thisline&" <br>網路快照:"&Matches(i).SubMatches(3)
Response.Write "<br>"&WholeLine
next
'''////////////////////////////////
Function getHTTPPage(url)
on error resume next
dim http
set http=Server.createobject("Msxml2.XMLHTTP")
Http.open "GET",url,false
Http.send()
if Http.readystate<>4 then
exit function
end if
getHTTPPage=bytes2BSTR(Http.responseBody)
set http=nothing
if err.number<>0 then
err.Clear
end if
End Function
Function bytes2BSTR(vIn)
dim strReturn
dim i,ThisCharCode,NextCharCode
strReturn = ""
For i = 1 To LenB(vIn)
ThisCharCode = AscB(MidB(vIn,i,1))
If ThisCharCode < &H80 Then
strReturn = strReturn & Chr(ThisCharCode)
Else
NextCharCode = AscB(MidB(vIn,i+1,1))
strReturn = strReturn & Chr(CLng(ThisCharCode) * &H100 + CInt(NextCharCode))
i = i + 1
End If
Next
bytes2BSTR = strReturn
End Function
Ⅲ C# 自行編寫網頁數據採集器:求思路。 有源代碼的麻煩發一下。 謝謝啦!
思路基本上就是,模仿瀏覽器,發送請求,然後,接收返回的字元串(也就是網頁源代碼)。剩下的就簡單了,根據你要採集的數據,分析,按照一定的規則(比如正則)提取信息就行了。
Ⅳ 網站信息採集軟體
哪有自己些採集系統的,又不穩定,適用范圍也會很小
有很多軟體因為都是那種沒有經過很多測試的,功能葉有很多不足,所以都是固定的只能進入少數種類的資料庫。
你需要能夠自主定義、進入自己資料庫的採集軟體,那就可以用樂思採集系統,他們應該國內這個行業研發的領軍者,好幾年前就在專門研究採集技術的,相關信息。還是你自己去找找看吧
Ⅳ 最近工作需要採集點別人的點數據,現在返回網頁源代碼了 怎麼把源碼里想要的數據採集出來,
最笨的辦法就是寫一個函數,取出網頁中某字元串開始到某字元串結束之間的字元串。你搜索我的博客,我用VB和delphi分別寫過。
Ⅵ 求帶登錄的網站採集php源碼或思路
獲取鏈接的數據以後,加個判斷:如果需要登陸 ,則使用php的curl函數來模擬post;不需要登陸則直接採集。
Ⅶ 網路信息採集器是採集的信息源碼還是文本也就是說採集的是數據還是直接能看到的東西
根據所需有的採集的是源碼,有的採集的是能看的東西。
Ⅷ 怎麼做java網站信息採集
希望這不是廣告問題。
網上搜索熊貓吧,我們幫你搞定。新軟體,採集軟體行業的換代產品,適合新手操作,不需要編寫採集規則的,不需要關心網頁源碼,全程視窗滑鼠操作。如果有採集項目,我們也可以幫你采。