JSP抓取網(wǎng)頁(yè)代碼的程序
更新時(shí)間:2006年10月13日 00:00:00 作者:
<%@ page contentType="text/html;charset=gb2312"%>
<%
String sCurrentLine;
String sTotalString;
sCurrentLine="";
sTotalString="";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.163.net/");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null)
{
sTotalString+=sCurrentLine;
}
out.println(sTotalString);
%>
后記
雖然代碼比較簡(jiǎn)單,但是,我認(rèn)為根據(jù)這個(gè),可以實(shí)現(xiàn)“網(wǎng)絡(luò)爬蟲(chóng)”的功能,比如從頁(yè)面找href連接,然后再得到那個(gè)連接,然后再“抓”,不停止地(當(dāng)然可以限定層數(shù)),這樣,可以實(shí)現(xiàn)“網(wǎng)頁(yè)搜索”功能。
<%
String sCurrentLine;
String sTotalString;
sCurrentLine="";
sTotalString="";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.163.net/");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null)
{
sTotalString+=sCurrentLine;
}
out.println(sTotalString);
%>
后記
雖然代碼比較簡(jiǎn)單,但是,我認(rèn)為根據(jù)這個(gè),可以實(shí)現(xiàn)“網(wǎng)絡(luò)爬蟲(chóng)”的功能,比如從頁(yè)面找href連接,然后再得到那個(gè)連接,然后再“抓”,不停止地(當(dāng)然可以限定層數(shù)),這樣,可以實(shí)現(xiàn)“網(wǎng)頁(yè)搜索”功能。
相關(guān)文章
詳解直接訪問(wèn)WEB-INF目錄下的JSP頁(yè)面的方法
這篇文章主要介紹了詳解直接訪問(wèn)WEB-INF目錄下的JSP頁(yè)面的方法的相關(guān)資料,需要的朋友可以參考下2017-06-06
java易懂易用的MD5加密(可直接運(yùn)行) (1)
出于安全考慮,網(wǎng)絡(luò)的傳輸中經(jīng)常對(duì)傳輸數(shù)據(jù)做加密和編碼處理,其中涉及以下幾種2008-11-11
JSP中用回車(chē)監(jiān)聽(tīng)按鈕事件兼容火狐 IE等主流瀏覽器
這篇文章主要介紹了用回車(chē)監(jiān)聽(tīng)按鈕事件并且兼容火狐、IE等主流瀏覽器 ,需要的朋友可以參考下2014-04-04
JSP實(shí)現(xiàn)遠(yuǎn)程文件下載保存到服務(wù)器指定目錄中的方法
這篇文章主要介紹了JSP實(shí)現(xiàn)遠(yuǎn)程文件下載保存到服務(wù)器指定目錄中的方法,涉及JSP文件傳輸及目錄操作的相關(guān)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-10-10

