JAVA/JSP學(xué)習(xí)系列之11
發(fā)表時間:2024-02-09 來源:明輝站整理相關(guān)軟件相關(guān)文章人氣:
[摘要]一、前言 從一個網(wǎng)站上,看到一個“抓網(wǎng)頁”的代碼,覺得有點(diǎn)意思,但是沒有提供源代碼,于是,自己想寫一個,其實(shí)代碼比較簡單的。 二、代碼<%@ page contentType="text/html;charset=gb2312"%> <% String s...
一、前言
從一個網(wǎng)站上,看到一個“抓網(wǎng)頁”的代碼,覺得有點(diǎn)意思,但是沒有提供源代碼,于是,自己想寫一個,其實(shí)代碼比較簡單的。
二、代碼
<%@ page contentType="text/html;charset=gb2312"%>
<%
String sCurrentLine;
String sTotalString;
sCurrentLine="";
sTotalString="";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.163.net/");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null)
{
sTotalString+=sCurrentLine;
}
out.println(sTotalString);
%>
三、后記
雖然代碼比較簡單,但是,我認(rèn)為根據(jù)這個,可以實(shí)現(xiàn)“網(wǎng)絡(luò)爬蟲”的功能,比如從頁面找href連接,然后再得到那個連接,然后再“抓”,不停止地(當(dāng)然可以限定層數(shù)),這樣,可以實(shí)現(xiàn)“網(wǎng)頁搜索”功能。