Java访问指定URL并获取网页源代码1.编写useSourceViewer 类的基本框架,该类仅包括无返回值的main ()方法,该方法从参数中获取URL,通过输入缓冲和输出缓冲将该URL 原码输出 。
2.编写useSourceViewer 类 , 代码如下:
import java.net.*;
import java.io.*;
public class useSourceViewer
{
public static void main (String[] args)
{
if (args.length0)
{
try
{
//读入URL
URL u = new URL(args[0]);
InputStream in = u.openStream( );
// 为增加性能存储输入流
in = new BufferedInputStream(in);
// 将输入流连接到阅读器
Reader r = new InputStreamReader(in);
int c;
while ((c = r.read( )) != -1)
{
System.out.print((char) c);
}
Object o = u.getContent( );
System.out.println("I got a "o.getClass().getName( ));
}
catch (MalformedURLException e)
{
System.err.println(args[0]" is not a parseable URL");
}
catch (IOException e)
{
System.err.println(e);
}
} // end if
} // end main
} // end SourceViewer}
java中如何根据一个网址获得该网页的源代码?package test;
import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.URL;
public class HttpTest {
private String u;
private String encoding;
public static void main(String[] args) throws Exception {
HttpTest client = new HttpTest("", "UTF-8");
client.run();
}
public HttpTest(String u, String encoding) {
this.u = u;
this.encoding = encoding;
}
public void run() throws Exception {
URL url = new URL(u);// 根据链接(字符串格式),生成一个URL对象
HttpURLConnection urlConnection = (HttpURLConnection) url
.openConnection();// 打开URL
BufferedReader reader = new BufferedReader(new InputStreamReader(
urlConnection.getInputStream(), encoding));// 得到输入流,即获得了网页的内容
String line; // 读取输入流的数据,并显示
while ((line = reader.readLine()) != null) {
System.out.println(line);
}
}
}
根据具体问题类型 , 进行步骤拆解/原因原理分析/内容拓展等 。
具体步骤如下:/导致这种情况的原因主要是……
java程序读取一个url页面的源代码传入一个url,返回源代码; public static String getHTML(String url){// 获取指定URL的网页,返回网页内容的字符串,然后将此字符串存到文件即可 try { URL newUrl = new URL(url); URLConnection connect = newUrl.openConnection(); connect.setRequestProperty("User-Agent","Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)"); DataInputStream dis = new DataInputStream(connect.getInputStream()); BufferedReader in = new BufferedReader(new InputStreamReader(dis,"UTF-8")); String html = ""; String readLine = null; while((readLine = in.readLine()) != null) { html = htmlreadLine; } in.close(); return html; }catch (MalformedURLException me){ System.out.println("MalformedURLException"me); }catch (IOException ioe){ System.out.println("ioeException"ioe); } return null; }
如何java写/实现网络爬虫抓取网页网络爬虫是一个自动提取网页的程序,它为搜索引擎从万维网上下载网页,是搜索引擎的重要组成 。传统爬虫从一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中 , 不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件 。
java实现网页源码获取的步骤:
(1)新建URL对象,表示要访问的网址 。如:url=new URL("");
(2)建立HTTP连接 , 返回连接对象urlConnection对象 。如:urlConnection = (HttpURLConnection)url.openConnection();
(3)获取相应HTTP 状态码 。如responsecode=urlConnection.getResponseCode();
(4)如果HTTP 状态码为200,表示成功 。从urlConnection对象获取输入流对象来获取请求的网页源代码 。
java中如何根据一个网址获得该网页的源代码 , 急求import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.URL;
public class HttpTest {
String urlString;
public static void main(String[] args) throws Exception {
HttpTest client = new HttpTest(网址);
client.run();
}
public HttpTest(String urlString) {
this.urlString = urlString;
}
public void run() throws Exception {
//生成一个URL对象
URL url = new URL(urlString);
//打开URL
HttpURLConnection urlConnection = (HttpURLConnection) url.openConnection();
//得到输入流用java获取网页源代码,即获得用java获取网页源代码了网页用java获取网页源代码的内容
BufferedReader reader = new BufferedReader(new InputStreamReader(urlConnection
.getInputStream()));
String line;
// 读取输入流用java获取网页源代码的数据用java获取网页源代码,并显示
while ((line = reader.readLine()) != null){
System.out.println(line);
}
}
}
【用java获取网页源代码 java获取网页内容】关于用java获取网页源代码和java获取网页内容的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站 。
推荐阅读
- 怎么去小程序的链接,怎么去小程序的链接打印
- 怎么用酷开电视开腾讯会议,酷开电视可以用腾讯视频会员么
- 安装mysql发生错误1067,mysql安装错误代码1045
- 养身直播背景素材,养身直播背景素材视频
- C语言timeout函数 c语言settimeout
- 销售链的erp系统,erp系统的销售模块
- ps5即时战略游戏推荐,psv即时战略
- 虚拟主机和nas,虚拟主机和虚拟机区别
- mysql填表引号怎么打 mysql加引号