java获得网页内容

网址抓取 Java API 概述
 
http://code.google.com/intl/zh-CN/appengine/docs/java/urlfetch/usingjavanet.html
App Engine 应用程序可以与其他应用程序进行通信或通过抓取网址访问网络上的其他资源。应用程序可以使用网址抓取服务来发出 HTTP 和 HTTPS 请求并接收响应。出于效率和扩展性考虑，网址抓取服务使用 Google 的网络基础结构。
用 java.net 抓取网址
提出请求
安全连接和 HTTPS
请求标头
响应
联系公司防火墙之后的主机
网址抓取和开发服务器
配额和限制
用 java.net 抓取网址
您可以使用 Java 标准库中的 java.net.URLConnection 和相关类，通过 Java 应用程序创建 HTTP 和 HTTPS 连接。App Engine 使用网址抓取服务实现此接口；您的应用程序没有直接创建套接字连接。
获取某网址的页面内容的一种简单方法是创建 java.net.URL 对象，然后调用其 openStream() 方法。该方法可处理创建连接的详情，发出 HTTP GET 请求，然后检索响应数据。
import java.net.MalformedURLException; 
import java.net.URL; 
import java.io.BufferedReader; 
import java.io.InputStreamReader; 
import java.io.IOException; 
 
// ... 
        try { 
            URL url = new URL("http://www.example.com/atom.xml"); 
            BufferedReader reader = new BufferedReader(new InputStreamReader(url.openStream())); 
            String line; 
 
            while ((line = reader.readLine()) != null) { 
                // ... 
            } 
            reader.close(); 
 
        } catch (MalformedURLException e) { 
            // ... 
        } catch (IOException e) { 
            // ... 
        }
对于更复杂的请求，您可以调用网址对象的 openConnection() 方法�