今天再測試Socket編程時,無法連接外網。公司用的是Http的代理。上網搜索也沒看太懂,所以花了大量時間來學習。看了HTTP和TCP協議的關系好,才有所明白。現在能通過Socket使用HTTP代理了,結果很簡單,過程卻好難。
1. 先簡要說說HTTP和TCP(具體內容自行Google,資料很多很全),這裡就講講要點:
HTTP:是應用層協議,是基於傳輸層協議的。
TCP: 是傳輸層協議,是基於網絡層協議的。
IP: 是網絡層協議。
一個TCP的連接要進行三次握手(就像轉戶口一樣,不詳說),HTTP只是一個應用協議,也就是相當於一個自定義協議,即其沒有對底層的傳輸方式進行干涉,只是對數據內容格式進行了定義。打個比方,別人說“SB”(你的名字),你回答“是”,僅僅是內容格式,沒有改變聲音的傳輸方式(通過聲波傳送<網絡硬件介質>,通過雙方都能聽懂的語言<TCP/IP>)。同理,FTP, Telnet也是一種應用層協議,打個比方對於FTP,別人說“SB",你回答“哎”,只是格式內容不同而已。
2. 認識到以上之後,我們再說說HTTP代理,從上可以理解,HTTP代理服務器就是這樣一台機器:你把所有的HTTP請求(不管是想請求百度還是Google)都發到這個HTTP代理服務器,然後這個HTTP代理服務器請求你要訪問的最終地址,把響應回傳給你。這裡還要注意它代理的是HTTP協議,而HTTP又是基於TCP的,也就是說這個服務器代理的是指定HTTP內容格式的TCP連接。再說下去也沒意思了,看以下代碼:
1.//以下地址是代理服務器的地址
2.Socket socket = new Socket("10.1.2.188", 80);
3.//寫與的內容就是遵循HTTP請求協議格式的內容,請求百度
4.socket.getOutputStream().write(new String("GET http://www.linuxidc.com/ HTTP/1.1\r\n\r\n").getBytes());
5.byte[] bs = new byte[1024];
6.InputStream is = socket.getInputStream();
7.int i;
8.while ((i = is.read(bs)) > 0) {
9. System.out.println(new String(bs, 0, i));
10.}
11.is.close();
當然在Java中,有Proxy代理上網的使用,此時使用URL(HTTP)就不涉及Socket(TCP)了,看如下代碼
1.//設置代理
2.System.setProperty("http.proxySet", "true");
3.System.setProperty("http.proxyHost", "10.1.2.188");
4.System.setProperty("http.proxyPort", "80");
5.
6.//直接訪問目的地址
7.URL url = new URL("http://www.linuxidc.com");
8.URLConnection con = url.openConnection();
9.InputStreamReader isr = new InputStreamReader(con.getInputStream());
10.char[] cs = new char[1024];
11.int i = 0;
12.while ((i = isr.read(cs)) > 0) {
13. System.out.println(new String(cs, 0, i));
14.}
15.isr.close();
最後總結一下:
在使用HTTP代理的環境中,
如果使用Socket(TCP)連接外網,則直接連接代理服務器,然後在發送的HTTP請求中指明要轉發到的外網網址。
如果使用URL(HTTP)連接外網,則需要設置HTTP代理參數或使用Proxy。
OK,明白以後可以隨意使用了,看以下代碼,使用NIO的Socket通過HTTP代理訪問外網的例子:
1.SocketChannel sc = SocketChannel.open(new InetSocketAddress("10.1.2.188", 80));
2.
3.sc.write(Charset.forName("utf8").encode("GET http://www.linuxidc.com/ HTTP/1.1\r\n\r\n"));
4.
5.ByteBuffer buffer = ByteBuffer.allocate(1024);
6.
7.while (sc.read(buffer) != -1) {
8. buffer.flip();
9. System.out.println(Charset.forName("utf8").decode(buffer));
10. buffer.clear();
11.}
12.sc.close();
Java Socket編程中加入代理
有些時候我們的網絡不能直接連接到外網, 需要使用http或是https或是socket代理來連接到外網, 這裡是java使用代理連接到外網的一些方法,:方法一使用系統屬性來完成代理設置, 這種方法比較簡單, 但是不能對單獨的連接來設置代理:
public static void main(String[] args) {
Properties prop = System.getProperties();
// 設置http訪問要使用的代理服務器的地址
prop.setProperty("http.proxyHost", "192.168.0.254");
// 設置http訪問要使用的代理服務器的端口
prop.setProperty("http.proxyPort", "8080");
// 設置不需要通過代理服務器訪問的主機,可以使用*通配符,多個地址用|分隔
prop.setProperty("http.nonProxyHosts", "localhost|192.168.0.*");
// 設置安全訪問使用的代理服務器地址與端口
// 它沒有https.nonProxyHosts屬性,它按照http.nonProxyHosts 中設置的規則訪問
prop.setProperty("https.proxyHost", "192.168.0.254");
prop.setProperty("https.proxyPort", "443");
// 使用ftp代理服務器的主機、端口以及不需要使用ftp代理服務器的主機
prop.setProperty("ftp.proxyHost", "192.168.0.254");
prop.setProperty("ftp.proxyPort", "2121");
prop.setProperty("ftp.nonProxyHosts", "localhost|192.168.0.*");
// socks代理服務器的地址與端口
prop.setProperty("socksProxyHost", "192.168.0.254");
prop.setProperty("socksProxyPort", "8000");
// 設置登陸到代理服務器的用戶名和密碼
Authenticator.setDefault(new MyAuthenticator("userName", "Password"));
}
static class MyAuthenticator extends Authenticator {
private String user = "";
private String password = "";
public MyAuthenticator(String user, String password) {
this.user = user;
this.password = password;
}
protected PasswordAuthentication getPasswordAuthentication() {
returnnew PasswordAuthentication(user, password.toCharArray());
}
}
方法二使用Proxy來對每個連接實現代理, 這種方法只能在jdk 1.5以上的版本使用(包含jdk1.5), 優點是可以單獨的設置每個連接的代理, 缺點是設置比較麻煩:
public static void main(String[] args) {
try {
URL url = new URL("http://www.linuxidc.com");
// 創建代理服務器
InetSocketAddress addr = new InetSocketAddress("192.168.0.254",
8080);
// Proxy proxy = new Proxy(Proxy.Type.SOCKS, addr); // Socket 代理
Proxy proxy = new Proxy(Proxy.Type.HTTP, addr); // http 代理
// 如果我們知道代理server的名字, 可以直接使用
// 結束
URLConnection conn = url.openConnection(proxy);
InputStream in = conn.getInputStream();
// InputStream in = url.openStream();
String s = IOUtils.toString(in);
System.out.println(s);
} catch (Exception e) {
e.printStackTrace();
}
}