C# 利用代理爬蟲(chóng)網(wǎng)頁(yè)的實(shí)現(xiàn)方法
更新時(shí)間：2017年10月11日 14:51:26 投稿：lqh
這篇文章主要介紹了C# 利用代理爬網(wǎng)頁(yè)的實(shí)現(xiàn)方法的相關(guān)資料,希望通過(guò)本能幫助到大家實(shí)現(xiàn)這樣的功能，需要的朋友可以參考下
C# 利用代理爬蟲(chóng)網(wǎng)頁(yè)
實(shí)現(xiàn)代碼：
// yanggang@mimvp.com
// http://proxy.mimvp.com
// 2015-11-09
using System;
using System.IO;
using System.Net;
using System.Text;
namespace ConsoleApplication1
{
class Program
{
public static void Main(string[] args)
{
System.Net.WebProxy proxy = new WebProxy("218.21.230.156", 443); // "107.150.96.188", 8080
HttpWebRequest request = (HttpWebRequest)WebRequest.Create("http://proxy.mimvp.com");
request.Proxy = proxy;
using (WebResponse response = request.GetResponse())
{
using (TextReader reader = new StreamReader(response.GetResponseStream()))
{
string line;
while ((line = reader.ReadLine()) != null)
Console.WriteLine(line);
}
}
}
public static void Main2()
{
// your code goes here
System.Net.WebProxy proxy = new WebProxy("107.150.96.188", 8080);
System.Net.HttpWebRequest req = (HttpWebRequest)WebRequest.Create("http://www.baidu.com");
req.Proxy = proxy;
req.Timeout = 30 * 1000;
System.Net.HttpWebResponse resp = (HttpWebResponse)req.GetResponse();
Encoding bin = Encoding.GetEncoding("UTF-8");
StreamReader reader = new StreamReader(resp.GetResponseStream(), bin);
string str = reader.ReadToEnd();
Console.WriteLine(str);
reader.Close();
reader.Dispose();
}
}
}
獲取更多代理，請(qǐng)?jiān)L問(wèn)米撲代理：
如有疑問(wèn)請(qǐng)留言或者到本站社區(qū)交流討論，感謝閱讀，希望能幫助到大家，謝謝大家對(duì)本站的支持！
您可能感興趣的文章:
- c# Selenium爬取數(shù)據(jù)時(shí)防止webdriver封爬蟲(chóng)的方法
- C# 爬蟲(chóng)簡(jiǎn)單教程
- 用C#做網(wǎng)絡(luò)爬蟲(chóng)的步驟教學(xué)
- c#爬蟲(chóng)爬取京東的商品信息
- C#程序如何調(diào)用C++?dll詳細(xì)教程
- 利用C#實(shí)現(xiàn)最基本的小說(shuō)爬蟲(chóng)示例代碼
- C#簡(jiǎn)單爬蟲(chóng)案例分享
- C#多線程爬蟲(chóng)抓取免費(fèi)代理IP的示例代碼
- C#制作多線程處理強(qiáng)化版網(wǎng)絡(luò)爬蟲(chóng)
- 利用C#實(shí)現(xiàn)網(wǎng)絡(luò)爬蟲(chóng)
- c# 基于Titanium爬取微信公眾號(hào)歷史文章列表
相關(guān)文章
c#實(shí)現(xiàn)windows遠(yuǎn)程桌面連接程序代碼
本篇文章主要介紹了c#實(shí)現(xiàn)windows遠(yuǎn)程桌面連接程序代碼，小編覺(jué)得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-05-05
C#實(shí)現(xiàn)帶引導(dǎo)窗體的窗體設(shè)計(jì)操作流程
很多時(shí)候,我們的窗體設(shè)計(jì)需要一個(gè)引導(dǎo)窗體,當(dāng)打開(kāi)一個(gè)項(xiàng)目的窗體時(shí),默認(rèn)的是先打開(kāi)一個(gè)歡迎或介紹項(xiàng)目信息的引導(dǎo)窗體,幾秒鐘后再打開(kāi)項(xiàng)目的主窗體,本文給大家介紹了C#實(shí)現(xiàn)帶引導(dǎo)窗體的窗體設(shè)計(jì)操作流程,感興趣的朋友可以參考下2024-04-04
c#如何利用定時(shí)器自動(dòng)備份數(shù)據(jù)庫(kù)詳解
在開(kāi)發(fā)過(guò)程當(dāng)中,你一定遇到文件損壞活或丟失的煩惱,而每天備份又很麻煩,你只要設(shè)置每天備份的時(shí)間,并將程序加入啟動(dòng)項(xiàng)中,就可以自動(dòng)完成備份,這篇文章主要給大家介紹了關(guān)于c#如何利用定時(shí)器自動(dòng)備份數(shù)據(jù)庫(kù)的相關(guān)資料,需要的朋友可以參考下2021-10-10
這篇文章主要介紹了C#搜索文字在文件及文件夾中出現(xiàn)位置的方法,涉及C#針對(duì)文件及文件夾遍歷與查找的相關(guān)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-08-08
這篇文章介紹了C#關(guān)鍵字之重載Overload，文中通過(guò)示例代碼介紹的非常詳細(xì)。對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2022-04-04
StackExchange.Redis?是?C#?操作?Redis?數(shù)據(jù)庫(kù)的客戶端，本文通過(guò)圖文并茂的形式給大家介紹C#?StackExchange.Redis?用法匯總，感興趣的朋友一起看看吧2021-12-12
本文是利用C#實(shí)現(xiàn)連連看的小例子，使用線程thread實(shí)現(xiàn)后臺(tái)運(yùn)行時(shí)間控制，實(shí)現(xiàn)代碼簡(jiǎn)單易懂，非常不錯(cuò)，具有參考借鑒價(jià)值，需要的朋友參考下吧2017-07-07
C#代替go采用的CSP并發(fā)模型實(shí)現(xiàn)
這篇文章主要為大家介紹了C#代替go采用的CSP并發(fā)模型的輕松實(shí)現(xiàn)，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步早日升職加薪2022-04-04
C#創(chuàng)建磁性窗體的實(shí)現(xiàn)方法
經(jīng)常會(huì)遇到一種情況,即當(dāng)拖動(dòng)一個(gè)窗體（主窗體）時(shí),其他窗體（子窗體）隨著該窗體移動(dòng),當(dāng)拖動(dòng)子窗體時(shí),其他窗體將不跟隨移動(dòng),這就是磁性窗體,所以本文給大家介紹了C#創(chuàng)建磁性窗體的實(shí)現(xiàn)方法,需要的朋友可以參考下2024-04-04
這篇文章主要介紹了C#聊天程序服務(wù)端與客戶端完整實(shí)例代碼,很經(jīng)典的應(yīng)用,需要的朋友可以參考下2014-07-07