C#.Net基于正則表達(dá)式抓取百度百家文章列表的方法示例

更新時(shí)間：2017年08月24日 10:48:57 作者：馬羊

這篇文章主要介紹了C#.Net基于正則表達(dá)式抓取百度百家文章列表的方法,結(jié)合實(shí)例形式分析了C#獲取百度百家文章內(nèi)容及使用正則表達(dá)式匹配標(biāo)題、內(nèi)容、地址等相關(guān)操作技巧,需要的朋友可以參考下

本文實(shí)例講述了C#.Net基于正則表達(dá)式抓取百度百家文章列表的方法。分享給大家供大家參考，具體如下：

工作之余，學(xué)習(xí)了一下正則表達(dá)式，鑒于實(shí)踐是檢驗(yàn)真理的唯一標(biāo)準(zhǔn)，于是便寫了一個(gè)利用正則表達(dá)式抓取百度百家文章的例子，具體過(guò)程請(qǐng)看下面源碼：

一、獲取百度百家網(wǎng)頁(yè)內(nèi)容

public List<string[]> GetUrl()
{
  try
  {
    string url = "http://baijia.baidu.com/";
    WebRequest webRequest = WebRequest.Create(url);
    WebResponse webResponse = webRequest.GetResponse();
    StreamReader reader = new StreamReader(webResponse.GetResponseStream());
    string result = reader.ReadToEnd();
    reader.Close();
    webResponse.Close();
    return AnalysisHtml(result);
  }
  catch (Exception ex)
  {
    throw ex;
  }
}

二、通過(guò)正則表達(dá)式篩選

public List<string[]> AnalysisHtml(string htmlContent)
{
  List<string[]> list = new List<string[]>();
  string strPattern = "<h3><a\\s*.*>(?<Title>[^<]+)</a></h3>.*\\s*<p\\s*class=\"feeds-item-text\">(?<Abstract>[^<]+)<a\\s*href=\"(?<Url>.*)\"\\s*target=\"_blank\"\\s*class=\"feeds-item-more\"\\s*mon=\".*\\s*\">.*\\s*</a></p>";
  Regex regex = new Regex(strPattern, RegexOptions.IgnoreCase | RegexOptions.Multiline | RegexOptions.CultureInvariant);
  if (regex.IsMatch(htmlContent))
  {
    MatchCollection matchCollection = regex.Matches(htmlContent);
    foreach (Match match in matchCollection)
    {
      string[] str = new string[3];
      str[0] = match.Groups[1].Value;//獲取到的是列表數(shù)據(jù)的標(biāo)題
      str[1] = match.Groups[2].Value;//獲取到的是內(nèi)容
      str[2] = match.Groups[3].Value;//獲取到的是鏈接到的地址
      list.Add(str);
    }
  }
  return list;
}

附：完整實(shí)例代碼點(diǎn)擊此處本站下載。

PS：這里再為大家提供2款非常方便的正則表達(dá)式工具供大家參考使用：

JavaScript正則表達(dá)式在線測(cè)試工具：
http://tools.jb51.net/regex/javascript

正則表達(dá)式在線生成工具：
http://tools.jb51.net/regex/create_reg

更多關(guān)于C#相關(guān)內(nèi)容感興趣的讀者可查看本站專題：《C#正則表達(dá)式用法總結(jié)》、《C#編碼操作技巧總結(jié)》、《C#常見控件用法教程》、《WinForm控件用法總結(jié)》、《C#數(shù)據(jù)結(jié)構(gòu)與算法教程》、《C#面向?qū)ο蟪绦蛟O(shè)計(jì)入門教程》及《C#程序設(shè)計(jì)之線程使用技巧總結(jié)》

希望本文所述對(duì)大家C#程序設(shè)計(jì)有所幫助。

您可能感興趣的文章:

相關(guān)文章

Unity控制指針旋轉(zhuǎn)到指定位置
這篇文章主要為大家詳細(xì)介紹了Unity控制指針旋轉(zhuǎn)到指定位置，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下
2019-02-02
C#圖像處理之霓虹效果實(shí)現(xiàn)方法
這篇文章主要介紹了C#圖像處理之霓虹效果實(shí)現(xiàn)方法,可實(shí)現(xiàn)圖片轉(zhuǎn)換成霓虹效果的功能,需要的朋友可以參考下
2015-04-04
C#中如何將MongoDB->RunCommand結(jié)果映射到業(yè)務(wù)類的方法總結(jié)
這篇文章主要給大家總結(jié)介紹了關(guān)于C#中如何將MongoDB->RunCommand結(jié)果映射到業(yè)務(wù)類的方法，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面來(lái)一起看看吧。
2018-04-04
使用JsonConverter處理上傳文件的路徑問題
我們上傳一個(gè)文件，把文件保存到服務(wù)器上，會(huì)有一個(gè)明確的物理路徑，由于需要從前端訪問這個(gè)文件，還需要web服務(wù)器中的一個(gè)虛擬路徑，我們可以使用JsonConverter 來(lái)自動(dòng)處理一下，這篇文章主要介紹了使用JsonConverter處理上傳文件的路徑,需要的朋友可以參考下
2022-12-12
Unity實(shí)現(xiàn)紅酒識(shí)別的示例代碼
本文主要介紹了如何通過(guò)Unity實(shí)現(xiàn)紅酒識(shí)別，可以實(shí)現(xiàn)識(shí)別圖像中的紅酒標(biāo)簽，返回紅酒名稱、國(guó)家、產(chǎn)區(qū)、酒莊、類型、糖分、葡萄品種、酒品描述等信息，感興趣的可以學(xué)習(xí)一下
2022-02-02
C#實(shí)現(xiàn)多線程啟動(dòng)停止暫停繼續(xù)的示例代碼
本文主要介紹了C#實(shí)現(xiàn)多線程啟動(dòng)停止暫停繼續(xù)的示例代碼,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
2025-01-01
舊項(xiàng)目升級(jí)新版Unity2021導(dǎo)致Visual?Studio無(wú)法使用的問題
在項(xiàng)目開發(fā)過(guò)程中，不可避免的會(huì)升級(jí)開發(fā)工具。這次我在舊項(xiàng)目版本升級(jí)到新版Unity2021.2.x時(shí)，出現(xiàn)Visual?Studio無(wú)法定位等問題，這里我給大家分享下解決方法，舊項(xiàng)目升級(jí)新版Unity2021導(dǎo)致Visual?Studio無(wú)法使用的問題,需要的朋友可以參考下
2021-12-12
C#用表達(dá)式樹構(gòu)建動(dòng)態(tài)查詢的方法
這篇文章主要介紹了C#用表達(dá)式樹構(gòu)建動(dòng)態(tài)查詢的方法，幫助大家更好的理解和學(xué)習(xí)c#，感興趣的朋友可以了解下
2020-12-12
C# 結(jié)合 Javascript 測(cè)試獲取天氣信息
本文將介紹如何使用 C# 并結(jié)合 JavaScript 獲取天氣信息,獲取的數(shù)據(jù)來(lái)源于360瀏覽器首頁(yè)數(shù)據(jù),對(duì)C# 獲取天氣信息示例代碼感興趣的朋友一起看看吧
2024-08-08
C# WebApi CORS跨域問題解決方案
本篇文章主要介紹了C# WebApi CORS跨域問題解決方案，小編覺得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧
2018-07-07