获取HTML页面并提取其中的超链接代码,Asp.Net代码库,德仔网

代码语言

代码分类

【Asp.Net】获取HTML页面并提取其中的超链接

作者:Dezai.CN / 发布于2012/1/12/ 804

可首先使用GetHttp获取指定URL的页面内容，然后将此内容作为参数传给GetLink，GetLink返回的String数组中的每个元素代表一个超链接。

<div>下列的函数分别用于获取HTML页面和提取页面中的超链接。</div>
<div id="cnblogs_post_body">
using System.Net;
using System.IO;
using System.Text;
using  System.Text.RegularExpressions;
string[] GetLink(string strHtml)
{
　 string RegexStr =  "(?<=href[\\s\\r]*=[\\s\\r]*[\"\'])([^\"\'\\s\\r>]*)(?<=[\"\'\\s\\r]{0,1})";
Regex reg = new Regex(RegexStr, RegexOptions.IgnoreCase);
     MatchCollection mc = reg.Matches(strHtml);
    if (mc.Count > 0)
     {
        string[] strHref = new string[mc.Count];
        int i =  0;
        foreach (Match m in mc)
        {
            strHref[i] =  m.Groups[1].Value;
            ++i;
        }
        return  strHref;
    }
    return null;
}
string GetHttp(string strUrl)
{
    string strHtml = "";
     WebResponse wrp = null;
try
    {
        WebRequest wrq =  WebRequest.Create(strUrl);
        wrq.Timeout = 60000;
        wrp =  wrq.GetResponse();
    }
    catch (WebException e)
    {
}
    catch (Exception e)
    {
}
    finally
    {
        if (wrp != null)
         {
            StreamReader sr = new StreamReader(wrp.GetResponseStream(),  Encoding.GetEncoding("GB2312"));
            strHtml =  sr.ReadToEnd();
            sr.Close();
             wrp.Close();
        }
    }
return  strHtml;
}

</div>
<script type="text/javascript"></script>

试试其它关键字

　提取超链接　

同语言下

可能有用的

Dezai.CN贡献的其它代码(4037)