zoukankan      html  css  js  c++  java
  • C#(ASP.net)从其他网站抓取内容并截取有用信息

    1. 需要引用的类库

    1
    2
    3
    4
    using System.Net;
    using System.IO;
    using System.Text;
    using System.Text.RegularExpressions;

    2. 获取其他网站网页内容的关键代码

    1
    2
    3
    4
    5
    WebRequest request = WebRequest.Create("http://目标网址.com/");
    WebResponse response = request.GetResponse();
    StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
    //reader.ReadToEnd() 表示取得网页的源码
    TextBox1.Text = reader.ReadToEnd();

    3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息

    1
    2
    3
    4
    5
    6
    MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([sS]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
    foreach (Match NextMatch in TitleMatchs)
    {
        s += "<br>" + NextMatch.Groups[1].Value;
        TextBox1.Text += " " + NextMatch.Groups[1].Value;
    }

    RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.

    RegexOptions.Multiline: 表示对多行内容进行帅选.

    4. 大功告成

    不上图了! 影响不好! 见谅见谅

    欢迎大家一起讨论!

    示例源码下载

  • 相关阅读:
    app接口开发(php)
    eclipse JRE(unbound)问题
    HTTP状态码详解
    HTTP方法
    项目开发注意事项及技巧
    JavaWeb 路径问题
    POJ 3264 Balanced Lineup(RMQ_ST)
    了解NoSQL
    多表查询(章节摘要)
    ios UITableView 获取点击cell对象
  • 原文地址:https://www.cnblogs.com/wanzhongjun/p/6786483.html
Copyright © 2011-2022 走看看