当前位置： 移动技术网 > IT编程>开发语言>.net > C# 实现抓取网站页面内容的实例方法

C# 实现抓取网站页面内容的实例方法

2017年12月12日  | 移动技术网IT编程  | 我要评论

冯敬,水下录像,元旦手抄报版面设计图

抓取新浪网的新闻栏目，如图所示：

使用 谷歌浏览器的查看源代码： 通过分析得知，我们所要找的内容在以下两个标签之间：

复制代码 代码如下:

<!-- publish_helper name='要闻-新闻' p_id='1' t_id='850' d_id='1' -->

内容。。。。

<!-- publish_helper name='要闻-财经' p_id='30' t_id='98' d_id='1' -->


如图所示：

内容。。。。

使用vs建立一个如图所示的网站：

我们下载网络数据主要通过   webclient 类来实现。

使用下面源代码获取我们选择的内容：

复制代码 代码如下:

protected void enter_click(object sender, eventargs e)
        {
            webclient we = new webclient();  //主要使用webclient类
            byte[] mydatabuffer;
            mydatabuffer = we.downloaddata(txturl.text);  //该方法返回的是 字节数组，所以需要定义一个byte[]
            string download = encoding.default.getstring(mydatabuffer);  //对下载的数据进行编码

          
            //通过查询源代码，获取某两个值之间的新闻内容
            int startindex = download.indexof("<!-- publish_helper name='要闻-新闻' p_id='1' t_id='850' d_id='1' -->");
            int endindex = download.indexof("<!-- publish_helper name='要闻-财经' p_id='30' t_id='98' d_id='1' -->");

            string temp = download.substring(startindex, endindex - startindex + 1);  //截取新闻内容

            lblmessage.text = temp;//显示所截取的新闻内容
        }


效果如图：

最后: 除了把下载的数据保存为文本以外，还可以保存为 文件类型 和 流 类型。

复制代码 代码如下:

webclient wc = new webclient();
            wc.downloadfile(textbox1.text, @"f:\test.txt");
            label1.text = "文件下载完成";

复制代码 代码如下:

webclient wc = new webclient();
            stream  s =  wc.openread(textbox1.text);

            streamreader sr = new streamreader(s);
            label1.text =  sr.readtoend();

您可能感兴趣的文章:

如对本文有疑问，请在下面进行留言讨论，广大热心网友会与你互动！！ 点击进行留言回复

相关文章:

验证码：
最近更新的文章
大家感兴趣的文章
移动技术网