用DOM实现文章采集--采集到网页源码

来源:未知 责任编辑:责任编辑 发表时间:2014-04-20 03:40 点击:
先来个采集网页的代码。
[csharp]
using System; 
using System.Collections.Generic; 
using System.IO; 
using System.IO.Compression; 
using System.Net; 
using System.Text; 
namespace TopWinCMS.Common 

    public class NetHelper 
    { 
 
        //private string _HTTP_USER_AGENT = "Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.2;+SV1;+.NET+CLR+1.1.4322;+.NET+CLR+2.0.50727)"; 
        private string _UserAgent = "Googlebot/2.1 (+http://www.google.com/bot.html)"; 
        private Encoding _HttpEncoding = null; 
        private string _ProxyHost = string.Empty; 
        private int _ProxyInt = 8080; 
        private int _TimeOut = 200000; 
 
        #region 属性 
        /// <summary> 
        /// 设置UserAgent 
        /// </summary> 
        public string UserAgent 
        { 
            get 
            { 
                return this._UserAgent; 
            } 
            set 
            { 
                this._UserAgent = value; 
            } 
        } 
        /// <summary> 
        /// 设置编码 
        /// </summary> 
        public Encoding HttpEncoding 
        { 
            get 
            { 
                return this._HttpEncoding; 
            } 
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码:点击我更换图片
最新评论 更多>>

推荐热点

  • 浅析.NET下XML数据访问新机制
  • asp.net 面试+笔试题目第1/2页
  • C# 邮件地址是否合法的验证
  • C#高级编程:数据库连接[1]
  • asp.net 设置GridView的选中行的实现代码
  • 经典C++程序1
  • IIS 自动回收导致后台定时器失效的问题解决
  • ASP.NET&#160;GridView列表代码示例
  • 微软ASP.NET站点部署指南(3):使用Web.Config文件的Transforma
网站首页 - 友情链接 - 网站地图 - TAG标签 - RSS订阅 - 内容搜索
Copyright © 2008-2015 计算机技术学习交流网. 版权所有

豫ICP备11007008号-1