用DOM实现文章采集--采集到网页源码(7)

来源:未知 责任编辑:责任编辑 发表时间:2014-04-20 03:40 点击:

                    responseStream.Close(); 
                if (response != null) 
                    response.Close(); 
            } 
 
            return info; 
        } 
 
        #region 取得远程资源 
        /// <summary> 
        /// 取得远程资源 www.2cto.com  
        /// </summary> 
        /// <param name="strUrl">要取的URL</param> 
        /// <returns>网页源代码</returns> 
        public RemoteRes GetRemoteResource(string strUrl) 
        { 
            HttpWebResponse response = null; 
            Stream stream = null; 
            RemoteRes info = new RemoteRes(); 
            try 
            { 
                HttpWebRequest request = (HttpWebRequest)WebRequest.Create(strUrl); 
                request.AllowAutoRedirect = true; 
                request.UserAgent = "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; SLCC1; .NET CLR 2.0.50727; .NET CLR 3.0.04506)"; 
                request.Referer = "http://" + new Uri(strUrl).Host; 
                response = request.GetResponse() as HttpWebResponse; 
                stream = response.GetResponseStream(); 
                info.ContentType = response.ContentType; 
                MemoryStream ms = new MemoryStream(); 
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码:点击我更换图片
最新评论 更多>>

推荐热点

  • 浅析.NET下XML数据访问新机制
  • asp.net 面试+笔试题目第1/2页
  • C# 邮件地址是否合法的验证
  • C#高级编程:数据库连接[1]
  • asp.net 设置GridView的选中行的实现代码
  • 经典C++程序1
  • IIS 自动回收导致后台定时器失效的问题解决
  • ASP.NET&#160;GridView列表代码示例
  • 微软ASP.NET站点部署指南(3):使用Web.Config文件的Transforma
网站首页 - 友情链接 - 网站地图 - TAG标签 - RSS订阅 - 内容搜索
Copyright © 2008-2015 计算机技术学习交流网. 版权所有

豫ICP备11007008号-1