您好,欢迎光临本网站![请登录][注册会员]  
文件名称: CSharpSpider源码
  所属分类: Web开发
  开发工具:
  文件大小: 80kb
  下载次数: 0
  上传时间: 2009-10-21
  提 供 者: ss_****
 详细说明: CSharpSpider源码 蜘蛛是一种半自动的程序,就象现实当中的蜘蛛在它的Web(蜘蛛网)上旅行一样,蜘蛛程序也按照类似的方式在Web链接织成的网上旅行。 蜘蛛程序之所以是半自动的,是因为它总是需要一个初始链接(出发点),但此后的运行情况就要由它自己决定了,蜘蛛程序会扫描起始 页面包含的链接,然后访问这些链接指向的页面,再分析和追踪那些页面包含的链接。从理论上看,最终蜘蛛程序会访问到Internet上的 每一个页面,因为Internet上几乎每一个页面总是被其他或多或少的页面引用。 C#特别适合于构造蜘蛛程序, 这是因为它已经内置了HTTP访问和多线程的能力,而这两种能力对于蜘蛛程序来说都是非常关键的。 下面是构造一个蜘蛛程序要解决的关键问题: HTML分析:需要某种HTML解析器来分析蜘蛛程序遇到的每一个页面。 页面处理:需要处理每一个下载得到的页面。下载得到的内容可能要保存到磁盘,或者进一步分析处理。 多线程:只有拥有多线程能力,蜘蛛程序才能真正做到高效。 确定何时完成:不要小看这个问题,确定任务是否已经完成并不简单,尤其是在多线程环境下。 ...展开收缩
(系统自动生成,下载前可以参看下载内容)

下载文件列表

相关说明

  • 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
  • 本站是交换下载平台,提供交流渠道,下载内容来自于网络,除下载问题外,其它问题请自行百度
  • 本站已设置防盗链,请勿用迅雷、QQ旋风等多线程下载软件下载资源,下载后用WinRAR最新版进行解压.
  • 如果您发现内容无法下载,请稍后再次尝试;或者到消费记录里找到下载记录反馈给我们.
  • 下载后发现下载的内容跟说明不相乎,请到消费记录里找到下载记录反馈给我们,经确认后退回积分.
  • 如下载前有疑问,可以通过点击"提供者"的名字,查看对方的联系方式,联系对方咨询.
 相关搜索: CSharp Spider 源码 蜘蛛
 输入关键字,在本站1000多万海量源码库中尽情搜索: