您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. Go版本开源爬虫框架Creeper.zip

  2. Creeper 是一个基于简单脚本( Creeper scr ipt ,扩展名 .crs )的下一代开源爬虫框架。需要配合一门正经的编程语言(只开发了 Go 版本)来使用,先在 Creeper scr ipt 内定义爬取规则,然后用 Go 代码来读取规则,再爬取资源。使用场景一般会用在需要同时采集大量不同网站,或者开发聚合阅读器时。(以后可能会增加 cli 和数据库访问支持)简单的用例:假如我想要爬取 HackerNews ,需要写出这样子的脚本,其实看起来有些类似 yaml 配合 jquer
  3. 所属分类:其它

    • 发布日期:2019-07-18
    • 文件大小:377kb
    • 提供者:weixin_39840924
  1. CREEPER.zip

  2. 使用requests库爬取我爱白菜网的信息,但都是针对于我爱白菜网的分析爬取,而它链接的淘宝网站则没有爬,反爬手段比较多,暂时没想法。
  3. 所属分类:其它

    • 发布日期:2020-08-13
    • 文件大小:58mb
    • 提供者:qq_42947060