Sosoo 1.0网络爬虫程序 ---用户开发手册 编写人：王建华（rimen/jerry） 编写目的：基于sosoo定制web spider程序的编程人员。 目录 一：安装sosoo 2 二：功能定制 2 1．基本功能参数的设置。 2 2．配置机器人对url的检查 3 3：实现文件管理。 4 4．定制html文档下载规则。 4 5．设置对下载后http文档的过滤处理 5 6．启用机器人运行期监控。 5 7．启用对http协议分析的监控。 5 三：sosoo描述 6 四：应用开发指南 6 1．

1、snoics-reptile是什么？ 是用纯Java开发的，用来进行网站镜像抓取的工具，可以使用配制文件中提供的URL入口， 把这个网站所有的能用浏览器通过GET的方式获取到的资源全部抓取到本地，包括网页和各 种类型的文件，如：图片、flash、mp3、zip、rar、exe等文件。可以将整个网站完整地下传至 硬盘内，并能保持原有的网站结构精确不变。只需要把抓取下来的网站放到web服务器 (如：Apache)中，就可以实现完整的网站镜像。 2、现在已经有了其他的类似的软件，为什么还要开发s

欢迎使用PicCMS图片管理系统 ·原MyPic开发团队三年后回归之作 ·最快捷,最方便的图片上传和管理系统 ·采用MVC架构,详尽注释,方便二次开发和扩展 ·UTF-8编码,方便安装在国外主机 ·支持批量上传,抓取远程图片 ·外部图片自动保存在本地 ·自动控制上传图片和本地化图片尺寸 ·自动给上传及本地化图片添加水印 ·自动提取首张图片为缩略图 ·自动生成任意大小缩略图 ·幻灯片模式图片展示页 ·支持静态缓存,全站生成HTML ·内置采集器,迅速从网络抓取图文 ·自由分类,自动生成导航和内容

UZCMS镜像程序采集系统是一款全自动采集复制网站的web应用程序，目前支持95%以上的网站类型采集！它采用PHP程序架构，安全高效，简单，灵活。程序首创一键复制整站、正则替换任意修改网站任意位置的信息，做成你想做的样子，达到即使1000个人采集的是同一个网站，却每个人都不相同的效果。可以自动采集图片，并成功突破多种图片防盗链！利用本程序，可以快速部署站点，自动更新内容，程序内容使用万能通配符，省去目标站规则更新您也要更新的烦恼！堪称史上最牛的镜像采集程序。 程序后台在线演示帐号密码均为 ad

取URL本地缓存地址.rar