注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. Selenium基于webdriver的使用教程

  2. Selenium是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE、Mozilla Firefox、Mozilla Suite等。Selenium 2.0主要的特性就是与WebDriver API的集成。WebDriver旨在提供一个更简单更简洁的编程接口以及解决一些Selenium-RC API的限制。Selenium-Webdriver更好的支持页面本身不重新加载而页面的元素改变的动态网页。WebDriver的目标是

  3. 所属分类：软件测试

    • 发布日期：2013-01-22
    • 文件大小：489kb
    • 提供者：hi_jack_123

  1. selenium-java-2.53.1.rar

  2. selenium自动化测试必须要用的包 官网上下载最新的 会报错。。我用的这个 好了。Selenium 2.0主要的特性就是与WebDriver API的集成。WebDriver旨在提供一个更简单更简洁的编程接口以及解决一些Selenium-RC API的限制。Selenium-Webdriver更好的支持页面本身不重新加载而页面的元素改变的动态网页。WebDriver的目标是提供一个良好设计的面向对象的API提供了对于现代先进web应用程序测试问题的改进支持。Selenium Webdr

  3. 所属分类：其它

    • 发布日期：2017-12-25
    • 文件大小：33mb
    • 提供者：qq_26267003

  1. selenium-2.44.0 所需jar包

  2. selenium-2.44.0的所有jar包，可用于爬虫开发，解决动态加载网页的采集问题等等

  3. 所属分类：Java

    • 发布日期：2018-04-17
    • 文件大小：23mb
    • 提供者：zx31230

  1. scrapy动态爬虫并存入mysql

  2. 有时候，我们天真无邪的使用urllib库或Scrapy下载HTML网页时会发现，我们要提取的网页元素并不在我们下载到的HTML之中，尽管它们在浏览器里看起来唾手可得。 这说明我们想要的元素是在我们的某些操作下通过js事件动态生成的。举个例子，我们在刷QQ空间或者微博评论的时候，一直往下刷，网页越来越长，内容越来越多，就是这个让人又爱又恨的动态加载。 爬取动态页面目前来说有两种方法 分析页面请求（这篇介绍这个） selenium模拟浏览器行为（霸王硬上弓，以后再说） 言归正传，下面介绍一下通过分

  3. 所属分类：网络监控

    • 发布日期：2018-07-18
    • 文件大小：15kb
    • 提供者：weixin_40245436

  1. python+selenium爬取亚马逊商品评论详情

  2. 亚马逊评论详情页是动态加载的，不过多折腾，直接用selenium进行爬取；用pandas写入csv文件，解决乱码、无序问题；

  3. 所属分类：Python

    • 发布日期：2018-02-28
    • 文件大小：2kb
    • 提供者：fmy_jgz

  1. python爬取单个博主所有博文

  2. python+urllib+selenium爬取CSDN单个博主的所有博文。步骤： 1.通过selenium获取js动态加载的页数 页数是javascr ipt动态加载，不能直接通过urllib获取。改为通过selenium获取页数。 2.通过urllib获取一页内所有文章的链接 根据页数、链接，获取每一页的文章链接，存入数组。 3.遍历文章链接，获取对应的文章的html文件，写好标题存储起来 请自行阅读代码修改食用

  3. 所属分类：Python

    • 发布日期：2019-02-09
    • 文件大小：3kb
    • 提供者：qq_32465127

  1. 爬取全国空气质量监测网代码.py

  2. 爬取空气质量检测网的部分城市的历年每天质量数据 思路----------------------------------------- 从某城市的空气质量网页获取某市每月的链接，再爬取每个月的表格数据。连云港市：https://www.aqistudy.cn/historydata/daydata.php?city=连云港 连云港2014年5月的空气质量：https://www.aqistudy.cn/historydata/daydata.php?city=连云港&month=2014-05

  3. 所属分类：Python

    • 发布日期：2019-05-28
    • 文件大小：12kb
    • 提供者：weixin_43970550

  1. python模拟爬虫抓取网页内容 采集网页.rar

  2. python爬虫模拟抓取网页内容，采集网页的内容，这里主要是模拟抓取新浪微博中的内容，里面包括了[源码] 爬取客户端微博信息、[源码] 爬取移动端个人信息 关注id和粉丝id (速度慢)、[源码] 爬取移动端微博信息 (强推)等多个例子，关于运行本例子的几点说明： 　　1.先安装Python环境，作者是Python 2.7.8 　　2.再安装PIP或者easy_install 　　3.通过命令pip install selenium安装selenium，它是自动测试、爬虫的工具 　　4.然后修

  3. 所属分类：其它

    • 发布日期：2019-07-10
    • 文件大小：112kb
    • 提供者：weixin_39840924

  1. selenium API速查手册 python版.docx

  2. selenium API速查手册 python版.docx pip install selenium 基本使用selenium都是为了动态加载网页内容用于爬虫，所以一般也会用到phantomjs mac下如果要配置phantomjs环境的话 echo $PATH ln -s 至于chromeDriver，配置方法类似，下载地址： https://sites.google.com/a/chromium.org/chrom selenium import webdriver

  3. 所属分类：Python

    • 发布日期：2020-01-09
    • 文件大小：29kb
    • 提供者：logdakbai

  1. python+selenium+PhantomJS抓取网页动态加载内容

  2. 一般我们使用python的第三方库requests及框架scrapy来爬取网上的资源，但是设计javascr ipt渲染的页面却不能抓取，此 时，我们使用web自动化测试化工具Selenium+*面浏览器PhantomJS来抓取javascr ipt渲染的页面，下面实现一个简单的爬取

  3. 所属分类：其它

    • 发布日期：2020-09-17
    • 文件大小：52kb
    • 提供者：weixin_38711778

  1. Selenium 模拟浏览器动态加载页面的实现方法

  2. 主要介绍了Selenium 模拟浏览器动态加载页面的实现方法，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧

  3. 所属分类：其它

    • 发布日期：2020-09-20
    • 文件大小：45kb
    • 提供者：weixin_38706455

  1. scrapy结合selenium解析动态页面的实现

  2. 1. 问题 虽然scrapy能够完美且快速的抓取静态页面，但是在现实中，目前绝大多数网站的页面都是动态页面，动态页面中的部分内容是浏览器运行页面中的Javascr ipt脚本动态生成的，爬取相对困难； 比如你信心满满的写好了一个爬虫，写好了目标内容的选择器，一跑起来发现根本找不到这个元素，当时肯定一万个黑人问号 于是你在浏览器里打开F12，一顿操作，发现原来这你妹的是ajax加载的，不然就是硬编码在js代码里的，blabla的… 然后你得去调ajax的接口，然后解析json啊，转成python

  3. 所属分类：其它

    • 发布日期：2020-12-16
    • 文件大小：597kb
    • 提供者：weixin_38683848

  1. Selenium结合BeautifulSoup4编写简单的python爬虫

  2. 在学会了抓包，接口请求(如requests库）和Selenium的一些操作方法后，基本上就可以编写爬虫，爬取绝大多数网站的内容。 在爬虫领域，Selenium永远是最后一道防线。从本质上来说，访问网页实际上就是一个接口请求。请求url后，返回的是网页的源代码。 我们只需要解析html或者通过正则匹配提取出我们需要的数据即可。 有些网站我们可以使用requests.get(url)，得到的响应文本中获取到所有的数据。而有些网页数据是通过JS动态加载到页面中的。使用requests获取不到或者只

  3. 所属分类：其它

    • 发布日期：2020-12-16
    • 文件大小：248kb
    • 提供者：weixin_38593380

  1. Python3实现抓取javascript动态生成的html网页功能示例

  2. 本文实例讲述了Python3实现抓取javascr ipt动态生成的html网页功能。分享给大家供大家参考，具体如下： 用urllib等抓取网页，只能读取网页的静态源文件，而抓不到由javascr ipt生成的内容。 究其原因，是因为urllib是瞬时抓取，它不会等javascr ipt的加载延迟，所以页面中由javascr ipt生成的内容，urllib读取不到。 那由javascr ipt生成的内容就真的没有办法读取了吗？非也！ 这里要介绍一个python库：selenium，本文使用的版本

  3. 所属分类：其它

    • 发布日期：2020-12-23
    • 文件大小：50kb
    • 提供者：weixin_38514322

  1. Selenium 模拟浏览器动态加载页面的实现方法

  2. 相信爬取大公司的数据时，常常会遇到页面信息动态加载的问题， 如果仅仅使用content = urllib2.urlopen(URL).read()，估计信息是获取不全的，这时候就需要模拟浏览器加载页面的过程， selenium提供了方便的方法，我也是菜鸟，试了很多种方式，下面提供觉得最靠谱的（已经证明对于爬取新浪微博的topic、twitter under topic完全没问题）。 至于下面的browser变量是什么，看前面的几篇文章。 首先是请求对应的URL： right_URL = URL

  3. 所属分类：其它

    • 发布日期：2020-12-23
    • 文件大小：49kb
    • 提供者：weixin_38683488

  1. python+selenium+PhantomJS抓取网页动态加载内容

  2. 环境搭建 准备工具：pyton3.5,selenium,phantomjs 我的电脑里面已经装好了python3.5 安装Selenium pip3 install selenium 安装Phantomjs　　 按照系统环境下载phantomjs,下载完成之后，将phantomjs.exe解压到python的scr ipt文件夹下 使用selenium+phantomjs实现简单爬虫 from selenium import webdriver driver = webdriver.Phant

  3. 所属分类：其它

    • 发布日期：2020-12-20
    • 文件大小：55kb
    • 提供者：weixin_38648309

  1. 还在用selenium爬网页？appium带你搞定APP

  2. 前言        大家好，我是毒兽，毒辣的禽兽。        近期有人私我，对于动态网页的复杂性很是头疼。确实，随着语言种数的不断增加，网页也不再是一张简单的HTML，功能也逐步强大起来。但其实总的来说不管网页有多么复杂，它有一定的特性和规律。动态网页你要弄清楚它网页数据请求及跳转逻辑，这样我们就可以利用JS请求的API，按照一定要求发送带有参数的请求，就可以获得数据。当然，相对于前者的异步加载，更多动态网站的反爬虫措施更强，比如常见的各类验证码。这时候就需要selenium来进行模拟登录对

  3. 所属分类：其它

    • 发布日期：2021-01-03
    • 文件大小：119kb
    • 提供者：weixin_38502814

  1. Scrapy基于selenium结合爬取淘宝的实例讲解

  2. 在对于淘宝，京东这类网站爬取数据时，通常直接使用发送请求拿回response数据，在解析获取想要的数据时比较难的，因为数据只有在浏览网页的时候才会动态加载，所以要想爬取淘宝京东上的数据，可以使用selenium来进行模拟操作 对于scrapy框架，下载器来说已经没多大用，因为获取的response源码里面没有想要的数据，因为没有加载出来，所以要在请求发给下载中间件的时候直接使用selenium对请求解析，获得完整response直接返回，不经过下载器下载，上代码 from selenium i

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：51kb
    • 提供者：weixin_38730977

  1. Python爬虫使用Selenium+PhantomJS抓取Ajax和动态HTML内容

  2. 1、引言 在Python网络爬虫内容提取器一文我们详细讲解了核心部件：可插拔的内容提取器类gsExtractor。本文记录了确定gsExtractor的技术路线过程中所做的编程实验。这是第二部分，第一部分实验了用xslt方式一次性提取静态网页内容并转换成xml格式。留下了一个问题：javascr ipt管理的动态内容怎样提取？那么本文就回答这个问题。 2、提取动态内容的技术部件 在上一篇python使用xslt提取网页数据中，要提取的内容是直接从网页的source code里拿到的。但是一些Aj

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：118kb
    • 提供者：weixin_38697274

  1. python网络爬虫 Scrapy中selenium用法详解

  2. 引入 在通过scrapy框架进行某些网站数据爬取的时候，往往会碰到页面动态数据加载的情况发生，如果直接使用scrapy对其url发请求，是绝对获取不到那部分动态加载出来的数据值。但是通过观察我们会发现，通过浏览器进行url请求发送则会加载出对应的动态加载出的数据。那么如果我们想要在scrapy也获取动态加载出的数据，则必须使用selenium创建浏览器对象，然后通过该浏览器对象进行请求发送，获取动态加载的数据值。 1.案例分析： – 需求：爬取网易新闻的国内、国际、军事、无人机板块下的新闻数据

  3. 所属分类：其它

    • 发布日期：2020-12-26
    • 文件大小：160kb
    • 提供者：weixin_38693528
« 12 »