当前标签: Selenium
《一头扎进》系列之Python+Selenium框架设计篇1- 价值好几K的框架，不看别后悔，过时不候
1. 什么是自动化测试框架 在了解什么是自动化测试框架之前，先了解一下什么叫框架？框架是整个或部分系统的可重用设计，表现为一组抽象构件及构件实例间交互的方法；另一种定义认为，框架是可被应用开发者定制的应用骨架。前者是从应用方面，而后者是从目的方面给出的定 义。 从框架的定义可以了解，框架可以是被重用的基础平...
2019-12-17 14:00
阅读(169)
selenium爬虫
Web自动化测试工具，可运行在浏览器，根据指令操作浏览器， 只是工具，必须与第三方浏览器结合使用，相比于之前学的爬虫只是慢了一点而已。而且这种方法爬取的东西不用在意时候ajax动态加载等反爬机制。因此找标签可以直接F12找，不用确定源码中是否存在。 安装 Linux: sudo pip3 install sele...
2019-09-08 01:14
阅读(128)
【java+selenium】网易云音乐刷累计听歌数
背景 应该是在去年的时候，刷知乎看到一个问题，大概是说怎么刷网易云音乐个人累计听歌数，然后有一个高赞回答，贴了一段js代码，直接在浏览器console执行就可以了。当时试了下，直接一下子刷了有好几万。悲剧的是，第二天又回到原来的样子了，很明显这种方式被网易云音乐发现封掉了。而且后续网易云还针对累计听歌数加了一些限...
2019-03-27 09:04
阅读(347)
Python爬虫之Selenium库的使用
Selenium是一个自动化测试工具，对各种浏览器都能很好地支持，包括Chrome、Firefox这些主流浏览器。使用它就可以模拟浏览器进行各种各样的操作，包括爬取一些网页内容。当你看到浏览器自己运行并且在网页上翻页或者跳转的时候，应该会觉得很有趣的。 Selenium 2，又名 WebDriver，它的主要新功...
2019-02-03 22:02
阅读(938)
python+selenium实现脉脉网站爬取用户朋友圈，自动评论
这次尝试的网站是脉脉，实现的效果是，自动登录后，爬取“发现”页面返回的其他人发的状态。然后自动评论。评论的时候，先看看有没有最热评论，如果有最热评论，就复制内容，自己也发一条一样的。如果没有，就随便发，比如“支持下”。 1. 自动登录： 这里就是用的selenium接口，找到用户号和密码的input框，自动填...
2019-01-09 14:48
阅读(408)
selenium之 chromedriver与chrome版本映射表（更新至v2.43）
看到网上基本没有最新的chromedriver与chrome的对应关系表，便兴起整理了一份如下，希望对大家有用： chromedriver版本 支持的Chrome版本 v2.43 v69-71 v2.42 v68-70 v2.41 v67-69 v2.40 v66-6...
2018-11-24 11:27
阅读(243)
如何突破网站对selenium的屏蔽
使用selenium模拟浏览器进行数据抓取无疑是当下最通用的数据采集方案，它通吃各种数据加载方式，能够绕过客户JS加密，绕过爬虫检测，绕过签名机制。它的应用，使得许多网站的反采集策略形同虚设。由于selenium不会在HTTP请求数据中留下指纹，因此无法被网站直接识别和拦截。 这是不是就意味着selenium真...
2018-10-23 15:13
阅读(541)
pyppeteer 绕过selenium检测，实现淘宝登陆
首先，一切使用自动化框架的项目，或者说代码，或者说爬虫都会碰到某些网站刚刚打开页面就被判定为：非人类行为。为啥？？ ----------因为很多网站有对selenium的js监测机制。比如：navigator.webdriver，navigator.languages，navigator.plugins....
2018-10-06 15:25
阅读(1415)