鬼谷子叔叔

跟福哥学编程吧~~

Python使用selenium操作Docker里的Chrome浏览器的技巧单机版【20220329】
介绍介绍今天福哥要带着大家学习如何使用selenium去调用部署在Docker环境里面的Chrome浏览器的方法。为什么我们要把chromedriver部署到Docker里面呢？因为把Chrome浏览器部署到Docker里面有如下几个优点：不用担心Chrome升级导致的需要手动升级chromedriver驱动的问题。部署方便，Chro...
阅读 1061
2021-12-01 15:08:01
在Windows配置Python的selenium环境V1.5【20210627】
介绍介绍Python的selenium库是可以实现用代码模拟用户上网行为的功能，所以Python的selenium库的使用技巧成为了大部分测试工程师的必备技能。Python的selenium通过chromedriver驱动可以使用Python代码启动浏览器、打开网页、读取网页数据、提交用户表单、登录网址平台等等用户日常的上网行为，这就...
阅读 184
2020-09-23 10:26:00
在CentOS7配置Python的selenium环境【20211019】
介绍介绍福哥要做一个自动化测试的脚本来对网站的功能进行了全面的测试，很多人一下会想到通过curl之类的方式去请求服务器页面，通过代码模拟浏览器？不就是发送 GET/POST 请求吗？一开始，福哥也是这样认为的，直到学习了python的selenium，才体会到“无界面浏览器操作模拟”的神奇，今天就跟着福哥学习一下如何使用seleniu...
阅读 168
2020-07-09 12:21:33
在CentOS8配置Python的selenium环境【20211022】
介绍介绍福哥要做一个自动化测试的脚本来对网站的功能进行了全面的测试，很多人一下会想到通过curl之类的方式去请求服务器页面，通过代码模拟浏览器？不就是发送 GET/POST 请求吗？一开始，福哥也是这样认为的，直到学习了python的selenium，才体会到“无界面浏览器操作模拟”的神奇，今天就跟着福哥学习一下如何使用seleniu...
阅读 84
2021-10-20 11:22:46
Python使用selenium调用远程chromedriver调试程序的技巧【20211130】
介绍介绍我们在使用seleniuim去驱动Chrome浏览器的时候，需要针对电脑上面的Chrome浏览器的版本选择对应的chromedriver驱动，这样selenium才能正常驱动Chrome浏览器实现被我们的程序自动操作的目的。但是我们的电脑上面的Chrome会不断升级的，这样一来就要配合Chrome浏览器不断地升级chromed...
阅读 392
2021-12-01 14:00:08
Python在selenium里面注入JavaScript程序的方法【20210815】
介绍介绍福哥在使用selenium去爬取网页的时候发现有的网站的结构设计的非常复杂，如果使用chrome自带的find_element_by_xxx方法想要得到目标元素简直比登天还难。福哥就想如果可以在抓取的网站上面加一段JavaScript代码就好了，福哥就可以随心所欲地玩弄页面上面的元素了。福哥在翻阅文档的时候发现了chrome的...
阅读 282
2021-04-25 21:46:46
Python的selenium实现切换框架frame的方法【20210814】
介绍介绍福哥在使用selenium实现页面爬取的时候发现遇到包含框架（frame）的网页时候就无法通过find_xxx方法得到页面上的元素，这可真是麻烦了啊！福哥在使用F12调试前端的时候发现在调试面板的控制台栏里就可以选择页面上面的任意一个框架（frame）作为当前框架，如果selenium也可以选择页面上面的框架就好了！经过一番折...
阅读 93
2021-04-12 17:04:33
Python的selenium库的headless模式下隐藏控制台信息【20210325】
介绍介绍之前福哥给大家讲过关于Python的selenium库的使用技巧，通过selenium库可以调用浏览器打开网页并且进行自动化操作的方法。selenium库有个headless模式，就是headless模式下不会弹出浏览器窗口，可以让自动化过程更像一个命令行程序在运行。不过这个headless模式下在终端会打印巨多的控制台信息，...
阅读 218
2021-03-09 16:21:03
Python的selenium实现等待某个元素加载完成后返回结果【20210414】
介绍介绍福哥在使用selenium的时候遇到了一个问题，就是页面有些元素和数据是通过AJAX渲染的，而且采用的是异步加载的方式实现的AJAX功能，这样在selenium认为页面已经加载完成了的时候其实数据还没有渲染上，这个可愁坏福哥了！经过研究发现selenium有两个功能就是可以实现福哥想要的效果，一个是WebDriverWait对...
阅读 347
2021-04-12 17:05:44
Python做个搜索引擎（7）网页蜘蛛代码编写（三）【20201013】
介绍介绍福哥更新了Spider对象，实现了爬取网页内容，分析网页数据，写入数据库这些功能。实现了这些功能之后网页蜘蛛的基本功能也就差不多完成了！后面就可以开始编写搜索引擎的前端UI功能了，相对网页蜘蛛来说，搜索引擎前端UI就比较简单了！但是，网页蜘蛛是搜索引擎的基础，只有采集到足够多的数据，搜索引擎才可以在也会查询的时候返回用户想看到...
阅读 102
2020-10-13 10:57:34
 

鬼谷子叔叔

日志
212
浏览
1626

热门日志

最新日志