Python + Selenium + Chrome Driver 自动化点击+评论+刷弹幕(仅供学习)

简介: Python + Selenium + Chrome Driver 自动化点击+评论+刷弹幕(仅供学习)

Python + Selenium + Chrome Driver 自动化点击 评论 刷弹幕


首先说明,这篇博文仅供学习!仅供学习!仅供学习!


不要拿去做其他事,封号概不负责!!!


突发奇想


首先先说明刷评论或者阅读量是不行的,当我们认同这一点以后,我们再一起讨论一下技术


对于这个自动化评论来说,我有时候在想,是否有什么方法,可以自动发弹幕或者对一些博文进行自动评论,有什么方法呢


刷阅读量


首先可以介绍一下刷阅读量,在CSDN的博文中,我们会发现一个规律。CSDN博客并没有反爬虫的机制,因此,我们可以利用爬虫来增加自己的博文阅读量,但是需要让我们的爬虫“友好”一些,如果简单的访问,还是不行的,因为CSDN还是有设置两次访问的最短时间间隔的,因此,我们访问博文的时间间隔不能太短,太短的话阅读量是不会增加的。


除此之外,我也有在想,若想不受时间限制,是否可以轮换使用多个代理,也就是换自己的IP(假装用其他电脑进行访问),有可能这样一访问就是一个阅读量,如果大家感兴趣,下次可以做一个介绍

自动化评论


除了刷阅读量之外,我还在思考,有什么方法,可以自动化点击,自动化刷弹幕


奇思妙想


以CSDN为例的话,我一开始在想,有什么方法呢,但是出现一个问题,无法登录CSDN的账号,因为评论需要CSDN的账号,这一部分可能能够使用cookie,但是还是不行,如果我们能看网页源代码的时候,我们会发现,现在的CSDN的评论是JavaScript写的,所以是人机交互的,需要一个点击才能显示评论框,并且有时候是有ajex请求的


接着我就开始思考了,首先想到的就是利用selenium进行自动化操作,但是登录的时候,我人为进行登录,但是由于这是驱动器的Chrome,我人为滑也是不能通过验证的,我当时还发布了一个问题,这个问题当时烦恼了我很久



6a5fa46d6ce8454eb7df5be82ae7060b.png

结果,有个专家的回答,给了我一个灵感,可以用Selenium 连接已经打开的浏览器,这时候不就可以不用登录嘛



10aefd97f6fb44d78545386cbea2be88.png


这是一个非常聪明的想法,然后我就开始寻找资料,开始尝试和验证想法


环境配置


安装Selenium 库


可以简单介绍一下,Selenium 是为浏览器自动化(Browser Automation)需求所设计的一套工具集合,让程式可以直接驱动浏览器进行各种网站操作。

首先,我们需要安装我们的selenium库

其实方法是很简单的,只需要打开我们的控制台

pip install selenium


我当前下载的是4.4.3版本,之前有4.0之前的版本,有一些函数就有问题,不过这都是小事


配置Chromedriver

我们可以根据https://blog.csdn.net/kun_csdn/article/details/124267821这篇博客,描述的去进行配置我们的chromedriver、


chrome驱动器地址: http://npm.taobao.org/mirrors/chromedriver/


对于程序来说,如何让python代码找到驱动器,往往有两种方法


设置系统路径,这个在博客中有写。

或者代码设置,这一部分,就是在代码中加入驱动器的路径

如果配置成功,运行以下代码是成功的。

from selenium import webdriver
driver = webdriver.Chrome()
driver.get('https://www.baidu.com')
import time
time.sleep(5)
driver.quit()

这样就会自动启动一个浏览器,并且会自动打开百度页面

如果出现问题,要不然就是浏览器驱动版本未匹配,要不然就是系统路径没有设置好,这里就需要通过代码设置,在代码中加入驱动器的路径

所以这时候,我们就需要指定驱动器的绝对路径

driver = webdriver.Chrome(r'C:\xxx\chromedriver.exe')


如果遇到这种问题,selenium.common.exceptions.WebDriverException: Message: unknown Error: cannot find Chrome binary,可以参考以下博客 https://blog.csdn.net/weixin_43832437/article/details/118191412


自动化测试


到这一部分,我们就可以自动得到,模拟人自动打开浏览器,可以自动刷网页,这也是一个刷阅读量的方法;除此之外,也可以自动搜索,自动进行淘宝购物等等。


Selenium 库的主要函数介绍


现在已经对环境配置完成了,那我们就可以开始进行自动化测试了,在开始之前,我们需要明白selenium的一些函数和操作,我们前面有说明,selenium 是一款十分强大的Web应用自动化框架,我们可以通过它来自动操控浏览器。操控浏览器的实质是操控浏览器的界面元素,因此定位元素是使用selenium的关键,selenium中通过find_element方法来完成定位。


1.find_element的三种用法


(1)通过webdriver对象的find_element(“属性名”,“属性值”)

  • 如1:我们要定位一个属性id,值为"wang"的元素


find_element("id","wang")


如2:我们要定位一个属性class,值为"plant"的元素


find_element("class name","plant")


(2)通过webdriver对象的find_element_by_xx(" ")(在selenium的4.0版本中此种用法已经抛弃,不推荐使用)

如:定位id为username,class_name为password,tag_name为input的元素

find_element_by_id("username")
find_element_by_class_name("password")
find_element_by_tag_name("input")

但是这种方法,现在使用已经会报错,因为已经抛弃了


(3)通过webdriver模块中的By,以指定方式定位元素(这种方式才是比较常用的)


导入模块:from selenium.webdriver.common.by import By


如:定位id为username,class_name为password,tag_name为input的元素

from selenium.webdriver.common.by import By
find_element(By.ID,"username")
find_element(By.CLASS_NAME,"password")
find_element(By.TAG_NAME,"input")

2.find_element()和find_elements()的区别


(1)find_element()的返回结果是一个WebElement对象,如果符合条件的有多个,默认返回找到的第一个,如果没有找到则抛出NoSuchElementException异常。


(2)find_elements()的返回结果是一个包含所有符合条件的WebElement对象的列表,如果未找到,则返回一个空列表。


如果想详细学习,也可以看看这篇博客 https://blog.csdn.net/qq_54219272/article/details/123338773 ,已经包含了大部分的函数和方法。


解析网页源代码


首先,我们需要解析一下网页源代码,找到我们的element是什么,这样才能对浏览器进行操作


我的思路,就是点击下面的这几个图标,点击评论就会出现我们的评论框


6ab15b646b744fa39b7dfc0fefcb715f.png

这个是JavaScript人机互动出来的,这里需要用click进行点击即可


573b84e46aca42c695e2c72141861569.png


当出来以后,我们就可以找到评论框的元素,然后进行,输入我们提前设置好的文本,也就是我们的字符串,这一部分可以用send_keys进行输入

最后我们再找到评论这个按钮的元素,模拟点击即可,就可以完成整个流程


driver.find_element(By.CSS_SELECTOR,"[class='btn-comment btn-comment-input']").click() # 点击评论


这一部分代码可能不太好完整给出来,如果有意愿付费学习等等可以联系我


出现的问题和改进的一些方法


首先,在我们运行的时候,我们会发现一个问题,如果每次打开一个浏览器之后,我们需要首先手动进行登录,那是否可以直接控制一个已经登录的浏览器呢,或者说带cookie的浏览器呢。实际上是有的,之后的博客会介绍一下,如果使Chrome带配置项启动


其次,如果评论的比较频繁,也会被CSDN识别进行封号,并且CSDN现在也有查看无意义化的评论,希望有更多的高质量评论,不过这些是可以根据我们语料库进行判断然后选取的。


总结


我的代码框架是非常完善的,由于我们需要选取一定的好的博文进行评论

首先去排行榜,爬取排行榜上的博文的文章(包括全站排行榜,以及各个领域的排行榜)

得到各个网址之后,调用selenium来访问这些网页

自动化测试当前网页,进行评论,评论内容是使用自己设置的语料库进行随机选择。

等待一段时间以后,再进行评论下一个网页

设置评论的次数,评论达到阈值后,就退出浏览器。

最后再次说明


这篇博文仅供学习!仅供学习!仅供学习!

相关文章
|
8天前
|
数据采集 Web App开发 测试技术
使用Selenium与WebDriver实现跨浏览器自动化数据抓取
在网络爬虫领域,Selenium与WebDriver是实现跨浏览器自动化数据抓取的利器。本文详细介绍了如何利用Selenium和WebDriver结合代理IP技术提升数据抓取的稳定性和效率。通过设置user-agent和cookie来模拟真实用户行为,避免被网站检测和阻止。文章提供了具体的代码示例,展示了如何配置代理IP、设置user-agent和cookie,并实现了跨浏览器的数据抓取。合理的参数配置能有效减少爬虫被封禁的风险,提高数据抓取效率。
使用Selenium与WebDriver实现跨浏览器自动化数据抓取
|
8天前
|
数据采集 人工智能 程序员
避坑指南!细说Python自动化办公的5大缺点
Python如今变得愈发流行,不仅程序员,许多非专业人员也开始学习它,主要目的是提高工作效率而非成为专家。然而,Python自动化办公并非完美,存在一些缺点:首先,它仅支持Windows系统,这对Mac用户不太友好;其次,其功能虽强大但不够专业,大多功能一行代码即可完成;再者,代码包体积较大,约200MB;此外,技术门槛较低,难以形成职业优势;最后,相较于专业代码,它的启动速度较慢。即便如此,它依然比人工操作高效得多。如果能接受以上缺点,可参考《50讲·Python自动化办公》教程,快速掌握自动化办公技能。
51 29
|
8天前
|
Web App开发 Java 测试技术
自动化测试的利器:Selenium WebDriver入门与实践
【9月更文挑战第8天】在软件开发的海洋中,测试是确保我们不会溺水的那根救生索。Selenium WebDriver,作为自动化测试的明星工具,让这根救生索更加结实可靠。本文将带你快速上手Selenium WebDriver,从基础设置到实际操作,再到实战演练,让你的开发之旅更加平稳顺畅。
|
2天前
|
敏捷开发 Java 测试技术
探索自动化测试的奥秘:从Selenium到Appium
【9月更文挑战第14天】软件测试,这个看似枯燥乏味却至关重要的领域,正经历着一场革命。随着技术的进步,自动化测试工具如Selenium和Appium已成为质量保证的利器。本文将带你一探这些工具的神秘面纱,了解它们如何简化测试流程、提升效率,并确保软件产品的质量。准备好,我们将深入自动化测试的世界,解锁其背后的原理和实践技巧。
|
7天前
|
安全 JavaScript 前端开发
自动化测试的魔法:如何用Python编写你的第一个测试脚本
【8月更文挑战第41天】在软件的世界里,质量是王道。而自动化测试,就像是维护这个王国的骑士,确保我们的软件产品坚不可摧。本文将引导你进入自动化测试的奇妙世界,教你如何使用Python这把强大的魔法杖,编写出能够守护你代码安全的第一道防护咒语。让我们一起开启这场魔法之旅吧!
|
3天前
|
运维 监控 Linux
自动化运维的魔法:如何用Python脚本简化日常任务
【9月更文挑战第13天】在数字化时代的浪潮中,自动化运维如同一股清流,为IT团队带来了效率和灵活性的双重提升。本文将深入探讨如何通过Python脚本实现日常运维任务的自动化,从而释放双手,让重复性工作变得轻松愉快。从环境搭建到实际案例分析,我们将一步步揭开自动化运维的神秘面纱,让你的运维之路更加顺畅。
|
10天前
|
运维 监控 API
自动化运维:使用Python脚本进行日常管理
【9月更文挑战第6天】在现代的IT环境中,自动化运维已成为提升效率、减少人为错误的关键。本文将介绍如何通过Python脚本简化日常的运维任务,包括批量配置管理和日志分析。我们将从基础语法讲起,逐步深入到脚本的实际应用,旨在为读者提供一套完整的解决方案,以实现运维工作的自动化和优化。
14 1
|
3天前
|
敏捷开发 测试技术 持续交付
自动化测试之美:如何用Selenium和Python打造高效测试脚本
【9月更文挑战第13天】在软件开发的海洋中,自动化测试是那抹不可或缺的亮色。它不仅提升了测试效率,还保障了产品质量。本文将带你领略使用Selenium和Python构建自动化测试脚本的魅力所在,从环境的搭建到脚本的编写,再到问题的排查,每一步都是对软件质量把控的深刻理解和实践。让我们开始这段探索之旅,解锁自动化测试的秘密吧!
5 0
|
3天前
|
jenkins 测试技术 持续交付
自动化测试的高效之路:如何利用Python进行Web应用测试
【9月更文挑战第13天】在软件开发的快节奏中,自动化测试是确保质量和效率的关键。本文将引导你了解如何使用Python语言及其强大的测试框架来提升Web应用的测试效率。我们将一起探索编写简洁而强大的测试脚本的技巧,以及如何通过持续集成(CI)实现自动化测试流程。准备好让你的测试工作飞一般的感觉!
|
4天前
|
JavaScript 前端开发 测试技术
Selenium2Library实现基于GUI的测试
Selenium2Library实现基于GUI的测试
10 0