python小技能: 【自动回复社区帖子的留言】搭建selenium与ChromeDriver环境教程(Mac版本)

简介: python小技能: 【自动回复社区帖子的留言】搭建selenium与ChromeDriver环境教程(Mac版本)

引言

  1. 搭建selenium与ChromeDriver环境
  2. 案例:自动回复社区帖子的留言

I 搭建selenium与ChromeDriver环境

  1. 安装python
  2. 下载驱动:chromedriver.chromium.org、http://npm.taobao.org/mirrors/chromedriver
  3. 安装selenium

1.1 安装pip

pip 是 Python 包管理工具,该工具提供了对Python 包的查找、下载、安装、卸载的功能。

pip --version     # Python2.x 版本命令
pip3 --version    # Python3.x 版本命令

在Python2.7的安装包中,easy_install.py是默认安装的,而pip需要我们手动安装。

方式1

sudo easy_install pip

方式2: curl https://bootstrap.pypa.io/pip/2.7/get-pip.py |python

Installing collected packages: pip
  WARNING: The scripts pip, pip2 and pip2.7 are installed in '/Users/mac/Library/Python/2.7/bin' which is not on PATH.
  Consider adding this directory to PATH or, if you prefer to suppress this warning, use --no-warn-script-location.
Successfully installed pip-20.3.4
#python3的安装方式:curl https://bootstrap.pypa.io/get-pip.py | python3
$ curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py   # 下载安装脚本
$ sudo python get-pip.py    # 运行安装脚本

1.2 安装selenium

selenium是一个web自动化工具,selenium测试直接运行在浏览器中,就像是真正的用户在操作一样。支持的浏览器有IE、Firefox、Safari、Google、Opera等。

  • pip3 install selenium

Successfully installed selenium-3.141.0 urllib3-1.25.10

➜  bin git:(master) ✗  pip3 show selenium
Name: selenium
Version: 4.1.0

Python2.7版本安装selenium

在命令行输入python -m pip install -U selenium 导入selenium都会提示错,因为电脑有两个python路径 /usr/local/lib/ /Library/Python/2.7(Mac 自带的)

1.3 下载驱动

  • 从官网chromedriver.chromium.org下载可执行文件即可。

将chromedriver移至/usr/bin目录下,或者其他path目录都行。(/Users/mac/bin) 保证版本和你安装的Chrome的版本一致即可

image.png

➜  ~ cat .bash_profile
export PATH="$HOME/bin:$HOME/code/flutter/bin:$PATH"

测试是否可运行

➜  ~ chromedriver
Starting ChromeDriver 85.0.4183.87 (cd6713ebf92fa1cacc0f1a598df280093af0c5d7-refs/branch-heads/4183@{#1689}) on port 9515
Only local connections are allowed.
Please see https://chromedriver.chromium.org/security-considerations for suggestions on keeping ChromeDriver safe.
ChromeDriver was started successfully.

II 案例:自动回复社区留言【Selenuim版本】

仅供交流

脚本1: 保存已登录cookie

脚本2:自动回五星

两个脚本最好在同一目录下

image.png

2.1 保存已登录cookie

运行脚本, 然后登录账号获取并保持已登录cookie

基于python3 获取登录之后的token信息

 python3 ./csdnToken.py
#!/usr/bin/env python
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.common.exceptions import NoSuchElementException
import time
import json
browser = webdriver.Chrome()
browser.get("https://passport.csdn.net/newlogin")
flag = True
print("wlogin")
while flag:
    try:
        browser.find_element(By.XPATH,
            "//a[@class='hasAvatar']")
        flag = False
    except NoSuchElementException as e:
        time.sleep(3)
print("save cookie...")
with open('cookie_csdn.txt', 'w', encoding='utf-8') as f:
    json.dump(browser.get_cookies(), f)
# browser.close()
print("exit browser ")

Python 文件操作中的读写模式:open(路径+文件名, 读写模式, 编码)

读写模式:

r :只读

r+ : 读写

w :新建(会对原有文件进行覆盖)

a :追加

b :二进制文件

2.2 回五星和留下信息

遍历帖子的留言,提取URL之后去填写自己帖子的链接和评论信息。

回五星的方法。

def star():
    try:
        browser.find_element(By.CSS_SELECTOR,
            "div.el-rate > span:nth-child(5) > i")
    except NoSuchElementException as e:
        return 0
    collect_button = browser.find_element(By.CSS_SELECTOR,
        "div.el-rate > span:nth-child(5) > i")
    if collect_button.get_attribute("style") == "color: rgb(153, 154, 170);":
        #collect_button.click()
        #webdriver.ActionChains(browser).move_to_element(collect_button).click(collect_button).perform()
        browser.execute_script("arguments[0].click();", collect_button)
        return 1
    else:
        return 2

see also


目录
相关文章
|
1月前
|
Web App开发 前端开发 JavaScript
探索Python科学计算的边界:利用Selenium进行Web应用性能测试与优化
【10月更文挑战第6天】随着互联网技术的发展,Web应用程序已经成为人们日常生活和工作中不可或缺的一部分。这些应用不仅需要提供丰富的功能,还必须具备良好的性能表现以保证用户体验。性能测试是确保Web应用能够快速响应用户请求并处理大量并发访问的关键步骤之一。本文将探讨如何使用Python结合Selenium来进行Web应用的性能测试,并通过实际代码示例展示如何识别瓶颈及优化应用。
121 5
|
18天前
|
消息中间件 存储 Unix
Mac系统安装教程
Mac系统安装教程
27 1
Mac系统安装教程
|
1月前
|
存储 网络安全 数据安全/隐私保护
|
23天前
|
数据采集 Web App开发 前端开发
Python爬虫进阶:Selenium在动态网页抓取中的实战
【10月更文挑战第26天】动态网页抓取是网络爬虫的难点,因为数据通常通过JavaScript异步加载。Selenium通过模拟浏览器行为,可以加载和执行JavaScript,从而获取动态网页的完整内容。本文通过实战案例,介绍如何使用Selenium在Python中抓取动态网页。首先安装Selenium库和浏览器驱动,然后通过示例代码展示如何抓取英国国家美术馆的图片信息。
47 6
|
1月前
|
机器学习/深度学习 Python
【10月更文挑战第5天】「Mac上学Python 6」入门篇6 - 安装与使用Anaconda
本篇将详细介绍如何在Mac系统上安装和配置Anaconda,如何创建虚拟环境,并学习如何使用 `pip` 和 `conda` 管理Python包,直到成功运行第一个Python程序。通过本篇,您将学会如何高效地使用Anaconda创建和管理虚拟环境,并使用Python开发。
68 4
【10月更文挑战第5天】「Mac上学Python 6」入门篇6 - 安装与使用Anaconda
|
1月前
|
数据采集 Web App开发 数据可视化
Python爬虫教程:Selenium可视化爬虫的快速入门
Python爬虫教程:Selenium可视化爬虫的快速入门
|
1月前
|
应用服务中间件 Linux nginx
Mac os 安装 nginx 教程(success)
这篇文章是关于如何在Mac OS系统上使用Homebrew安装nginx及其依赖,并解决安装过程中可能出现的权限问题。
113 0
Mac os 安装 nginx 教程(success)
|
1月前
|
测试技术 数据安全/隐私保护 开发者
自动化测试的奥秘:如何用Selenium和Python提升软件质量
【9月更文挑战第35天】在软件开发的海洋中,自动化测试是那艘能引领我们穿越波涛的帆船。本文将揭开自动化测试的神秘面纱,以Selenium和Python为工具,展示如何构建一个简单而强大的自动化测试框架。我们将从基础出发,逐步深入到高级应用,让读者能够理解并实现自动化测试脚本,从而提升软件的质量与可靠性。
|
1月前
|
PyTorch TensorFlow 算法框架/工具
手把手教你-MAC笔记本安装Pytorch环境
手把手教你-MAC笔记本安装Pytorch环境
48 0
|
1月前
|
开发工具 iOS开发 MacOS
【Mac_mistake】app不能安装在未命名需要OSv11.13或更高版本
【Mac_mistake】app不能安装在未命名需要OSv11.13或更高版本
71 0
下一篇
无影云桌面