python小技能: 【自动回复社区帖子的留言】搭建selenium与ChromeDriver环境教程(Mac版本)

简介: python小技能: 【自动回复社区帖子的留言】搭建selenium与ChromeDriver环境教程(Mac版本)

引言

  1. 搭建selenium与ChromeDriver环境
  2. 案例:自动回复社区帖子的留言

I 搭建selenium与ChromeDriver环境

  1. 安装python
  2. 下载驱动:chromedriver.chromium.org、http://npm.taobao.org/mirrors/chromedriver
  3. 安装selenium

1.1 安装pip

pip 是 Python 包管理工具,该工具提供了对Python 包的查找、下载、安装、卸载的功能。

pip --version     # Python2.x 版本命令
pip3 --version    # Python3.x 版本命令

在Python2.7的安装包中,easy_install.py是默认安装的,而pip需要我们手动安装。

方式1

sudo easy_install pip

方式2: curl https://bootstrap.pypa.io/pip/2.7/get-pip.py |python

Installing collected packages: pip
  WARNING: The scripts pip, pip2 and pip2.7 are installed in '/Users/mac/Library/Python/2.7/bin' which is not on PATH.
  Consider adding this directory to PATH or, if you prefer to suppress this warning, use --no-warn-script-location.
Successfully installed pip-20.3.4
#python3的安装方式:curl https://bootstrap.pypa.io/get-pip.py | python3
$ curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py   # 下载安装脚本
$ sudo python get-pip.py    # 运行安装脚本

1.2 安装selenium

selenium是一个web自动化工具,selenium测试直接运行在浏览器中,就像是真正的用户在操作一样。支持的浏览器有IE、Firefox、Safari、Google、Opera等。

  • pip3 install selenium

Successfully installed selenium-3.141.0 urllib3-1.25.10

➜  bin git:(master) ✗  pip3 show selenium
Name: selenium
Version: 4.1.0

Python2.7版本安装selenium

在命令行输入python -m pip install -U selenium 导入selenium都会提示错,因为电脑有两个python路径 /usr/local/lib/ /Library/Python/2.7(Mac 自带的)

1.3 下载驱动

  • 从官网chromedriver.chromium.org下载可执行文件即可。

将chromedriver移至/usr/bin目录下,或者其他path目录都行。(/Users/mac/bin) 保证版本和你安装的Chrome的版本一致即可

image.png

➜  ~ cat .bash_profile
export PATH="$HOME/bin:$HOME/code/flutter/bin:$PATH"

测试是否可运行

➜  ~ chromedriver
Starting ChromeDriver 85.0.4183.87 (cd6713ebf92fa1cacc0f1a598df280093af0c5d7-refs/branch-heads/4183@{#1689}) on port 9515
Only local connections are allowed.
Please see https://chromedriver.chromium.org/security-considerations for suggestions on keeping ChromeDriver safe.
ChromeDriver was started successfully.

II 案例:自动回复社区留言【Selenuim版本】

仅供交流

脚本1: 保存已登录cookie

脚本2:自动回五星

两个脚本最好在同一目录下

image.png

2.1 保存已登录cookie

运行脚本, 然后登录账号获取并保持已登录cookie

基于python3 获取登录之后的token信息

 python3 ./csdnToken.py
#!/usr/bin/env python
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.common.exceptions import NoSuchElementException
import time
import json
browser = webdriver.Chrome()
browser.get("https://passport.csdn.net/newlogin")
flag = True
print("wlogin")
while flag:
    try:
        browser.find_element(By.XPATH,
            "//a[@class='hasAvatar']")
        flag = False
    except NoSuchElementException as e:
        time.sleep(3)
print("save cookie...")
with open('cookie_csdn.txt', 'w', encoding='utf-8') as f:
    json.dump(browser.get_cookies(), f)
# browser.close()
print("exit browser ")

Python 文件操作中的读写模式:open(路径+文件名, 读写模式, 编码)

读写模式:

r :只读

r+ : 读写

w :新建(会对原有文件进行覆盖)

a :追加

b :二进制文件

2.2 回五星和留下信息

遍历帖子的留言,提取URL之后去填写自己帖子的链接和评论信息。

回五星的方法。

def star():
    try:
        browser.find_element(By.CSS_SELECTOR,
            "div.el-rate > span:nth-child(5) > i")
    except NoSuchElementException as e:
        return 0
    collect_button = browser.find_element(By.CSS_SELECTOR,
        "div.el-rate > span:nth-child(5) > i")
    if collect_button.get_attribute("style") == "color: rgb(153, 154, 170);":
        #collect_button.click()
        #webdriver.ActionChains(browser).move_to_element(collect_button).click(collect_button).perform()
        browser.execute_script("arguments[0].click();", collect_button)
        return 1
    else:
        return 2

see also


目录
相关文章
|
10月前
|
应用服务中间件 Nacos nginx
黑马头条_SpringCloud项目阶段一:环境搭建(Mac版本)
本文为 Mac 用户介绍微服务项目环境搭建,含阿里云服务器用 Docker 装 Nacos 1.2.0,本地通过 brew 装 OpenJDK 8、Maven 3.6.1、Redis,Docker 部署 MySQL 5.7 并配字符集,及 Nginx 安装与反向代理设置,附命令与配置步骤。
600 4
黑马头条_SpringCloud项目阶段一:环境搭建(Mac版本)
|
数据采集 Web App开发 JavaScript
基于Selenium的Python爬虫抓取动态App图片
基于Selenium的Python爬虫抓取动态App图片
1116 68
|
12月前
|
数据采集 自然语言处理 分布式计算
大数据岗位技能需求挖掘:Python爬虫与NLP技术结合
大数据岗位技能需求挖掘:Python爬虫与NLP技术结合
|
算法 机器人 Python
使用Selenium和ChromeDriver模拟用户操作:从表单填写到数据提交
简介:工程师小王和产品经理莉莉面临无人机市场调研投票数据获取难题,传统方法屡遭封禁。小王通过构建“隐身特工”装备——代理IP、随机UserAgent及有效Cookie,结合Python与Selenium技术,成功绕过问卷星的防刷票系统,实现自动化投票。最终,他们获得了看似真人投票的数据,展示了技术攻防的艺术。这段故事不仅是一场技术较量,更是对算法规则游戏的深刻思考。
426 2
使用Selenium和ChromeDriver模拟用户操作:从表单填写到数据提交
|
机器学习/深度学习 人工智能 分布式计算
我的阿里云社区年度总结报告:Python、人工智能与大数据领域的探索之旅
我的阿里云社区年度总结报告:Python、人工智能与大数据领域的探索之旅
488 35
|
SQL 存储 数据挖掘
使用Python和PDFPlumber进行简历筛选:以SQL技能为例
本文介绍了一种使用Python和`pdfplumber`库自动筛选简历的方法,特别是针对包含“SQL”技能的简历。通过环境准备、代码解析等步骤,实现从指定文件夹中筛选出含有“SQL”关键词的简历,并将其移动到新的文件夹中,提高招聘效率。
576 8
使用Python和PDFPlumber进行简历筛选:以SQL技能为例
|
消息中间件 存储 Unix
Mac系统安装教程
Mac系统安装教程
314 1
Mac系统安装教程
|
Web App开发 数据采集 数据安全/隐私保护
Selenium库详解:Python实现模拟登录与反爬限制的进阶指南
Selenium库详解:Python实现模拟登录与反爬限制的进阶指南
|
Java 索引 Python
【10月更文挑战第19天】「Mac上学Python 30」基础篇11 - 高级循环技巧与应用
本篇将介绍更深入的循环应用与优化方法,重点放在高级技巧和场景实践。我们将讲解enumerate()与zip()的妙用、迭代器与生成器、并发循环以及性能优化技巧。这些内容将帮助您编写更高效、结构更合理的代码。
257 5

推荐镜像

更多