【python】QQ 空间照片下载器

简介: 【python】QQ 空间照片下载器

文章目录

这是我fork 关于dslwind/qzone-photo-downloader的小工具:QQ 空间照片下载器项目,但由于时间长久,下载已经失效。因此我对此做了改进修补工作,这是我的QQ 空间照片下载器demo,我只是为了下载我的一万多张照片。说说、日志、文章、评论暂不需要,如果你有兴趣,你还以用更好功能更全的关于qq空间的wwwpf/QzoneExporter项目。

1. 前提

  • ubuntu linux 18.04.5
  • Python 3.6.9

当然,其他版本不能保证,你可以尝试

2. 安装依赖

$ wget https://chromedriver.storage.googleapis.com/99.0.4844.51/chromedriver_linux64.zip  
$ unzip chromedriver_linux64.zip
$ apt install libnss3-dev  chromium-bsu

注意:chrome-browerchromedirver 要保持一致。根本apt源安装chrome-brower默认的版本是99…我选择了chromedirver版本也是99.0.4844.51

3. 使用方法

3.1 克隆

git clone https://github.com/ghostwritten/qzone-photo-downloader.git
cd qzone-photo-downloader

3.2 修改qq

打开downloader.py,定位到以下代码

def entry():
    # 你的 QQ和密码,QQ号必须写,密码可以省略,然后使用网页快速登录功能
    main_user = 123456
    main_pass = ''
    # 要处理的目标 QQ 号,此处可填入多个QQ号,中间用逗号隔开
    dest_users = [123456, ]
$ python3 downloader.py 
.......
正在下载相册 绘画治疗 的第 52 张图片
正在下载相册 绘画治疗 的第 53 张图片
正在下载相册 绘画治疗 的第 54 张图片
正在下载相册 绘画治疗 的第 55 张图片
正在下载相册 绘画治疗 的第 56 张图片
正在下载相册 绘画治疗 的第 57 张图片
正在下载相册 绘画治疗 的第 58 张图片
正在下载相册 绘画治疗 的第 59 张图片
正在下载相册 绘画治疗 的第 60 张图片
正在下载相册 绘画治疗 的第 61 张图片
正在下载相册 绘画治疗 的第 62 张图片
正在下载相册 绘画治疗 的第 63 张图片
正在下载相册 绘画治疗 的第 64 张图片
正在下载相册 绘画治疗 的第 65 张图片
正在下载相册 绘画治疗 的第 66 张图片
正在下载相册 绘画治疗 的第 67 张图片
正在下载相册 绘画治疗 的第 68 张图片
正在下载相册 绘画治疗 的第 69 张图片
正在下载相册 绘画治疗 的第 70 张图片
正在下载相册 插画欣赏 的第 1 张图片
正在下载相册 插画欣赏 的第 2 张图片
正在下载相册 插画欣赏 的第 3 张图片
正在下载相册 插画欣赏 的第 4 张图片
正在下载相册 插画欣赏 的第 5 张图片
正在下载相册 插画欣赏 的第 6 张图片
.......

4 问题

4.1 解析错误

$ python3 downloader.py 
登录成功
登录成功
正在处理用户 xxxx
获取到 0 个相册
未找到 xxxxx 可下载的相册
处理完成

我明明有几十个相册,为什么获取不到呢?

在打印变量c结构体的时候,数据解析结构已经发生变化。

这是旧 的获取相册的方式

    if c:
        c = json.loads(c)
        if ('data' in c) and ('albumListModeSort' in c['data']):
            for i in c['data']['albumListModeSort']:
                albums.append(
                    QzoneAlbum._make([i['id'], i['name'], i['total']]))
    # print(albums)
    return 

这是新的方式,多个一层相册分类的属性:

        if c:
            c = json.loads(c)
            if ('data' in c) and ('albumListModeClass' in c['data']):
                for i in c['data']['albumListModeClass']:
                  for a in i['albumList']:
                     albums.append(
                     QzoneAlbum._make([a['id'], a['name'], a['total']]))
        #print(albums)
        return albums

4.2. valid json 问题

json.decoder.JSONDecodeError: Expecting ‘,’ delimiter: line 15135

column 177 (char 527917)

json.decoder.JSONDecodeError: Invalid \escape: line 1 column 1 (char

1)一般是JSON 中出现特殊字符易出现该 BUG

你可以尝试

s = json_str.replace('\\', '\\\\')
db = json.loads(s)

或者

c = json.loads(c,strict=False, encoding="utf-8")

或者

根据我的相册内容,而我是将json数据打印出来,判断分析是相册描述是特殊最多的一部分,我暂时将数据输入到一个文件

.....
write_to_json('./data_photo.txt', c)
....
def write_to_json(filename, data):
    jsonfile = open(filename, "w")
    jsonfile.write(data)
...

这样会定位特殊字符的位置,根据相片url,我定位到相册位置,删除照片,就跳过该bug,或者修改相册描述的字段内容。

$ cat data_photo.txt_2 | jq .
parse error: Invalid escape at line 26467, column 384
cat -n data_photo.txt_2 |grep 26467
 26467           "desc" : "人:越来越不男不女了;钱:越来越不干不净了;友:越来越不好不坏了;情:越来越不咸不淡了;义:越来越不轻不重了;官:越来越不清不白了;理:越来越不清不楚了;心:越来越不红不黒\了;话:越来越不冷不热了;爱:越来越不死不活了;路:越来越不明不暗了。",

✈该工具用到的库学习,你可以参考阅读:


python os 文件操作

python sys系统

python random随机生成

python time时间处理

python json文本处理

python requests url处理

python collections

python Selenium


相关文章
|
16天前
|
Python
空间管理大师已上线!(2),Python高级工程师进阶学习】
空间管理大师已上线!(2),Python高级工程师进阶学习】
|
18天前
|
Web App开发 JavaScript 前端开发
python实现QQ空间自动点赞功能
python实现QQ空间自动点赞功能
37 0
|
7月前
|
网络协议 Python
154 python网络编程 - TCP案例(模拟QQ聊天)
154 python网络编程 - TCP案例(模拟QQ聊天)
47 0
|
18天前
|
前端开发 Python
【Python • 项目实战】pytesseract+pyqt实现图片识别软件小项目——(二)实现QQ截图功能
【Python • 项目实战】pytesseract+pyqt实现图片识别软件小项目——(二)实现QQ截图功能
104 0
|
9月前
|
Linux 数据处理 iOS开发
Python空间数据处理环境搭建
常用的空间数据处理Python库 GDAL 全能型的基础空间数据处理库 fiona 基于GDAL的空间矢量数据处理库 rasterio 基于GDAL的空间栅格处理库 basemap 基于matplotlib的空间制图库 GeoPandas 基于pandas的空间数据分析库 RSGISlib 针对遥感数据及GIS分析的高级库
88 0
|
10天前
|
存储 SQL 关系型数据库
Python实现给qq自动发消息 终于有人来和我说早安晚安了吗...
Python实现给qq自动发消息 终于有人来和我说早安晚安了吗...
|
12天前
|
数据采集 Python SQL
2024年校花转学到我们班,于是我用Python把她空间给爬了个遍!(1),binder机制面试题
2024年校花转学到我们班,于是我用Python把她空间给爬了个遍!(1),binder机制面试题
2024年校花转学到我们班,于是我用Python把她空间给爬了个遍!(1),binder机制面试题
|
18天前
|
Java Python
|
7月前
|
数据采集 API Python
python 实现QQ自动推送消息
python 实现QQ自动推送消息
68 0
|
7月前
|
缓存 Unix Linux
尝试安装或升级Python包时,由于设备上没有足够的空间而导致的错误
尝试安装或升级Python包时,由于设备上没有足够的空间而导致的错误
124 4