开发者社区云计算文章正文

pageHelper实现分页异常描述

2022-09-27 183

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： pageHelper实现分页异常描述

带有子集的查询，分页统计数据会有问题，会将子集也计入总数中，所以查出来的集合，就不会按照传入的条数展示。
解决思路也不少。我用的比较简单，都查出来再替代，相当于两次查询了，所以也不太建议。还有就是重写page类，子集重新实现计数

herozhi0821

python兴趣圈

数据采集存储 Java

「多线程大杀器」Python并发编程利器：ThreadPoolExecutor，让你一次性轻松开启多个线程，秒杀大量任务！

python兴趣圈

291 0 0

奔跑的数据

数据采集存储安全

如何确保Python Queue的线程和进程安全性：使用锁的技巧

本文探讨了在Python爬虫技术中使用锁来保障Queue（队列）的线程和进程安全性。通过分析`queue.Queue`及`multiprocessing.Queue`的基本线程与进程安全特性，文章指出在特定场景下使用锁的重要性。文中还提供了一个综合示例，该示例利用亿牛云爬虫代理服务、多线程技术和锁机制，实现了高效且安全的网页数据采集流程。示例涵盖了代理IP、User-Agent和Cookie的设置，以及如何使用BeautifulSoup解析HTML内容并将其保存为文档。通过这种方式，不仅提高了数据采集效率，还有效避免了并发环境下的数据竞争问题。

奔跑的数据

194 1 1