Wappalyzer-网站技术栈识别
Wappalyzer 是一款网站技术指纹识别工具，可识别网站使用的 Web 服务器、前端框架、CMS、电商平台、编程语言、数据库、安全防护及统计工具等技术栈，常用于渗透测试中的信息收集。支持命令行和浏览器插件使用，可单个或批量检测目标网站，输出详细技术信息，便于安全分析与漏洞挖掘。
从 Prompt 到 Parser：一次知乎采集的曲折经历
本文探讨了使用大模型和Playwright技术在知乎进行数据采集时遇到的挑战及其优化策略。初始方案因页面异步加载、DOM结构变化和限制策略而失败。为了提高数据采集的稳定性和可靠性，提出了增强渲染层、适配器层和回退监控机制的改进方案。通过这些改进，可以有效应对页面异步加载和DOM变化带来的问题，同时规避限制策略的影响，从而实现更高效、稳定的数据采集。