爬虫爬https出错 400 请求报错 

遇到这个问题，可能是因为目标网站（如digikey.com）对HTTPS连接有特定的安全设置或限制，比如SSL/TLS版本要求、证书验证问题、IP地址黑名单等。而京东等其他网站可能没有这些严格的限制，所以能够正常爬取。

针对你的情况，可以尝试以下几个解决方案：

1. 更新或配置TLS/SSL协议版本：确保你的WebMagic使用的HTTP客户端库支持最新的TLS协议版本（如TLS 1.2或TLS 1.3）。部分老旧的HTTPS站点可能不支持新的协议版本，但大多数现代网站为了安全考虑，会要求较高的协议版本。你可以通过Java的系统属性或者直接在代码中设置来指定使用的SSL协议版本。

2. 忽略SSL验证：这一步仅用于测试目的，实际生产环境中不建议关闭SSL验证，因为这样会降低安全性。但在排查问题时，可以暂时禁用以确认是否是证书验证导致的问题。在WebMagic中，如果你使用的是OkHttp或者HttpClient作为Downloader，可以通过相应的配置来实现。

3. 添加信任证书：如果网站使用了自签名证书或非标准CA签发的证书，你需要将该证书导入到Java的信任证书库中。这样可以避免因证书不受信任而导致的连接问题。

4. 检查网络环境和代理设置：有时候，企业内网或特定的网络环境可能会对HTTPS请求进行额外的限制或过滤，导致“Connection reset”。确认是否有透明代理或防火墙规则影响了特定站点的访问。

5. 超时和重试机制：增加请求的超时时间和重试次数，有时瞬时的网络波动也会导致这类错误。

6. 查看日志和堆栈信息：详细分析报错的日志，看是否有更具体的错误提示，比如证书的具体验证失败原因等。

7. 升级或更换HTTP客户端：如果上述方法都无法解决问题，可以考虑升级WebMagic使用的HTTP客户端库到最新稳定版，或者尝试更换为其他客户端（如从OkHttp切换到Apache HttpClient）。

请根据具体情况选择合适的解决策略，并优先考虑那些不会牺牲安全性的方案。