504 网关超时 nginx,在 apache 服务器上

504 网关超时 nginx,在 apache 服务器上

我正在使用 curl 从其他网站抓取数据,我在 apache 服务器上运行,那么为什么我会收到此错误

504网关超时

nginx

我的意思是 nginx 在这里是什么意思?

答案1

此错误来自您尝试抓取的网站,而不是运行 apache 的服务器。

也许你的爬虫非常激进,你错误地对目标网站实施了 DOS(拒绝服务)。此外,目标网站可能设置了一些保护措施,导致你返回此错误。

相关内容