我正在使用 curl 从其他网站抓取数据,我在 apache 服务器上运行,那么为什么我会收到此错误
504网关超时
nginx
我的意思是 nginx 在这里是什么意思?
答案1
此错误来自您尝试抓取的网站,而不是运行 apache 的服务器。
也许你的爬虫非常激进,你错误地对目标网站实施了 DOS(拒绝服务)。此外,目标网站可能设置了一些保护措施,导致你返回此错误。
我正在使用 curl 从其他网站抓取数据,我在 apache 服务器上运行,那么为什么我会收到此错误
我的意思是 nginx 在这里是什么意思?
此错误来自您尝试抓取的网站,而不是运行 apache 的服务器。
也许你的爬虫非常激进,你错误地对目标网站实施了 DOS(拒绝服务)。此外,目标网站可能设置了一些保护措施,导致你返回此错误。