防止搜索引擎根据域名进行索引

防止搜索引擎根据域名进行索引

我们在一家托管公司拥有一台专用服务器,里面有几十个网站。名称服务器(例如:ns1.domain.com、ns2.domain.com)的 IP 与一些客户端网站(比如 webclient1.com 和 webclient2.com)的 IP 一致

问题是,对于 Google 中的某些搜索,某些结果会显示为 ns1.domain.com/result,而不是 webclient1.com/result,这对我们的客户来说非常错误且令人讨厌。实际上,如果您在浏览器中输入 ns1.domain.com 或 ns2.domain.com,它将加载一些页面客户端。

有没有办法阻止谷歌仅在机器人来检查 ns 域时跟踪这些结果?问这个问题可能也不正确,但为什么会发生这种情况?这是服务器配置不良的结果吗?我对这些问题还很陌生,所以提前感谢您的帮助!

答案1

听起来像是 DNS 配置错误,但从您所说的内容来看很难确定。您想要索引的内容已编入索引,但使用了错误的(尽管有效)URL,而您想要保持隐藏的内容均未编入索引,因此 robots 似乎不是问题所在。

假设您不想在此处发布详细信息,因此请检查您的 DNS(正向和反向)。还请检查您网站内的链接是否使用名称,而不是 URL 中的硬编码 IP 地址。

另一个问题是,对名称服务器和 Web 服务器使用相同的公共 IP 地址是否明智,另一个问题是,托管公司的负载均衡器是否可以通过将两种类型的流量分离到不同的私有 IP 地址来提供帮助。

相关内容