全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 415|回复: 2
打印 上一主题 下一主题

求助关于rebots.txt的问题

[复制链接]
跳转到指定楼层
1#
发表于 2022-12-22 17:54:40 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
我有两个域名,一个是用于测试的(test.com),一个是拥有生产的(prod.com)。
有没有办法屏蔽掉google对于test.com的抓取呀,因为test.com只适用于测试使用的,真正需要抓取的是prod.com。
推荐
发表于 2022-12-22 17:57:43 | 只看该作者
在测试的test.com域名nginx的server段加入
  1.         location ~ (robots.txt) {
  2.             rewrite /robots.txt /wrobots.txt last;
  3.         }
复制代码


wrobots.txt 屏蔽所有
3#
 楼主| 发表于 2022-12-22 18:10:01 | 只看该作者
lonefly 发表于 2022-12-22 17:57
在测试的test.com域名nginx的server段加入

多谢老哥
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-10-11 23:34 , Processed in 0.058384 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表