robots.txt协议屏蔽搜索引擎抓取动态URL链接

1055 主题	-1 回帖	3876 积分

发表于 2022-3-6 09:56:01 | 显示全部楼层 |阅读模式

如您的网站使用的静态URL，根目录下robots.txt内容可用以下代码代替

User-agent: *

Allow: /

Disallow: /member/

Disallow: /comment.php?

Disallow: /javascript.php?

Disallow: /*?*

Disallow: /desktop.php

滇公网安备 53082802000012号

GMT+8, 2025-5-5 07:59 , Processed in 0.218907 second(s), 22 queries .

		自动登录	找回密码
密码			立即注册