robots 文件中 disallow ⼀*#* 是什么意思?

robots 文件中 disallow /*#* 是什么意思?
2025-05-20 09:25:52
推荐回答(1个)
回答1:

屏闭蜘蛛的代码
一般用在robots文件中,提示蜘蛛,网站哪些需些抓取,哪些禁止蜘蛛抓取。
意思是禁止任何蜘蛛抓取该网站的任何目录