首页 > 网站 > 优化推广 > 正文

Robots.txt 文件应放在哪里？

2024-04-26 13:29:01

字体：大中小

来源：转载

供稿：网友

Robots.txt 文件必须放在网站的根目录。放在子目录的 Robots.txt 文件搜索引擎不能爬取到，所以不会起任何作用。比如： http://www.CUOxin.com/robots.txt 有效 http://www.CUOxin.com/bbs/robots.txt 无效如果你不能控制根目录的 robots.txt，则你可以通过在子目录网页中使用标签阻止网页被收录。

上一篇：如何查看网站被百度抓取的情况？

下一篇：百度为什么不收录我的站点？

学习交流

硬盘分区如何设置准确的分区空间

硬盘分区如何设置准确的分区空间...

热门图片

猜你喜欢的新闻

猜你喜欢的关注

新闻热点

英伟达市值一夜大涨9246亿创2023年5月以来最大单周涨幅

2024-04-27 13:35:46

雷军：小米正在申请3万件专利，以提升自身的竞争力

2024-04-27 13:33:47

人参泡酒15年后竟“复活”？网友：这酒还能喝不？

2024-04-24 22:53:44

芯片股普涨！英伟达市值一夜大涨6000亿元

2024-04-23 19:32:50

面馆老板1天卖100碗刚够交房租要卖到150碗才能实现盈利

2024-04-23 19:25:50

跌近30%！茶百道上市一小时跌没3年净利润

2024-04-23 19:13:19

疑难解答

图片精选

网友关注