标签:SEO优化

建站相关

如何编写和优化WordPress网站的Robots.txt

1

泪应网络 发布于 2020-03-31

要知道WordPress robots.txt文件中的“Disallow”命令与页面头部的元描述noindex 的作用不完全相同。您的robots.txt会阻止抓取,但不一定不进行索引,网站文件(如图片和文档)除外。如果搜索引擎从其他地方链接,它们仍然可以索引您的“不允许爬取”的...

阅读(132)赞 (1)