-
织梦DEDECMS的robots.txt正确写法【官方】
俗话说得好,官方敢用我就敢用,下面一段是官方推荐网站使用的robots.txt,放在网站根目录即可!User-agent: * Disallow: /plus/ad_js.php Disallow: /plus/advancedsearch.php Disallow: /plus/car.php Disallow: /plus/carbuyaction.php Disallow: /plus/s...
作者:百晓破 日期:2020.09.26 分类:阅读 976 -
DiscuzX3.4的robots.txt设置 BBS论坛只收录首页问题解决
# # robots.txt for Discuz! X3 # User-agent: * Disallow: /api/ Disallow: /data/ Disallow: /source/ Disallow: /install/ Disallow: /template/ Disallow: /config/ Disallow: ...
作者:佛说 日期:2020.09.12 分类:阅读 1044 -
Z-blog PHP版本robots.txt的正确写法
zblog robots.txt的正确写法,php版本,robots.txt作为网站的蜘蛛抓取遵循法则,里面可以自定义需要禁止的目录,以及sitemap的附属链接都可以添加效果:User-agent: *Disallow: /zb_users/Disallow: /zb_system/Disallow: /MemberCenterSitemap:meishi/sitemap_index.xmlSitemap:xx/sitemap.xml语法就不多说Disallow 禁止,Al...
作者:佛说 日期:2020.09.11 分类:阅读 1150