帮助你我他,遇到网站问题怎么办:找它帮你网
当前位置:主页 > 网站运营 > 网站优化 >

网站地图写入robots.txt文件是什么意思

时间:2022-01-18 08:38:32|来源:网络精心整理

搜索引擎访问你网站一定会首先访问下robots.txt文件,为什么呢?这个是法律规定的,如果网站不想被收录,搜索引擎收录了就要付出法律责任,所以搜索蜘蛛一定会访问robots.txt文件。

在网站优化中,sitemap(网站地图)是一个非常重要的文件,把它放入robots.txt文件,对搜索引擎会更加友好!

那么网站地图如何放入robots.txt文件中呢,其实很简单,如下即可:

sitemap: http://你的网站域名/sitemap.html

User-agent: * 

Disallow: /XX

Disallow: /XXX

上一篇:网站排名上不了首页,看看各位SEOER都是怎么做的

下一篇:百度搜索url解析,参数详情

本文标题:网站地图写入robots.txt文件是什么意思

本文地址:https://www.tabangni.com/youhua/216.html

查看更多与“robots.txt”有关的文章



重要申明:本站所有的文章均收集自网络,与本站立场无关。

如果侵犯了您的权利,请与我们联系,我们将在24小时内进行处理、任何非本站因素导致的法律后果,本站均不负任何责任。

Copyright © 2017-2021 它帮你网 版权所有 豫ICP备17031272号-3