网站地图写入robots.txt文件是什么意思
时间:2022-01-18 08:38:32|来源:网络精心整理
搜索引擎访问你网站一定会首先访问下robots.txt文件,为什么呢?这个是法律规定的,如果网站不想被收录,搜索引擎收录了就要付出法律责任,所以搜索蜘蛛一定会访问robots.txt文件。
在网站优化中,sitemap(网站地图)是一个非常重要的文件,把它放入robots.txt文件,对搜索引擎会更加友好!
那么网站地图如何放入robots.txt文件中呢,其实很简单,如下即可:
sitemap: http://你的网站域名/sitemap.html User-agent: * Disallow: /XX Disallow: /XXX |
下一篇:百度搜索url解析,参数详情
本文地址:https://www.tabangni.com/youhua/216.html
查看更多与“robots.txt”有关的文章
推荐阅读
最近更新
- 01-18网站地图写入robots.txt文件是什么意思
- 01-18小白指导js合并两个数组生成合并后的key:value数组
- 01-18windows下如何安装和启动MySQL
- 01-18mysql 5.7.21 winx64安装配置方法图文教程
- 01-18ASP.NET编译执行常见错误及解决方法汇总
- 01-18asp.net下日期和时间处理的类库
- 01-18笔者指导asp.net membership 密码重设
- 01-18Mysql更改默认引擎为Innodb的步骤方法
- 01-18Mysql忘记密码的几种解决方案
- 01-18Dreamweaver怎么使用流体网格布局?