User-agent
: 后面填你要针对的搜索引擎,*代表全部搜索引擎Disallow
: 后面填你要禁止抓取的网站内容和文件夹,/做前缀Allow
: 后面填你允许抓取的网站内容,文件夹和链接,/做前缀Crawl-delay
: 后面填数字,意思是抓取延迟,小网站不建议使用Sitemap
: 站点地图的存放位置
Copyright © 2024 宝安专业网站设计公司 版权所有
网站地图
宝安专业网站设计公司,一家专业营销型网站建设公司、响应式网站制作公司,提供企业响应式网站建设、自适应企业网站模板、营销型网站制作、响应式企业网站模板制作等服务。
宝安专业网站设计公司,一家专业营销型网站建设公司、响应式网站制作公司,提供企业响应式网站建设、自适应企业网站模板、营销型网站制作、响应式企业网站模板制作等服务。