全部
  • 全部
  • 帮助中心
  • 升级公告
  • 常见问题

展开手册

关闭手册

域名

常见问题

数字门户

AI运营助手

网站管理

基础优化-Robots设置

Robots.txt编辑器

robots是网站跟搜索引擎爬虫间的协议,用简单直接的txt格式文本方式告诉对应的爬虫哪些页面可以抓取,哪些页面禁止抓取

 

4Robots文件编辑

1) 网站上线时会自动生成默认robots.txt文件

2) 用户可以在线编辑、保存robots.txt文件的内容,建议专业人士错误,如果不熟悉robots规则,出现不正确的规则将会影响搜索引擎抓取和收录

 

有帮助

无帮助

Copyright © 2021 Dcloud All Rights Reserved.