# 禁止所有爬虫抓取后台、登录页等非核心页面 User-agent: * Disallow: /admin/ # 屏蔽后台管理页面 Disallow: /login/ # 屏蔽登录页面 Disallow: /test/ # 屏蔽测试页面 Disallow: /uploads/temp/ # 屏蔽临时上传文件 Disallow: /*?*&id= # 屏蔽动态参数重复页面 Allow: / # 允许抓取所有核心页面 # 单独针对百度爬虫优化(提升百度收录优先级) User-agent: Baiduspider Allow: / Sitemap: https://www.cqhost.cn/sitemap.xml # 网站地图地址 # 针对谷歌爬虫优化(兼顾潜在国际客户) User-agent: Googlebot Allow: / Sitemap: https://www.cqhost.cn/sitemap.xml