技术SEO是基础但容易忽视的环节。robots.txt和Sitemap是两个最重要的技术SEO文件，正确配置对搜索引擎收录至关重要。
robots.txt配置
作用： 告诉搜索引擎哪些页面可以抓取，哪些页面不要抓取。
基本格式： ``` User-agent: * Disallow: /admin/ Disallow: /api/ Allow: / Sitemap: https://www.example.com/sitemap.xml ```
常见Disallow规则： - 后台管理目录：/admin/、/manage/ - API接口：/api/、/ajax/ - 搜索页面：/search/ - 用户登录注册：/login/、/register/ - 临时页面：/tmp/
常见错误： - 错误地Disallow了CSS/JS文件（导致页面无法渲染） - 用robots.txt屏蔽不想收录的页面（应该用noindex标签） - robots.txt文件不存在或404
Sitemap配置
作用： 告诉搜索引擎网站有哪些页面，以及页面的更新频率和优先级。
Sitemap基本格式：
```xml
注意事项： - 只包含索引页面（200状态码） - 每份Sitemap不超过50000个URL或50MB - 多个Sitemap可以用Sitemap索引文件 - 及时更新，新页面尽快加入
安企CMS的自动生成
安企CMS自动维护robots.txt和sitemap.xml，无需手动配置。新增文章自动加入Sitemap，确保搜索引擎及时收录。
总结
正确配置robots.txt和Sitemap是SEO的基础工作。安企CMS自动化处理这些文件，让企业无需操心技术细节。