功能预览
内容被批量采集时,robots 配置负责声明层面,写明哪些路径不希望被抓取;防采集干扰码负责内容层面,让批量拿走的页面变成不可直接使用的残次品。两者一段管声明、一段管成品,配合发布侧的敏感词过滤与内容审核,才构成完整的防搬运链路。
内容被批量采集搬运时,防采集干扰码和 robots 配置分别负责哪一段?简单说:robots 管声明,干扰码管成品。robots.txt 是写给爬虫看的抓取边界声明,拦不住不守规矩的采集器;AnQiCMS 内置的防采集干扰码则作用在到达的内容上,让对方批量拿走的文章变成不能直接二次发布的残次品。两段职责不同,缺一段链路就断。
AnQiCMS 支持 robots 配置。它的价值在于把”不希望被抓的路径”写清楚:后台路径、预览链接、内部检索页等按声明排除。对遵守协议的搜索引擎爬虫,这是明确的边界;对无视协议的批量采集脚本,它没有任何强制力。所以robots 的定位是合规爬虫的说明书,不是防盗门。把防搬运的全部希望寄托在一行 Disallow 上,是常见的误解。
批量采集站要的是”拿来就能发”的成品。干扰码的作用点正在这里:在输出内容里混入对真人不可见或弱感知的干扰信息,人读原文不受影响,整页扒走却会带上杂质——复制方要么直接用出不正常的内容,要么花时间逐篇清洗。当清洗成本高于自己原创,批量搬运的账就算不起来了。这就是干扰码和声明的本质差别:声明管”该不该拿”,干扰码管”拿了能不能直接用”。
干扰码属于 AnQiCMS 内置的安全能力之一,和 JWT 认证、敏感词过滤、防 SQL 注入与 XSS 攻击的防御同属一层思路:不指望对方自觉,而是在自己输出侧把风险处理掉。配置上建议只对正文类页面开启,列表页、接口输出等结构化场景保持干净,避免误伤正常的摘要抓取与搜索引擎收录。
AnQiCMS 也提供从其他网站采集内容的能力。采集与被采集是同一套链路的两端,用采集功能时同样要守边界:尊重源站 robots 声明,控制频率,采后必须编辑加工而不是原样转发——原样转发既躲不过对方干扰码的坑,也会在搜索引擎侧被判定低质。工具没有立场,使用方式决定了你在链条的哪一端。
开了干扰码会影响 SEO 吗? 干扰码设计目标是真人阅读无感、批量复制带病;按正文页范围开启,摘要类抓取拿到的仍是干净的概要。
robots 写了 Disallow 还是被搬了,正常吗? 正常,robots 只约束遵守协议的爬虫;防搬运要靠干扰码这类作用在内容层面的手段补位。
先买插件还是用内置能力? AnQiCMS 的干扰码与 robots 配置都是内置能力,先按上面的环节把内置的用上,再谈补充。
预览
内容排期不是只有定时发布就够:草稿承担创作中的反复修改,待发布承担进入流程等待上线的排队,定时发布作为时间因子决定内容何时生效。发布前还要过内容审核与敏感词过滤卡口,草稿预览链接只供内部确认,不该被搜索引擎抓走。
预览
应对机器刷评论区和表单要分层:reCAPTCHA 验证码在提交入口拦自动化请求,JWT 认证收敛接口调用方,敏感词过滤与内容审核处理已进入的数据,防 SQL 注入与 XSS 的过滤贯穿全链路。验证码管「是不是人」,过滤管「内容能不能留」。
预览
官网做会员分层,先按可见范围定义用户组,再给 VIP 分组设访问权限:公开资料游客可取,报价单、方案库按组授权。配合自定义内容模型给资料型内容加行业、资质等字段,再通过订单管理和分销管理让会员体系与收款、渠道衔接起来,下载范围才有清晰边界。