先给结论:不要试图用一份“全站统一说明”覆盖所有域名,而应该为每个域名写一句可验证的用途声明,并让这句话在页面上、在域名级配置上、在链接关系上保持一致。如果三个域名返回几乎相同的正文,但用途声明不同,收录工具会把它们当作需要合并或筛选的候选,而不是三个独立站点。判断是否说明清楚,不靠“看起来不一样”,靠的是能否用抓取记录和页面信号复现出“这个域名为什么存在”。
假设你运营三个域名:一个主品牌站、一个面向旧客户的资料站、一个为特定地区准备的镜像站。三者的产品页正文相似度很高。你打开收录工具,发现主站被频繁抓取,资料站偶尔出现,镜像站几乎不出现。直觉会认为“工具只认主站,另外两个被惩罚了”。但这个结论下得太早。
更常见的解释是:工具并没有“惩罚”谁,它只是缺少足够区分信号来决定是否值得把三个相似页面都当作独立结果。此时有两个方向可以解释:
这两个解释对应完全不同的动作。前者要补声明,后者要先消除冲突。如果只凭“镜像站没被收录”就断定是权重问题,很可能把时间花在错误的方向上。
要区分是“缺失”还是“冲突”,可以按下面顺序核对。这里的动作不是一次性检查,而是把结果带入下一步判断。
一个假设例子:资料站的抓取量在补写“本域名仅保留 2022 年之前的产品文档,不再更新”之后,内页抓取从偶尔变为稳定,但主站排名没有变化。这个结果只能说明抓取系统开始把资料站当作有独立用途的存档,不能证明“补一句话就能提升收录”。要确认因果,还需要观察后续是否出现资料站内页被单独引用,以及主站是否减少了重复抓取。
用途声明不是口号,它要能被页面上的实际内容验证。可以按下面的结构写,每个域名一句,放在页脚或关于页面,同时反映在标题和导航中:
写完声明后,下一步不是立刻提交站点地图,而是检查声明和页面信号是否一致。如果资料站声明“不再更新”,但页面上仍有“最新产品”导航,那么声明会被页面信号抵消。此时应先改导航,再观察抓取日志中该域名的抓取路径是否从产品页转向存档页。这个动作的结果会直接影响下一步:如果抓取路径没有变化,说明声明还没有被有效识别,需要检查是否被 robots.txt 或页面脚本遮挡;如果抓取路径变化了,才考虑是否需要为资料站单独提交站点地图。
第一,把 robots.txt 的抓取限制当成索引移除手段。如果你在资料站用 robots.txt 禁止抓取,抓取量会下降,但这不等于该域名的页面会从结果中消失。已有索引可能仍然存在,只是不再更新。要移除索引,需要页面级的不索引指令或移除请求,而不是只改 robots.txt。
第二,把 HTTPS 或站点地图当作用途说明的替代品。HTTPS 不保证内容被正确区分,站点地图也不保证收录。它们只是辅助信号。真正决定三个域名能否各自说明用途的,是页面内容、链接关系和域名级声明是否指向同一个方向。
如果核对后仍然无法区分“缺失”和“冲突”,可以做一个最小对照:只改资料站的页脚声明和导航,不动主站和镜像站,观察两周内该域名的抓取路径是否从产品页转向存档页。这个动作的结果会告诉你,问题出在声明本身,还是出在三个域名之间的链接关系。只有当前者被排除后,才值得去处理后者。