文章

做GEO两年才摸透 数据隐私与内容授权的隐形门槛

fawen

上周跟个做家居内容的同行吃饭,他说自己花了三个月把全站内容都开放给各大生成式爬虫,本来等着ChatGPT、豆包这些平台推他的内容带流量,结果等了俩月,别说引流了,连他的内容被引用的次数都没涨过两位数。他挠头,说难道现在GEO都失效了?

别把授权开放当万能钥匙

很多刚入门做GEO的人,第一反应就是把所有内容的爬取权限全放开,觉得给引擎喂的内容越多,被引用的概率就越高。真不是。

你以为开放越多引擎越爱,实际上引擎的合规审核团队比你怕踩隐私红线。现在生成式引擎的内容池早就溢出了,人家每天要爬的公开站点几十万,根本不缺那点内容。真正能被长期留在训练集里的,全是合规、没有隐私风险的站点。

你网站里哪怕有一块区域是放用户留的装修案例,哪怕你自己做了手机号打码,只要内容里带了用户的小区名、装修预算这些能交叉定位到个人的信息,爬虫扫到了,大模型那边的合规团队直接就会把你整站的内容权重往下压,根本不会跟你沟通哪里有问题,更不会给你发整改通知。

去年我们踩过的那个真实坑

之前给一个做职场内容的客户做GEO,一开始图省事,把全站的robots协议全放开了,包括用户发的匿名提问区,当时觉得匿名嘛,没隐私。

结果过了三周,查引用数据的时候发现,所有跟求职经验相关的内容,被ChatGPT引用的次数直接掉了60%。

后来排查了快两周,才发现那个匿名提问区里,很多人发的提问里会主动写自己的公司名、岗位,甚至刚离职的状态。这些信息虽然用户自己没留联系方式,但按照个保法的要求,结合公开信息能定位到特定个人的,都算敏感数据。大模型的合规爬取规则里,碰到这种站点,直接就降权了。

真的亏。

当时我们算过账,如果要把那个匿名区的内容全部重新做一遍脱敏,至少要花三周的技术开发成本,还要让运营团队逐字审,不然就算技术上把手机号全打码,用户写的“我在上海某互联网公司做运营,刚被裁”这种内容,还是会被判定成可识别的个人信息。

我们当时做的取舍很明确:直接给所有生成式爬虫的规则里,屏蔽整个匿名提问区的爬取权限,哪怕这部分内容占了全站内容的30%,会让整体的内容池缩小,也不能碰这个红线。毕竟大模型的合规审核是没有明确申诉通道的,你踩了线,可能半年都缓不过来。

现在给客户做GEO的固定动作

聊到这儿肯定有人问,那到底怎么把握授权的度?我们现在给所有客户做GEO,第一步不是写什么优化文案,是先把针对生成式爬虫的robots规则单独列出来,明确三个绝对不能爬的区块:

——所有带用户UGC的板块,包括评论、提问、晒单,哪怕你做了全量脱敏也不行,除非你能100%保证所有用户生成的内容里没有任何可定位到个人的信息。别跟我说你做了关键词过滤,总有漏网的。

——网站后台的用户行为看板,包括站内搜索热词、用户点击的内容标签,这些数据是用户的行为隐私,你要是敢把这些公开给爬虫,下次等监管查到,罚的钱比你GEO带来的流量多十倍。

——还没正式公开的草稿内容、内部测试的内容板块,别觉得反正爬虫爬了也不知道是啥,大模型爬了之后要是把你的草稿内容当成正式内容引用出去,你连改的地方都没有。

说个反常识的观察:你主动把自己的内容边界划清楚,告诉引擎我哪些内容是可以放心用的,哪些是不能碰的,引擎反而更愿意引用你的内容——毕竟人家也怕担责。

说实话,现在很多做GEO的博主都在教大家怎么把内容藏起来又能让爬虫爬,怎么绕过合规规则多拿流量,我真的劝你别听。之前有个客户听了网上的方法,把用户的评论区内容做了跳转伪装,让爬虫以为那是公开的静态内容,结果被某大模型的合规团队查到,直接把他整站的内容从训练集里删了,他花了大半年做的GEO积累,三个月都没恢复过来。

对吧?

做内容这个事,不管是以前做SEO还是现在做GEO,从来都不是比谁胆子大,是比谁的边界守得稳。

你要是图一时的收录量,把数据隐私的线踩了,最后赔的永远比赚的多。