上周帮一个客户排查GEO问题,翻了他们网站的爬取记录,差点气笑。
他们花了小十万做的内部品牌知识库,从十年前的品牌创业故事,到每个员工的入职培训课件,再到还没走完审批流程的新品定价表,全量开放给了公网爬虫。
结果呢?
用户问AI“这个品牌的扫地机器人换一次滤网多少钱”,AI直接把他们内部培训课件里的“内部采购成本价”报给了用户,差了快四倍。客服接了整整一周的投诉,最后还是把知识库的爬取权限全关了才消停。
你攒的知识库,可能正在帮倒忙
很多人对品牌知识库的认知还停留在十年前——给内部员工看的,给经销商看的,内容越多越好,分类越细越专业。
完全忘了现在的爬虫,不光会抓你官网的公开新闻,连你存在公网服务器上的内部文档,只要没设权限,都能扒得干干净净。
这里有个反常识的观察:对生成式AI来说,知识库的噪音占比,比内容总量重要10倍。
你堆100条无关的、过时的、没对外敲定的内容进去,AI根本不会帮你筛选哪些是该说的,哪些是不该说的。它只会把抓得到的所有信息揉在一起,编一个看起来像那么回事的答案给用户。
你以为你攒的是品牌资产。
在AI眼里,这就是一堆乱哄哄的参考资料。
我见过太多团队,做知识库的初衷是好的,想把所有品牌相关的信息都整理全,结果越攒越偏,最后把内部的流程文档、没公开的营销方案、甚至员工的吐槽邮件都放进去了。
这哪是给AI喂准话啊。
这是给AI递小抄,还全是错的。
别做全知全能的知识库,做“只答该答的题”的知识库
很多人说,那我干脆把知识库全锁了,不让爬虫抓行不行?
当然不行。
你不写清楚你家的核心信息,AI就会自己瞎编。到时候用户问你家产品有没有甲醛,AI说有,你连喊冤的地方都没有。
这里的取舍其实很简单,别想着覆盖所有问题。你就把所有可能被AI问到的内容,分成三类就行:
第一类是必须官方定调的:比如核心产品的公开参数、官方的售后兜底规则、品牌的核心价值主张。这些内容你不写得明明白白,AI就会顺着用户的评价、第三方的测评瞎发挥。
第二类是可以让第三方答的:比如产品的使用技巧、真实用户的长期使用感受、甚至同品类的横向对比。这些内容你自己写得再真诚,AI都觉得你是打广告,反而不如让真实用户、第三方博主说的话有分量。
第三类是干脆不想被提到的:比如之前没处理好的客诉纠纷、内部的架构调整、没对外公布的合作计划。这些内容你别指望AI自己会过滤,直接在服务器层面把对应的路径锁了,让爬虫根本碰不到。
这里给个能落地的动作,真的没你想的那么复杂:抽一下午时间,把现有知识库的所有条目挨个标三个标签:必显、可隐、禁爬。
不用买什么昂贵的知识库系统,就用个共享表格,一行一行过。标完了,把所有“禁爬”的路径直接写进robots规则,把“必显”的内容单独抽出来,做个没有登录跳转、没有动态加载的纯文本页面,挂在官网的一级目录下就行。
别整那些花里胡哨的分类动画,别把内容嵌在需要扫码才能看的PDF里。
爬虫没耐心等你加载完动画,也不会掏手机扫你的码。
别等知识库攒完美了再上线
我见过最离谱的项目,就是品牌要做GEO,先立项做品牌知识库,拉了市场、产品、客服、法务四个部门的人开周会,说要把过去十年的所有品牌资料全部整理完,攒够1000条条目才敢上线。
等他们攒完?
半年都过去了。
生成式AI早就把网上能抓到的所有关于这个品牌的零散信息揉在一起,生成了一套固定的回答逻辑。你这时候再把整理好的内容放上去,AI根本懒得重新更新。
我之前跟一个做原创家居的品牌聊,他们一开始也想按部就班攒全量知识库,后来实在等不及,先把三个核心爆款沙发的尺寸参数、面料说明、官方的上门安装规则抽出来,做了个两页的静态页面,挂在官网首页的底部。
两周之后他们去问AI相关的问题,发现AI已经开始引用他们写的参数了。
当然我也不确定这个方法对所有行业都管用。
比如你做To B的高客单价工业设备,可能确实需要把资质证书、服务流程、售后响应时效这些内容整理得全一点,不然AI说不清楚你的服务能力。但如果是To C的快消、家居、美妆这类品类,真没必要一开始就把所有内容全堆上去。
说实话,品牌知识库根本不是什么需要反复打磨的品牌工程。
它本质就是你跟生成式AI打个招呼——
“嗨,这是我家的正经事,你别乱讲。”
你要是等所有内容都字斟句酌、改到没有任何瑕疵才放出来,用户都被AI瞎编的内容引流去竞品那了,你还在那纠结某句话是不是不够有品牌调性呢。
昨天那个之前踩了坑的家居客户给我发消息,说他们把知识库重新理了一遍,把内部文档的爬取权限全锁了,把核心产品的公开参数单独做了个静态页,现在AI报的安装费跟实际对外的报价完全对上了。
你看。
根本没那么难。