7月7日,云安全服务商Cloudflare发布了一组数据,我刷到的时候愣了好几秒:
在全球互联网的HTTP请求中,AI机器人和自动化程序的流量占比已达57.4%,而人类用户贡献的流量只有42.6%。
这是互联网诞生以来,人类第一次在自己的网络上成为少数派。
这条消息淹没在一堆大模型发布、芯片禁令、AI监管新规里,没溅起什么水花。但作为一个写了几年独立博客的人,我觉得这是一件值得认真聊一聊的事。
老实说,我写博客的时候,心里想的是一个个真实的人——可能是在咖啡馆里刷到这篇文章的你,可能是某个失眠的深夜偶然点进来的陌生人,也可能是一个和我一样爱折腾网站、喜欢用Astro搭博客的技术博主。
但现实是什么呢?
我的博客后台统计里,Googlebot天天来,Bingbot隔三差五刷新,还有各种我叫不上名字的爬虫——它们抓取我的文章,用来训练模型、生成摘要、填充AI搜索结果。我的文字变成了别人的语料,而那些”读者”既不点击广告,也不留言互动,更不会因为读到某句话而感到被触动。
Cloudflare的数据只是把这个现实量化了出来:57%不是偶然,这是一个结构性变化。
Cloudflare在一篇分析文章里说了一句很扎心的话:过去30年,互联网有一条旧契约——“我来爬取内容,给你推荐流量”。搜索引擎抓取网页,把流量引进来;网站靠SEO优化争取曝光,靠广告变现生存。这套规则虽然不公平,但至少是双向的:网站提供内容,搜索引擎提供分发,各取所需。
但生成式AI时代,这条契约彻底失效了。
现在的玩法是:AI公司直接爬取你的内容,用来训练模型,模型生成的回答直接替代了你的网页。 用户不需要点进你的博客,就能获得你花几天时间整理出来的信息和观点。你不但没有获得流量,还亲手把自己的内容变成了别人的竞争优势。
这就是为什么Cloudflare最近推出了一个”反AI爬虫”的功能——它允许网站主屏蔽AI机器人的抓取,重新拿回内容的控制权。
这是个好问题,也是我最近反复问自己的问题。
当大多数流量来自机器,当AI可以批量生产内容,当搜索引擎的答案越来越直接,当注意力被各种信息流碎片化到极限——我们这些还在认真写博客的人,到底在追求什么?
我想了很久,答案是这样的:
博客从来不只是关于信息传递的。
一个人愿意花时间去读另一个陌生人在某个深夜写下的思考,去跟随一条不完美的技术探索路径,去相信一个素未谋面的博主的推荐——这不是信息需求,这是信任的交换。
这种信任,AI爬虫给不了。
写博客对我来说,是在嘈杂的互联网里给自己挖的一个小坑——不求被多少人看见,但求留下的东西是经过自己认真思考的、经得起时间的东西。
就像现在,我在 aimomo 写文章,不管有没有人看,不管Google怎么排名,不管AI爬虫占了我多少流量——我写的东西,是给愿意认真读的人准备的。
我不是悲观主义者,但也不想假装一切都没变。
有几件事我觉得是值得坚持的:
第一,写个人化的内容,而不是AI更容易复制的摘要式内容。 当AI可以轻松生成”2026年AI领域十大趋势”这类文章时,你独特的经历、失败的教训、踩坑的细节,反而更有价值。
第二,重视真实的互动和社区。 一个愿意留言、愿意订阅RSS、愿意和你邮件往来的真实读者,比一万次AI爬虫抓取更有意义。
第三,考虑给你的博客加上AI爬虫屏蔽。 Cloudflare提供这个功能了。屏蔽不是拒绝分享,而是拒绝被无偿使用。 你的内容是你的资产,没有人有权利不经允许就拿去训练模型。
互联网变了,这不是我们能阻止的。但博客这件事,我始终觉得,它的意义不在于规模,不在于流量,在于你在用自己的语言,在世界的某个角落,留下一段真实的声音。
哪怕那声音只有42.6%的读者在认真听,也值得说下去。
你觉得呢?
(完)
正在加载评论...