官网设计得很好看，但AI就是不抓取，怎么办？能怎么优化？

我见过太多企业主，花大价钱做官网，设计精美、交互流畅、动效丝滑。人类访问体验极好。但AI来抓取的时候，转身就走。

为什么？因为你的官网在AI眼里，是一个空壳。

什么是"空壳问题"？

现代官网为了交互体验，大量采用客户端渲染。页面初始加载时，HTML里只有一个空荡荡的容器，实际内容全靠浏览器执行JavaScript后"画"上去。

人类访问时，浏览器完成了渲染过程，所以看起来一切正常。但绝大多数AI爬虫不执行JavaScript，它们只抓取服务器返回的原始HTML，看到的是一个没有内容的空壳。

数据有多残酷？

在一项持续27天的抓取测试中，GPTBot和ClaudeBot对纯HTML页面的抓取覆盖率是100%。对依赖JavaScript渲染的页面，覆盖率是零。

Googlebot虽然具备渲染JS的能力，但对JS页面的抓取覆盖率也仅有2%。这意味着，即使你的官网在Google上排名很好，在AI搜索里也可能完全隐形。

谁在受影响？

所有用React、Vue、Angular等前端框架搭建的官网。所有依赖客户端渲染展示核心内容的网站。所有把公司介绍、产品参数、联系方式放在JS里动态加载的页面。

这不是技术选型的问题，是认知盲区的问题。你做了一个给人看的网站，但AI只有一双"文本眼"。

为什么企业主意识不到这个问题？

因为官网在人类访问时表现完全正常。你打开网站，一切都在，内容完整，体验流畅。你自然不会想到AI看到的是另一番景象。而且传统搜索引擎的排名数据也在正常反馈，Google收录正常，百度排名正常，一切指标都告诉你"网站没问题"。

但AI搜索是另一套体系。它不看你的人类访问体验，不看你的传统搜索排名，只看它自己抓到的原始HTML里有没有内容。没有内容，你就是隐形的。

空壳问题的本质是什么？

本质是"渲染时机"的错位。人类访问时，浏览器先拿到空壳HTML，再执行JS把内容画上去，整个过程几百毫秒，人类感知不到延迟。AI爬虫访问时，拿到空壳HTML后不会执行JS，直接开始解析，发现没有内容，转身就走。

这个错位在传统搜索时代被Googlebot的JS渲染能力弥补了。但AI爬虫没有这个能力，也不打算在短期内具备这个能力。因为对AI厂商来说，执行JS抓取的成本太高，而纯文本抓取已经能满足大部分需求。

空壳问题有多普遍？

我接触过的企业中，超过一半的官网存在这个问题。尤其是近五年新建的网站，几乎全部采用前端框架，全部依赖客户端渲染。这些网站在传统搜索里可能排名不错，但在AI搜索里全部隐形。

更麻烦的是，这个问题不会自己暴露。你的网站访问量正常，用户行为正常，传统搜索排名正常。没有任何数据告诉你"AI看不到你"。你只能主动去检查，才能发现这个问题。

空壳问题和内容质量的关系是什么？

空壳问题是"能不能被读到"的问题，内容质量是"读到了值不值得引用"的问题。两者是先后关系。空壳问题不解决，内容质量再好也没用，因为AI根本读不到。空壳问题解决了，内容质量才成为决定因素。

所以优先级很明确：先解决空壳问题，再优化内容质量。不要本末倒置，花大量时间写优质内容，结果AI根本看不到。

解法是什么？

确保核心信息以服务端渲染方式直接输出。让AI爬虫拿到的原始HTML里，就包含公司简介、产品参数、联系方式等关键内容。技术细节交给工程师，但企业主必须知道：这个问题的存在，决定了你的品牌在新一代用户决策入口里是否可见。

怎么验证解决效果？

解决后，用禁用JS的方式打开官网，如果能看到核心内容，说明服务端渲染生效了。再用查看源代码的方式确认，公司简介、产品参数、联系方式直接存在于原始HTML中。两个方法都通过，才算真正解决了空壳问题。