本帖子由JetOctopus赞助，分享如何在传统谷歌SEO基础上，针对像ChatGPT和Perplexity这样的AI驱动搜索引擎进行网站优化的见解。内容涵盖AI机器人抓取、适应技术SEO策略以及理解不断变化的搜索格局等关键问题。 到2026年，你网站的大部分搜索展示将来自于为用户研究的AI代理。与人类不同，这些机器更重视诸如HTML加载是否在200毫秒内干净完整、产品页面是否在四次点击内可访问，以及内容是否能精准回答那些常见或全新的九个字的问题，这些问题在任何关键词研究中都未涉及。这一洞察基于2025年中以来数百个企业网站的服务器日志数据。 **你的网站发生了什么：** 查询长度异常快速增长；例如，10个字的查询年增161%，这主要是因为AI“扇出”——即单一用户查询被AI拆分成多个子查询。虽然长查询的展示量激增，但点击率大幅下降至2. 26%，因为AI会直接读取和合成答案，而不引导用户访问你的网站。这些“幻象展示”实际上是AI对你内容的真实评估，过滤掉它们可能会错失关键信号。 **三类AI机器人及其影响：** 1. **训练机器人：**广泛抓取，忽略点击深度；确认AI已看到你的内容，但不能保证用户可见。 2. **AI搜索机器人：**探索页面，但很少超出首页的2-3次点击，且每月只访问一次。 3. **AI用户机器人：**由真实用户在AI工具中的搜索触发，访问与用户查询相关的内容，推动AI的实际可见度。 大量训练或搜索机器人抓取并不意味着你的内容会出现在AI的答案中。不对日志数据按机器人类型进行细分，只能看到部分全貌。 **LLMs重视的SEO信号：** - **robots. txt：**至关重要，大多数AI爬虫（如ChatGPT、Claude、Gemini）会遵守；PerplexityBot部分遵守，但其用户机器人不会。应审查并更新robots. txt以确保AI的访问。 - **XML网站地图：**被AI爬虫广泛利用于URL发现，保持其准确性。 诸如canonical标签、noindex指令和LLM. txt文件等信号不会影响AI机器人的能见度——它们会忽略这些元标签和文件。 **JavaScript渲染：** 大多数AI爬虫不渲染JavaScript，所以如果关键内容依赖客户端加载，AI只能看到空壳。服务器端渲染对于普遍访问性至关重要，Google Gemini是个例外，它使用Googlebot的渲染技术。 **提升AI可访问性：** AI搜索机器人很少爬行超过三次点击的深度，因此要优化内部链接，确保有价值的深层页面能在四次点击内到达。由训练机器人访问但被用户机器人忽略的页面，是优先修复的高潜力区域；而经常被访问的页面，则提示需要丰富内容。 **长扇出查询的优化：** 95%的AI驱动查询没有搜索量，且由AI生成的子查询组成。为挖掘潜在机会，应筛选Google Search Console中的数据，找出超过7个字、展示量少于50且无点击的查询，形成“扇出机会矩阵”。针对列表、对比、评论和优缺点等格式结构化内容，可以有效捕获这些查询。2025年中至后期，产品评论类查询增长了16, 000%，凸显出结构化详细内容的重要性。 **技术审计步骤：** 1. 通过过滤特定的用户代理识别服务器日志中的AI用户机器人流量；JetOctopus等工具可协助细分。 2.

审核深层页面的可访问性，检查HTML负载，避免依赖JavaScript加载的内容，确保加载快且点击深度浅。 3. 仔细审查robots. txt，避免误阻止AI机器人或暴露敏感内容。 4. 利用GSC API导出映射幻象展示，理解与内容相关的AI查询，并优先制定应对策略。 5. 持续监控AI机器人活动变化、Core Web Vitals和SEO表现，使用JetOctopus Alerts等工具实现统一报告。 **新KPI——技术访问性：** 到2026年，SEO的成功关键在于AI代理能否在200毫秒内抓取、访问并从任何页面（例如你的第五万产品页）提取事实。如果不能，传统SEO的作用将被AI主导的搜索逐步取代。基础步骤是全面分析日志，以指导其他优化措施。 总之，AI驱动的搜索要求重新思考SEO：关注技术可访问性、深入内部链接、清晰的服务器渲染内容，以及针对复杂AI查询的优化。通过不断分析日志和根据真实AI机器人行为进行调整，是在新兴的机器媒介搜索生态中保持可见度的关键。