🐘 巨象 AI 前沿雷达 🪐 巨象在火星 · MARS OUTPOST← 返回巨象雷达主站
Dev.to2026-11-05 16:30AI 生成

一条 curl 命令,测出 AI 能不能看见你!谷歌排名好好的,ChatGPT 却看不见你?AI 爬虫根本不跑 JS

有开发者实测并引用 Vercel 研究:GPTBot、ClaudeBot、PerplexityBot 只下载 HTML 不执行脚本,纯前端渲染的页面在 AI 搜索里等于不存在。

大白话如果你的网页内容靠 JavaScript 在浏览器里现拼出来,那 ChatGPT、Claude、Perplexity 背后的爬虫拿到的就是一个空壳。它们会把 HTML 甚至 JS 文件下载走,但不会运行。谷歌的爬虫会跑 JS,所以这事一直没被发现——你在谷歌排名正常,在 AI 搜索里却查无此人。作者给了个土办法:用 curl 抓一下自己的页面,标题、正文、结构化数据不在输出里,AI 爬虫也找不到。
对你意味着做独立站、博客、产品页的内容创作者和前端都该自查一遍,尤其靠 AI 搜索带流量的站点。

开发者博客文章,数据引自 Vercel 2024 年 12 月爬虫流量研究,官方未就各爬虫行为逐条确认

原文:AI crawlers don't run your JavaScript

打开巨象雷达,看今天全部 AI 动态