一個下午就能查明 ChatGPT 是否會推薦你的開發工具,而且不用花錢。準備大約 25 條真實買家可能會輸入的提示詞,分別在 ChatGPT、Perplexity 和 Gemini 的全新會話中運行,在電子表格裏記錄每次提及和引用,再計算提及率。最終你會得到三樣儀表盤試用版無法提供的東西:一個基準數字、一份列出誰在取代你的名單,以及 AI 引擎用作依據的具體頁面。
整個過程不需要任何工具。這是有意為之。我們建議所有團隊都從這種方法開始,包括那些買得起市面上任何訂閱服務的團隊。
為什麼先手動測試
手動測試能讓你準確看到買家看到的內容,中間沒有資料採集層。大多數追蹤工具通過界面自動化而非官方 API 收集答案(Peec 的 CPO 曾公開這樣表示),所以儀表盤上的數字可能與你測出的結果不同。AI 的回答也會變化:Ahrefs 測得 Google AI Overviews 大約每 2.15 天就會改寫一次,連續兩次回答之間有 45.5% 的引用發生更替。認真手動跑一輪,勝過試用一個讓你一無所獲的儀表盤。
開始前先說明兩點。第一,手動測試的樣本量也不大:在 3 個引擎上跑兩輪、每輪 25 條提示詞,得到的是趨勢性證據,不是什麼普遍定律。第二,數字不會一直穩定,這很正常。第一輪的目的是建立基準,第二輪(下個月)的目的是觀察趨勢。Ahrefs 自己對AI Overviews 中引用內容的更替正說明了為什麼重複測試比任何一次單獨結果都重要。
為什麼界面抓取很重要:在一篇比較主要追蹤工具的討論串中,用户提到 Peec 的 CPO 承認結果來自抓取網頁界面,因此答案可能不同於已登入買家實際看到的內容(r/SEO_tools_reviews)。自己運行提示詞,就能明確知道測量的是什麼。
第 1 步:準備一組 15 到 30 條提示詞
準備大約 25 條提示詞,分為四種買家意圖:發現(買家如何詢問你的品類)、比較(正面對比)、替代方案(尋找替代品的查詢)和實施(與具體任務相關的問題)。按照買家的表達方式來寫,除了少數品牌專項檢查外,不要提到自己的工具。意圖類型的搭配比數量更重要,因為每種意圖衡量的是漏斗中的不同環節。
| 類別 | 佔比 | 示例(以功能開關工具為例) | 衡量內容 |
|---|---|---|---|
| 發現 | 40%, 大約 10 條提示詞 | “best feature flag tools for startups”,“tools to manage feature releases” | 買家進入這個品類時,你是否會出現 |
| 比較 | 25%, 大約 6 條提示詞 | “LaunchDarkly vs PostHog”,“Unleash vs Flagsmith” | 你能否經得住正面對比 |
| 替代方案 | 20%, 大約 5 條提示詞 | “LaunchDarkly alternatives”,“open source alternative to LaunchDarkly” | 你是否進入了買家考慮更換工具時的候選名單 |
| 實施 | 15%, 大約 4 條提示詞 | “how to roll out features safely in Next.js”,“best library for A/B testing a React app” | 提示詞描述具體任務而非品類時,你是否會出現 |
編寫提示詞的四條規則:
- 措辭保持中立。“What's the best feature flag tool”測量的是實際情況;“Is AcmeFlags a good tool”測量的則是你自己的偏見。
- 加入 3 到 5 條提示詞:如果你的工具已有一定知名度,它理應會出現;再加入 5 到 8 條它大概不會出現的提示詞。增長機會就在第二組裏。
- 固定準確措辭並保存到表格中。只有提示詞完全相同,重複測試才有意義。
- 編號為 P01 到 P25,讓每條記錄的回答都能對應回一行。
第 2 步:正確運行測試
每條提示詞都在全新會話中運行,使用無痕窗口或已退出登入的個人資料,每段對話只放一條提示詞。測試 ChatGPT、Perplexity 和 Gemini,而不只是 ChatGPT:不同引擎的引用頻率差異很大。在一項分析 118,101 個回答的研究中,Perplexity 平均每個回答有 21.87 條引用,而 ChatGPT 為 7.92(Qwairy, Q3 2025)。根據 Muck Rack 的分析,ChatGPT 引用的域名中,只有大約 11% 也被 Perplexity 引用(被 Writer 引用)。跨引擎測試最容易發現意料之外的結果。
會影響測試結果的實用細節:
- 選定一種 ChatGPT 模式(退出登入的免費版或你的付費帳户),並在所有測試中保持一致。Gemini 也一樣。
- 不要預先引導對話。不要使用系統提示詞式的開場白,也不要用“you’re an expert”之類的開頭。買家不會這麼輸入。
- 每個新聊天只輸入一條提示詞。追問會污染樣本。
- 把測試分散在兩三天內進行,每條提示詞在每個引擎上運行兩次。不同輪次的答案可能不同;Ahrefs 的引用更替資料顯示,相鄰兩次觀測之間大約一半的引用都可能發生變化。
- 在 Perplexity 上使用預設模式。深度研究模式回答的問題與買家實際提出的問題不同。
計算一下:25 條提示詞 × 3 個引擎 × 2 輪 = 150 個回答。這需要一個完整的下午,再加上第二天早上一小段時間。
第 3 步:在電子表格中記錄所有內容
每個回答佔一行。12 列就夠了,其中兩列(提到的競爭對手、引用的 URL)最後會比你自己的列更重要。如果回答提到了你卻沒有引用,也要記錄這次提及;如果它引用了你的文檔頁面卻沒有點名你,同樣要記錄。這是兩種不同的信號,改進方式也不同。
| 列 | 示例值 | 設置原因 |
|---|---|---|
| 日期 | 2026-10-21 | 追蹤各輪測試之間的變化 |
| 引擎 | ChatGPT | 不同引擎的引用差異很大 |
| run | 1 或 2 | 檢查同一引擎內的結果差異 |
| prompt_id | P07 | 對應到固定的提示詞集合 |
| 類別 | comparison | 按意圖類別分析差距,而不是隻看整體比率 |
| 提示詞(原文) | “launchdarkly vs posthog” | 確保結果可復現 |
| 是否提及 | Y / N | 核心指標 |
| 位置 | 第 1 位 / 第 2 至 3 位 / 排在後面 / 未提及 | 排序反映考慮優先級,而不只是是否出現 |
| 描述方式(一句話) | “開源,可自託管” | 顯示產品定位是否符合用户意圖 |
| 提到的競爭對手 | LaunchDarkly, Unleash, Flagsmith | 了解各 AI 引擎實際認為你在與誰競爭 |
| 引用的 URL | reddit.com/r/devops 討論串、供應商文檔 | AI 實際信任的資訊檢索層 |
| 引用來源類型 | docs / reddit / listicle / G2 / github | 告訴你該去哪裏爭取引用 |
在表格末尾建一個資料透視表或添加幾條公式,就能得到最重要的數字:各引擎的提及率、各類別的提及率,以及每個競爭對手取代你被提到的頻率。
第 4 步:像研究者一樣解讀結果
單次提及說明不了什麼,提及率才有意義。分析單位是“每個引擎的 25 個回答中,有 N 個提到了你”。如果在同一組提示詞中,ChatGPT 在 25 個回答裏有 3 個提到你(12%),而直接競爭對手在 25 個回答裏被提到 15 次(60%),這個差距就是發現。其他一切——排名、感覺、一次幸運的回答——在多輪測試中反覆出現之前都只是噪聲。
如何閱讀表格:
- 按引擎和類別分別計算提及率。發現類的提及率反映你進入品類的可見度;比較類的提及率反映你進入候選名單的實力。一個工具可能在其中一類表現不錯,在另一類卻毫無存在感。
- 區分“被提及”和“被引用”。ChatGPT 平均每個回答引用約 7.92 個來源,而 Perplexity 為 21.87 個(Qwairy),因此兩個引擎採用了不同的資訊檢索方式。只被點名卻沒有引用,通常意味着模型是在回憶訓練資料,而不是在讀取網頁。
- 重點查看“提到的競爭對手”和“引用的 URL”兩列。如果競爭對手總是通過特定 Reddit 討論串或榜單文章出現,這些頁面就是你在資訊檢索方面的缺口。AI 引用中大約 85% 指向品牌並不擁有的來源(Muck Rack 分析,經 Writer 轉述),所以如果所有證據都只存在於你自己的網站上,那麼被模型較少提及是意料之中的結果,而不是什麼謎團。
- 把錯誤描述視為另一類問題。如果 ChatGPT 提到了你,卻把你說成“僅面向企業”,而你的產品其實是開源的,那就是定位問題,解決方法也不同於提高出現率。
- 採取行動前,先在其他引擎中核實意外結果。單個引擎、單輪測試的結果只是一個假設。
不存在絕對的“優秀”數值,任何聲稱有這種標準的供應商都是在推銷產品。唯一有公開證據支持的基準只能作為方向參考:Ahrefs 分析了 1700 萬條 AI 引用,發現被引用的 URL 比 Google 的自然搜索結果大約新鮮 25.7%,而 ChatGPT 最容易引用最新頁面。過時的對比頁面會實實在在地降低你的勝算。
第二個下午:把基準轉化為待辦清單
表格最後兩列已經是一份待辦清單:你在哪些反覆出現的競爭對手面前缺席,以及 AI 引擎總在引用哪些你尚未出現的頁面。開發工具通常需要從相同幾個方面着手改進。進入那些已經被引用的對比討論串和榜單文章。重組文檔,讓每頁都能完整回答一個問題,並讓引擎可以整段提取。發佈坦誠的競品對比頁面,直接回答比較類問題,因為引擎更青睞能正面回應這些提示詞的頁面。保持 llms.txt 和 AI 爬蟲訪問開放,避免技術問題阻礙資訊檢索。更新那些本應勝出的過時頁面。
我們會在本站接下來的文章中詳細介紹每一項改進。
每月重新測試
每月用完全相同的提示詞集合重新測試,並記錄到同一張表格中。第一輪是基準,第三輪形成趨勢,而趨勢才是你可以管理的依據。如果某個數字變了,你會想要看到證據;如果沒變,你就避免把偶然變化誤認為是上線發佈帶來的效果。
如果幾輪測試都顯示差距很大,而你希望由別人來彌補,這正是我們提供的服務。CiteGap 會用更多引擎和提示詞運行同樣的測試,診斷差距的原因,並交付(或直接實施)改進清單,採用一次性合作模式;持續監測也以月度訂閱的方式提供。先從免費掃描開始,如果你已有電子表格,也可以帶上,這樣診斷會更快、成本更低。
常見問題
如何檢查 ChatGPT 是否會推薦我的開發工具?
準備大約 25 條真實買家可能會輸入的提示詞,分別在 ChatGPT、Perplexity 和 Gemini 的全新會話中運行,並在電子表格裏記錄每次提及和引用。完整跑一遍是 25 條提示詞 × 3 個引擎 × 2 輪,共 150 個回答,需要一個完整的下午,再加上第二天早上一小段時間。全程不需要任何付費工具。
應該測試多少條提示詞?怎麼分配?
15 到 30 條之間,實際操作通常取約 25 條。按四種買家意圖分配:發現佔 40%(約 10 條)、比較佔 25%(約 6 條)、替代方案佔 20%(約 5 條)、實施佔 15%(約 4 條)。措辭保持中性,像買家那樣提問;除少數品牌專項檢查外,不要提到自己的工具。
除了 ChatGPT,還應該測試其他引擎嗎?
應該。不同引擎的引用頻率差異很大:一項分析 118,101 個回答的研究顯示,Perplexity 平均每個回答有 21.87 條引用,而 ChatGPT 為 7.92;ChatGPT 引用的域名中,只有大約 11% 也被 Perplexity 引用。只在單個引擎上出現的結果只是一個假設;對意料之外的結論,先跨引擎核實再行動。
來源
- AI Overview 內容變化(平均持續 2.15 天,45.5% 的引用發生更替):Ahrefs
- 每個回答的引用數(Perplexity 21.87、ChatGPT 7.92,共 118,101 個回答,Q3 2025):Qwairy
- 贏得的媒體來源佔比(約 85% 的 AI 引用)與跨引擎引用重合度較低(域名佔 11%);Muck Rack 分析,經 Writer 轉述:writer.com
- 內容新鮮度(被引用的 URL 新 25.7%,分析了 1700 萬條引用):Ahrefs
- 關於承認抓取網頁界面及工具比較的討論:r/SEO_tools_reviews