你在台中一家 30 人的工業感測器公司負責行銷,部門裡只有你和另一位負責維護官網的同事。上個月你自己在 ChatGPT 問了一句「台灣有哪些工業用溫濕度感測器品牌」,結果回答列了四個品牌,裡面沒有你們。你再直接問自己的品牌名,AI 又把你們講成代理國外產品的貿易商,可是你們其實是自己有工廠的製造商。
所以你開始找 GEO 工具(GEO 是生成式引擎優化,也就是讓品牌在 AI 的回答裡被正確提到、被引用的工作),從 GEO 工具比較裡挑了 A、B、C 三家,一週內約了三場展示。
結果三場展示看下來,三家的畫面上都有一個 0 到 100 的能見度總分,也就是工具自己算出來、代表品牌在 AI 回答裡出現多少的分數,而功能清單上每一項也都寫著「支援」。可是你真正想知道的是三件事:類別題裡為什麼沒有你們、AI 為什麼說你們是貿易商,以及把官網改了之後,AI 的說法會不會跟著變。如果你今天只看總分和功能清單的話,這三件事一件都看不出來。
這篇會一直用這家感測器公司當例子,依序講測試題怎麼準備、五個情境怎麼測、展示結果怎麼記,以及試用時要做哪些事。先說清楚,我們 EthorX 自己也做這類工具,叫 Otlex,所以這套方法我也會拿來檢查 Otlex。
展示之前,先準備好你自己的測試題
展示的時候,廠商通常會用他們準備好的示範帳號,而裡面的題目和品牌都不是你的。所以我會先準備 4 題自己的題目,約展示時就寄給廠商,請他們在展示前三、四天,先在自己的工具裡建好你們的品牌和這 4 題,每天拿去問 AI。這樣展示當天才有你們的回答可以看,三家給出來的結果也才能放在一起比。之後如果要試用,再補到 10 題左右。
而題目最重要的是寫法。你一開始問的「台灣有哪些工業用溫濕度感測器品牌」,比較像是在 Google 打關鍵字;可是客戶問 AI 的時候,通常會把自己的處境和條件一起講出來,而 AI 回答的內容和推薦的品牌,也會跟著這些條件改變。以這家感測器公司來說,題目可以這樣寫:
| 關鍵字寫法 | 客戶實際會問 AI 的方式 |
|---|---|
| 溫濕度感測器 推薦 | 我們是食品廠,冷藏庫要裝十幾個溫濕度感測器,量到的資料要能接進產線現有的控制器(PLC),台灣有哪些品牌做得到? |
| 工業 溫濕度感測器 品牌 | 無塵室要監測溫濕度,濕度誤差要在 ±2% 以內,有沒有台灣本地就能維修的品牌? |
| 品牌名稱 評價 | 我們工廠要汰換舊的進口溫濕度感測器,聽說○○感測是台灣自己生產的,是真的嗎?交期大概多久? |
| 溫濕度感測器 比較 | 我們三條產線要換溫濕度感測器,正在比較○○感測和國外大廠,價格和壞掉之後的維修,哪一家比較方便? |
題目越接近客戶真正的問法,展示時看到的回答,才越接近客戶真正看到的。另外,每一題都要給一個編號;題目的字句只要改過,就要當成新的一版,因為 AI 的回答會跟著字句改變,新舊兩版的結果不能直接放在一起比。這組固定拿來問 AI 的問題,一般叫作題庫,要分哪些題型、怎麼避免同一題換字重複,可以看 AI 搜尋題庫怎麼設計。
用五個情境,請每家工具拿出一筆實際的資料
展示當天,我會請三家都用這 4 題示範下面五個情境。每個情境都要打開原始回答來看,也就是 AI 當時回答的完整內容。之所以用情境來測,是因為功能清單上的同一個名詞,在三家產品裡可能指的是不同的資料。例如「引用追蹤」,有的工具只是算一個引用次數,有的會列出 AI 引用的網址,有的還會標出那個網址是你的官網還是競爭對手的;你只有看到它實際拿出來的那一筆資料,才知道它說的是哪一種。
評估時請每家工具用同一批題目示範五個情境,每個情境都要拿出一筆實際的資料。
情境一:品牌題和類別題分開看
先從表格裡挑兩題。一題問到你們的品牌名:「我們工廠要汰換舊的進口溫濕度感測器,聽說○○感測是台灣自己生產的,是真的嗎?」另一題不帶品牌名:「我們是食品廠,冷藏庫要裝十幾個溫濕度感測器,量到的資料要能接進現有的控制器,台灣有哪些品牌做得到?」品牌題看的是 AI 把你們講得對不對,類別題看的則是客戶沒指名找你的時候,你們會不會出現在回答裡。
這兩種題目要分開算,合成一個品牌分數就看不出問題在哪裡了。因為品牌題直接問到你們的名字,回答通常會提到你們,混在一起算,提到的比例就會看起來比實際高。而這家感測器公司真正的問題,剛好就在類別題:展示時打開冷藏庫那題的原始回答,ChatGPT 列了四個品牌,還是沒有你們。所以工具至少要讓你一題一題打開原始回答,你才看得出是哪一題沒有提到你們。
情境二:同一題放到不同的引擎
這裡的引擎,指的是 ChatGPT、Gemini、Perplexity 這類會直接回答問題的 AI 服務。你們還不知道客戶最常用哪一個,就先從 ChatGPT 和 Google 的 AI 摘要開始。AI 摘要(AI Overview)是 Google 搜尋結果最上方那段由 AI 整理的回答,工具會把題目拿去 Google 搜尋,看上方有沒有出現 AI 摘要;而 AI 摘要不是每次搜尋都會出現,沒出現的那幾次,工具也要記下來。
展示時,C 工具分開列出了冷藏庫那題在兩個引擎的結果:ChatGPT 三天都沒提到你們,AI 摘要則有一天提到你們。A 工具的示範帳號,則是把每一題在兩個引擎的結果合成一個分數;如果冷藏庫這題也這樣合成,只看分數,你不會知道 ChatGPT 一次都沒提到你們。所以這個情境要看的,是工具有沒有把兩個引擎的結果分開保存,以及報表能不能點回各引擎各自的原始回答。
情境三:提及和引用網址分開看
提及,是 AI 的回答裡出現了你們的品牌名。引用,則是回答附上的來源網址裡有你們的官網。這兩件事要分開看,因為 AI 提到你們的時候,讀的可能是別人的網站。
展示時,C 工具打開那題品牌題的原始回答,引用的網址是一家經銷商的商品頁,頁面上寫著「本公司代理○○感測產品」,AI 說你們是貿易商,就是從這一頁來的。而 A 工具的畫面只顯示一個「引用率 63%」,點不開是哪幾筆回答、引用了哪幾個網址;如果只有這樣的數字,你就不會知道說你們是貿易商的那句話,是從經銷商那頁來的。所以這個情境要看工具有沒有把下面這些資料留下來:
- 原始回答:AI 當時回答的完整內容,或至少讀得懂的那一段。
- 引用的網址:回答附了哪些來源,網站名稱(例如 ethorx.com)和完整網址都要有。
- 來源是誰的:自己的官網、經銷商或媒體這類第三方網站,還是競爭對手。
- 日期和題目版本:哪一天問的、用的是哪一版題目。
情境四:把結果交給要改網站的人
回到那題品牌題:AI 把你們講成代理國外產品的貿易商。這時請工具把這筆結果整理成可以交出去的樣子,至少要看得到題目、AI 回答這題的日期、原始回答、AI 的說法和實際情況差在哪裡、引用的經銷商網址,以及你們官網上相關的頁面(例如「關於我們」)。
我會用一個簡單的方法判斷這份資料夠不夠:把它傳給負責官網的同事,請他只看這份資料,回答「哪一題出了什麼錯,要改哪一頁」。如果他看完還得回頭問你,就代表資料少了東西。至於要不要改、要改成什麼說法,還是要由你們對照自己的產品事實來決定。
情境五:同一題的前後紀錄有沒有留著
展示的時候,你們的題目才跑了三、四天,官網也還沒改,所以這個情境要請廠商在示範帳號裡,打開一題已經跑了比較久的題目,看它在兩個不同日期各問一次的回答,是不是兩筆都還在,而且每一筆都看得出是哪一天、用哪一版題目問的。
展示時看兩筆,只是確認工具會把每一次都留下來。之後你們改了官網,要拿來和修改前比的就是這些紀錄;如果新的回答會取代舊的,或某個引擎那天沒有成功回答、工具卻沒有記下來,前後就沒辦法比。所以能把每一次的題目、引擎和日期都留下來,改完網站之後你才有前後可以比。而同一題每次問,AI 的回答都可能不一樣,所以真的要判斷修改有沒有效果,要看的是幾週裡多次的結果。
把三場展示的結果記下來
三場展示看完,我會把每家在五個情境裡實際拿出了什麼,記在同一張表上,最後再加一項:你要買的那個方案,到底包含哪些引擎。因為工具通常會依方案限制能觀測的引擎,示範帳號看得到的,不一定是你買得到的。這家感測器公司記下來的結果是這樣:
| 要看到的資料 | A 工具 | B 工具 | C 工具 |
|---|---|---|---|
| 品牌題、類別題各自的原始回答 | 沒用你寄去的題目跑,只有總分 | 每一題都點得開 | 每一題都點得開 |
| 不同引擎分開保存 | 兩個引擎合成一個分數 | 兩個引擎分開列 | 兩個引擎分開列 |
| 引用的網址和來源是誰的 | 只有引用率,看不到網址 | 有網址,沒有標出是誰的網站 | 有網址,也標出是經銷商的網站 |
| 交給同事看得懂的資料 | 只能截總覽畫面 | 可以分享連結,但匯出只有每週總分 | 可以匯出每一筆回答 |
| 同一題的前後紀錄 | 展示時沒有示範 | 新結果會取代舊的 | 兩個日期的回答都在 |
| 你要買的方案包含哪些引擎 | 示範帳號看得到所有引擎,業務沒說入門方案有哪些 | 只有 ChatGPT 和 AI 摘要,剛好是你們要的 | 示範帳號看得到五個引擎,入門方案只有三個 |
先說總分。A 給你們 72 分,C 只給 41 分,可是 A 的 72 分是用業務預設的題目算的,C 的 41 分則只算你寄去的 4 題,旁邊還分開列出 ChatGPT 和 AI 摘要各自的分數。每家工具的分數,都是用它自己的題目、引擎、時間和算法算出來的,只要其中一項不同,兩個分數量的就是不同的東西,所以三家的總分不能拿來互相比。
這張表要一項一項看你需要的那一項,展示時有沒有實際看到。A 工具沒有用你寄去的題目跑,五個情境也拿不出任何一筆原始回答,所以先刪掉 A。展示時 A 的業務還說,他們的分數「有參考 Google 的排名資料」,可是 Google 在第三方 SEO 工具、服務與建議這份說明裡寫,第三方工具拿不到 Google 內部的排名資料,也無法保證成效。同一份說明也提到,標榜能改善 AI 搜尋呈現的工具,文件裡把它們叫作 AEO(答案引擎優化)或 GEO 工具,有些確實有幫助,有些則會暗示自己的做法得到 Google 認可,而這段話一樣適用在 Otlex 身上。
B 工具的原始回答打得開,方案也剛好是你們要的兩個引擎,可是新結果會取代舊的,情境五沒有通過。而你們最想知道的,正好就是改完官網之後 AI 的說法有沒有變,所以 B 工具這次也先刪掉。
展示看到的,還要在試用帳號裡再跑一次
刪掉 A、B 之後,剩下 C 工具。展示時看到的,只是廠商的示範帳號在那一天做得到的事,產品頁上寫的,也只是廠商說自己做得到的事。只有你用自己的題目、在試用帳號裡跑出來的資料,才能證明它在你們要買的方案裡真的做得到。所以你先確認了 C 的入門方案裡有 ChatGPT 和 AI 摘要,再申請兩週的試用,照下面的順序做:
- 用自己的題目跑一週:把原本的 4 題再加 6 題放進去,選定台灣、繁體中文,以及 ChatGPT 和 AI 摘要兩個引擎,每天確認都有跑,失敗的時候也有記下來。
- 匯出那筆貿易商的回答:確認匯出的檔案裡,題目、日期、原始回答和經銷商的網址都在,負責官網的同事只看這個檔案就能動手。
- 改一頁,再跑同一題:第一週結束後,同事把「關於我們」的第一段改成「台中自有工廠設計與生產」。第二週同一題、同兩個引擎每天繼續跑,確認修改前後的回答都還在。
- 寫下這家做不到的事:例如 C 的匯出檔裡,「AI 摘要那天沒出現」和「有出現但沒提到你們」都記成 0,你們就要自己在試算表另外標出來。
改完頁面之後,AI 的說法不會馬上跟著變。有上網搜尋的回答,要等搜尋來源重新抓到新的頁面才會更新;沒有上網搜尋的回答,用的是模型原本記得的內容,不會因為你改了頁面就跟著改。簽約前還要確認的資料權限、保存期限,以及合約裡廠商要交給你哪些東西,整理在 AI 搜尋監測工具採購清單。
回到這家感測器公司
第二週的結果出來,ChatGPT 有上網搜尋的那幾次回答裡,有兩次改說你們是台中的感測器製造商,引用的是新的「關於我們」;其他幾次還是說你們是代理商,引用的仍是經銷商那頁。所以你們接著請那家經銷商把商品頁的「代理」改成「授權經銷」,之後再用同一批題目每天問,看接下來幾週的變化。冷藏庫那題類別題還是沒有你們,你們就把「食品冷藏庫的溫濕度監測」排進下一個要補的頁面。如果之後也想替「○○感測和國外大廠怎麼選」那題寫一篇比較文,比較表要放哪些條件、查不到的資料怎麼標,可以看比較文寫法。
而你們最後選了 C 工具,因為兩週裡每一次的原始回答和引用網址都查得回來,你們才看得出說法是從哪一頁來的、改了之後有沒有變。
這家公司改官網也很快,因為官網就是你的同事在維護。以我的經驗來看,大部分公司最常遇到的問題,是建議給出去之後,公司裡沒有人可以去改網站,結果這些建議就一直放在那裡沒有動。所以在評估工具的同時,也要先想好看完結果之後由誰來改網站,這部分怎麼判斷,可以看 Otlex 與 GEO 服務怎麼選。
Otlex 也是照這個方式在做。它每天用你設定的題目去問 ChatGPT、Google AI 摘要(AI Overview)、Google AI 模式(AI Mode,Google 搜尋裡可以接著追問的 AI 對話)、Gemini、Grok、Perplexity、Claude,保存每一筆原始回答和引用網址,改完網站之後再用同一批題目比對前後。評估它的時候,也請你用這篇的五個情境來測。
常見問題
GEO 工具評估一定要比較很多家嗎?
不一定。如果你只需要看一兩個引擎、十幾題題目,先挑一家用五個情境測過就夠了。等現有的工具在資料或匯出上不夠用的時候,再多比幾家;而如果你還說不出要工具幫你做什麼,就先把測試題準備好,再約展示。
功能清單上寫有「AI 能見度」,就能看到原始回答嗎?
兩家工具的總分可以直接比嗎?
通常不行。因為題目、引擎、地區、執行時間和計算方式只要有一項不同,兩個分數量的就是不同的東西,就像前面 A 的 72 分和 C 的 41 分,一個用業務預設的題目、一個用你寄去的題目。比較時先把同一題在兩家工具裡的原始回答並排,再看總分有沒有參考價值。
有了 GEO 工具,還要看 Search Console 嗎?
要。Google 在第三方 SEO 工具、服務與建議裡建議,不管用不用第三方工具,都要一起看 Search Console,這是 Google 免費提供、讓網站主看自己在 Google 搜尋表現的工具。
它看得到網站在 Google 搜尋的曝光和點擊,看不到 ChatGPT 怎麼回答你們,所以和 GEO 工具記的是不同的東西,兩邊都要看。
團隊沒有負責內容的人,工具能代替嗎?
沒辦法。工具能整理回答和來源,也能指出可能要補的內容,可是說法正不正確、要改哪一頁、改完由誰上線,還是要有人決定和動手。沒有這個人的話,就要把解讀資料和修改網站另外找人做,不然最後只會得到一份沒有人處理的建議清單。
廠商給的成功案例可以參考嗎?
可以當成追問的線索。你可以接著問:當時用了哪些題目、追了多久、改了哪些頁面,以及能不能看到修改前後的原始回答。這些都拿不到的話,你知道的就只是廠商講的一個故事,而故事裡的網站、題目和市場也都和你的不一樣。
參考來源
各家工具的方案、引擎、資料保存期限與匯出方式都以官方頁面和你自己的試用帳號當下為準。
