AI 會議記錄怎麼做?從錄音、逐字稿到交辦,工具與資料去向怎麼選

AI 做會議紀錄要過三關:錄音、轉逐字稿、整理成待辦。我們用一場虛構的中文週會實測本機 Whisper 與三個開源模型,記下錯在哪裡,也整理雲端工具的紀錄放在哪。

先說結論

AI 會議記錄分三段:錄音、轉成逐字稿、整理成決議與待辦。用 Microsoft 365 的公司先看 Teams 會議回顧,它支援繁體中文,錄音存在公司的 OneDrive;Google Meet 的「幫我做筆記」目前不支援中文。我們實測本機 Whisper 加開源模型,數字多半轉對,人名和縮寫常錯,負責人也會派錯,寄出前要有人核對。

淺色木桌上一台芥末黃的小型卡帶錄音機,右邊三疊空白卡片分別用黑色、淺藍色、芥末黃的長尾夾夾著,前面一支鉛筆,桌角有咖啡杯和盆栽
AI 會議記錄怎麼做?從錄音、逐字稿到交辦,工具與資料去向怎麼選 封面視覺

舉個例子。一家做冷凍水餃的公司,週一早上業務、生產、客服三個人開週會,四、五分鐘談完年節禮盒的訂單、紙盒報價和上週的退貨。散會後,主持會議的業務還要花半小時把紀錄打出來寄給大家,裡面有七件事要有人去做。

AI 會議記錄想省的就是這半小時。問題是,AI 整理出來的待辦,能不能直接寄出去?我們把這場週會寫成劇本、錄成音檔,交給本機的語音辨識和三個開源模型實際跑了一遍。數字和日期大多是對的,出錯的是名字、縮寫,還有誰要做什麼。

這篇談的是一場會議怎麼從錄音走到交辦。要替全公司挑哪一家的 AI 助理,是另一個決定,可以先看企業版 AI 助理怎麼選。

AI 會議記錄在做哪三件事

不管用哪個工具,AI 做會議紀錄都是三段:先把聲音錄下來,再轉成逐字稿,最後由語言模型整理成決議、待辦和還沒決定的事。有些產品三段包在一起,按一個鍵就交出摘要;有些要自己接,例如手機錄音、上傳到一個服務轉文字、再貼給另一個 AI 整理。

環節在做什麼常見的錯要先決定的事
錄音收進每個人的聲音只錄到自己的麥克風,線上會議戴耳機時對方的聲音進不來誰按錄音、開場怎麼告知與會者
轉逐字稿把聲音轉成文字,最好分出誰說了哪句人名、客戶名、產品名、英文縮寫轉錯;沒有分講者用哪個語音辨識、支不支援中文
整理從逐字稿抓出決議與待辦漏掉、派錯人、把「下週一」換成錯的日期誰在寄出前核對

三段的資料也各自流到不同地方。錄音檔可能留在手機、留在會議系統、上傳到雲端後刪除;逐字稿和摘要則跟著存放的服務走。選工具之前,先把這三段各會經過哪裡寫下來,後面談同意和保存時才講得清楚。

先看公司在用的會議系統

會議如果本來就在 Teams 或 Google Meet 上開,第一步是看系統內建的功能能不能用;實體會議或要跨系統,才考慮另外的錄音工具。下表依各家官方說明整理:

做法中文會議要什麼方案錄音與紀錄放在哪分得出誰說的嗎
Teams 會議回顧(intelligent recap)支援,語言清單含繁體中文(台灣)Teams Premium 或 Microsoft Copilot 授權;會議要開逐字稿,AI 摘要要 5 分鐘以上錄音存在公司的 OneDrive 與 SharePoint;組織內受邀的人看得到逐字稿標出誰說了什麼
Google Meet「幫我做筆記」不支援,目前只有英、法、德、義、日、韓、葡、西 8 種;Meet 的逐字稿也是這 8 種符合資格的 Workspace 版本或 Google AI 方案存成召集人雲端硬碟「Google Meet」資料夾裡的文件,依召集人的設定分享—
ChatGPT 錄音模式(Record)說明頁沒有列支援語言,中文要自己試Plus、Pro、Business、Enterprise、Edu;只能用 macOS 桌面 App;單次最長 4 小時錄音轉完就刪;逐字稿與摘要跟其他對話一樣依工作區設定保存可以分辨多位講者
Notion AI 會議筆記支援中文Business 或 Enterprise 方案;每人每天上限 10 小時紀錄是 Notion 頁面;錄音檔預設不保存,工作區擁有者開啟後才存在錄音者的裝置上講者標記目前只支援英文
本機 Whisper+開源模型可以;部分模型的輸出會夾簡體字(見下節實測)一台記憶體夠大的電腦,沒有授權費全部留在這台電腦預設沒有,要另外裝工具

用 Microsoft 365 的公司,Teams 會議回顧最省事:錄音、逐字稿、摘要都在公司自己的環境裡,權限也沿用 Teams 的設定。只要確認授權和逐字稿有開就好。

用 Google Workspace 的公司就麻煩一點。Google Meet 的「幫我做筆記」目前不支援中文,連 Meet 自己的逐字稿也不支援,全中文的會議得另外錄音、交給別的工具轉。ChatGPT 的錄音模式和 Notion 都能做這件事,前者只在 Mac 上,後者要 Business 以上的方案;選哪一個,要看公司原本就在用哪一套、帳號是不是公司統一管理。

我們拿一場虛構的週會實測

2026 年 10 月 15 日,我們在一台 Apple M4 Pro、24 GB 記憶體的 Mac 上做了這個測試。劇本就是開頭那場週會:業務雅婷主持,生產志明、客服佩君一起開,21 句、1,024 個字。我們刻意埋了幾個陷阱:講錯又改口的訂購數量(1,200 盒改成 1,500 盒)、一句帶英文縮寫的話(客人在 IG 留言)、一個只講一次的承諾(志明說最晚 12 月 10 日要生產完),還有幾件只用「我」交辦的事。

劇本用 macOS 內建的三個台灣中文語音分角色念出來,接成一個 4 分 33 秒的音檔。合成語音發音標準、沒有人搶話、也沒有背景噪音,比真實會議好處理得多。所以下面的錯誤率要當成下限看,真人開會多半只會更高。

轉逐字稿:數字多半對,名字和縮寫常錯

語音辨識用的是 faster-whisper,它是 OpenAI 開源語音模型 Whisper 的加速版,在本機用 CPU 跑。我們試了三種大小,另外對其中兩種加上「名詞提示」:一段繁體中文寫的會議背景,列出與會者名字、客戶名、產品名和縮寫。

模型轉 4 分 33 秒要多久字元錯誤率輸出裡的簡體字26 個關鍵詞轉錯
small36 秒11.4%248/1,0506
medium132 秒5.5%6/9275
large-v3-turbo71 秒7.3%242/1,0445
medium+名詞提示125 秒9.8%1/9833(但漏了 49 個字)
large-v3-turbo+名詞提示73 秒7.3%4/1,0454

錯誤率是先把簡體轉成繁體、中文數字轉成阿拉伯數字,再和原稿逐字比。

表格:七句原稿和 faster-whisper medium、large-v3-turbo 加名詞提示的實際輸出並排,轉錯的字標成紅色。客戶名青禾被 medium 轉成清和;韭黃鮮蝦兩個模型都轉成九黃鮮蝦;MOQ 轉成 MART 和 MOV;佩君轉成配君;IG 留言轉成 1 個留言和一留言;turbo 把我已經補寄了轉成我已經不記了;1,200 改 1,500 的更正兩個模型都轉對,turbo 把盒寫成禮 同一段錄音的轉錄對照,紅字是轉錯的地方。

金額、數量和日期幾乎都轉對了。1,200 改口成 1,500、單價 285 元、12 月 18 日交期、11 月 3 日寄試吃品,五次轉錄都沒出錯。錯的是名字:客戶「青禾」變成「清和」,同事「佩君」變成「配君」,「韭黃鮮蝦」變成「九黃鮮蝦」,「MOQ」變成「MART」。這些詞在一般語料裡少見,模型就容易挑一個常見的同音字。

最麻煩的是英文縮寫和意思整個翻過來的句子。「有客人在 IG 留言」被轉成「1 個留言」,加了名詞提示的 medium 甚至轉成「1 月 6 號留言」,平白多出一個日期。turbo 加提示後,把「少一包的那筆,我已經補寄了」轉成「我已經不記了」,意思正好相反。

名詞提示的效果也不一致。turbo 加了提示,簡體字從 242 個降到 4 個,客戶名和佩君都轉對了,志明卻變成「致命」;medium 加了提示反而漏掉一段話,標點變成奇怪的符號。名詞提示有用,但要用自己的模型和錄音試過,不能想當然。

另外,五份逐字稿都是一長串話,看不出哪句是誰說的。faster-whisper 本身沒有講者分辨,要另外接 WhisperX 這類工具。

整理待辦:負責人和期限最容易出錯

接著把逐字稿交給三個在 Ollama 上跑的開源模型:qwen3.5 9B、gemma4 12B、gpt-oss 20B。每個模型吃三種輸入:原稿加上講者名字、原稿不標講者、Whisper medium 的逐字稿。提示都一樣:只寫逐字稿裡有的內容,負責人或期限沒講清楚就寫「未指定」。標準答案是雅婷散會前口頭整理的 7 項待辦。

模型原稿+講者名原稿不標講者Whisper 逐字稿每次耗時
qwen3.5 9B漏掉「回覆客戶」那一項7 項都在,2 項寫未指定漏 1 項;雅婷要寄的試吃品派給了佩君14–16 秒
gemma4 12B7 項全對7 項都在,2 項寫「發言人」7 項都在,名字沿用轉錯的寫法106–147 秒
gpt-oss 20B「週三」「下週一」換成錯的日期期限全加上 2024 年,週三、下週一也換錯2 項派錯人16–19 秒

gpt-oss 用的是 OpenAI 建議的 temperature 1.0。我們一開始用 0,它有兩次在表格裡反覆輸出同一列,其中一次把「雅婷|送試吃品 20 盒」重複了三百多次。

先講做得好的地方。9 份紀錄沒有一份把改口前的 1,200 盒寫進去,也沒有一份把「IG 抽獎,年後再說」列成待辦。模型對「講錯了,是 1,500」這種更正處理得不錯。

問題出在三個地方。第一,9 份紀錄都漏掉同一件事:志明說最晚 12 月 10 日要生產完,因為 12 月 15、16 日工廠歲修。這句只在會議中間講過一次,雅婷最後的整理沒有再提,9 份就全都沒寫。模型抓得到的,主要是被清楚交辦、最好還被複述過的事。

第二是負責人。原稿標了講者,gemma4 七項全對;拿掉講者後,「這個我來寄」的「我」就只能寫成未指定或發言人。這還算老實。用 Whisper 逐字稿時,qwen3.5 和 gpt-oss 都把這件事派給了佩君。我猜是因為接下來幾句是佩君問 SGS 報告、雅婷請她去找,名字剛好就在附近。

第三是日期。逐字稿裡沒有會議日期,只有「週三」「下週一」和「禮拜五,十月十六號」。gpt-oss 自己把它們換成具體日期,週三變成 10 月 12 日、下週一變成 10 月 9 日,不標講者的那一份還全部加上 2024 年。這就是 AI 幻覺出現在會議紀錄裡的樣子:格式整齊、看起來很合理,只是不對。

所以開頭那個問題,我的答案是不能直接寄。AI 整理的待辦可以當草稿,寄出前要有人對過負責人和期限。一場會議、一台電腦、一組設定,只能看出錯誤的方向;換成你們的會議和工具,表現會不一樣,導入前用自己的錄音測一輪最準。

錯在哪一關,就在哪一關擋

照測試裡錯的地方,一關一關補:

  1. 開會時:交辦點名到人、講出日期,散會前由主持人花一分鐘把待辦複述一次。測試裡只講一次的承諾 9 份全漏,最後被複述的七項大多抓到了。開會的人最後花一分鐘複述待辦,比換哪個模型都有用。
  2. 錄音時:線上會議用會議系統內建的錄音,或用能收系統聲音的桌面 App;實體會議把手機放在桌子中間。Notion 的說明就提到,瀏覽器版只錄得到自己的麥克風。
  3. 轉逐字稿時:工具有講者分辨就打開;準備一份名詞表,放客戶名、產品名、同事名字和常用縮寫。要繁體中文輸出,提示就用繁體寫。
  4. 整理時:提示裡寫明「沒講清楚的寫未指定」「期限照原話寫,不要換算」。相對日期留給人換算,模型不知道會議是哪一天開的。
  5. 寄出前:花十分鐘,對照錄音或逐字稿檢查下面五項。
核對項目為什麼要看怎麼查
每項待辦的負責人沒有講者時最常派錯找回交辦那句話,看是誰說「我來」
期限模型會把「下週一」換成錯的日期只留原話,或由人換成日期
數字改口前後的數字都會出現在逐字稿看最後定案的那一次
客戶名、產品名同音字最常出錯和名詞表對一遍
還沒決定的事可能被寫成決議看原話是「先這樣做」還是「等某件事再說」

錄音之前,先講好告知和存放

先講告知。OpenAI 和 Notion 的說明都要求錄音前取得與會者同意;Notion 還能設定在開始轉錄時自動播一段告知語音。有客戶或廠商參加的會議更要先說,開場一句「這場會議會錄音,用 AI 整理紀錄」就夠。

帳號要用公司的。ChatGPT 的錄音轉完就刪,但逐字稿和摘要會留在對話紀錄裡;用個人的 Plus 或 Pro 方案、又開著「改善模型」設定時,這些內容可能被拿去訓練,Business、Enterprise、Edu 工作區則預設排除。員工用個人帳號錄公司會議,紀錄就不在公司的管理範圍內,規範怎麼訂可以看 Shadow AI 與企業 AI 使用規範。

最後是存放與權限:紀錄放在哪、誰看得到、留多久。Teams 的會議回顧只有組織內受邀的人看得到;Meet 的筆記放在召集人的雲端硬碟,由召集人決定分享給誰;ChatGPT 的紀錄跟著工作區的保存設定,刪除對話後 30 天內從系統移除。本機的做法資料都不出門,相對地,錄音和逐字稿就變成那台電腦要自己管理的檔案。本機跑模型的安裝與設定,可以看 Ollama 教學。

從一場例行會議開始

我建議先挑一場每週固定、沒有外部人員的內部會議試三週。這三週照舊有人手寫紀錄,同時讓 AI 也出一份,會後兩份對照,記下 AI 錯在哪一類:名字、負責人、日期,還是漏掉整件事。三週後再決定要不要推到其他會議,以及核對工作交給誰。

如果下一步是讓待辦自動進到專案管理或 CRM,那已經是流程自動化的範圍,先看哪些流程適合交給 AI agent,評估這一段值不值得接。

我們能協助的部分

員工自己用 AI 整理會議紀錄,選好工具、訂好核對規則就能開始。要把會議紀錄接進公司的專案管理、CRM 或報價流程,例如散會後待辦自動開成工單、指派給負責人,才是我們的企業 AI 營運方案處理的範圍:工程團隊從需求診斷開始,把 AI 嵌入既有系統,負責人或期限不明的項目設計成先暫停,交由專人確認再送出。

常見問題

不想付費,可以自己做 AI 會議記錄嗎?

可以。用 Whisper 這類開源語音模型在自己電腦上轉逐字稿,再交給 Ollama 上的開源模型整理,不用授權費,資料也不出門。代價是要自己安裝、自己核對:我們的實測裡,medium 模型轉 4 分半的錄音要兩分多鐘,較小或較快的模型還會夾簡體字,也都分不出講者。

Google Meet 可以做中文的 AI 會議紀錄嗎?

依 Google 目前的說明,Meet 的「幫我做筆記」和逐字稿都只支援英、法、德、義、日、韓、葡、西 8 種語言,全中文的會議用不上。可以另外錄音,再用支援中文的工具轉逐字稿和整理。

AI 會議記錄分得出誰說了什麼嗎?

看工具。Teams 的逐字稿會標講者,ChatGPT 的錄音模式也能分辨多位講者;Notion 的講者標記目前只支援英文;本機的 Whisper 預設沒有這個功能。分不出講者時,「我來處理」這類交辦最容易派錯人,整理出的待辦要人工補上負責人。

會議錄音要先取得與會者同意嗎?

要。OpenAI 和 Notion 的說明都要求使用者錄音前取得同意,OpenAI 也提醒要先確認當地法規。實務上在會議開頭講一句、或用工具的告知語音,讓每個人知道會錄音和用 AI 整理;有外部客戶的會議,最好事先在邀請裡寫明。

參考來源

以下依各家官方說明整理,支援語言、方案門檻與紀錄保存設定以官方頁面當下為準。

從這篇繼續看相關內容

依文章主題整理同站文章、服務/產品與 FAQ 入口,讓下一步有清楚的閱讀方向。

延伸閱讀

下一步

服務入口

了解企業 AI 營運導入

工具試過之後,從需求診斷、系統串接到驗證上線,查看導入的分工與人工審核方式。

查看相關頁面

常見問題

AI agent 的 token 費用怎麼控管?

從限制任務步數、設定月預算到分配模型等級,先看一題直接回答。

查看 FAQ 解答

企業 AI 落地實踐

把文章裡的判斷帶回你的流程

從一個實際工作流開始,與 EthorX 共同釐清 AI agents 的導入起點。