在AI語音客服領域的一個關鍵技術障礙——延遲和不自然的對話體驗,終於被打破。人工智能電話支持公司 Phonely、推理優化平臺 Maitai 以及芯片製造商 Groq 三方聯合,打造出一套可實時切換模型、響應快如人類的電話AI系統,推動語音AI進入“擬人新紀元”。

據披露,通過此次合作,Phonely 的響應速度提升超過70%,AI對話準確率從81.5% 提升至99.2%,超越 GPT-4o 的94.7% 基準。這一成果來源於 Groq 的“零延遲 LoRA 熱插拔”技術,通過 Maitai 的動態編排平臺,可在多個微調模型間無縫切換,無需重新訓練,也不會增加延遲。

AI客服 AI語音

Groq 的芯片專爲語言推理設計,其 LPU(語言處理單元)與流式架構、高速片上內存等技術,使得模型能在亞秒級內響應。“首個響應令牌時間”由661ms 降至176ms,整體完成時間從1,446ms 縮短至339ms,AI電話幾乎無法與真人區別。

Phonely CEO Will Bodewes 表示:“70%以上的用戶無法分辨我們系統裏是 AI 還是人類。延遲感曾是最明顯的標誌,如今已幾近消失。”

效果顯著,僅本月 Phonely 就幫助一家客戶替換掉了350位人工坐席。得益於快速部署能力,企業無需改動API即可在一天內完成遷移上線,並在一週內看到性能飛躍。

這場合作不僅提升了客戶服務體驗,也象徵着企業AI趨勢的轉變:從追求“大而全”的通用大模型,走向更快、更準、更靈活的多模型微調系統。Maitai 創始人 Christian DalSanto 表示:“我們相信企業AI的未來,將由專用模型組成的精細系統主導,而不是孤立的單一巨獸。”

對於企業而言,這不僅僅是性能的提升,更是成本結構的顛覆。無須排班、培訓和管理龐大的客服團隊,AI客服成爲更優解。而 Groq 與 Maitai 提供的低延遲、高可控的架構,也爲 AI 在保險、法律、汽車等領域大規模部署掃清了障礙。

此番突破證明,技術“恐怖谷”並非無法跨越。Phonely、Groq 與 Maitai 的合作不僅爲語音AI提供新範式,也預示着傳統客戶支持產業即將面臨劇烈轉型。語音AI的時代,已經提前到來。