ChatGPT 進階語音對話純測試心得:腦力激盪、即時口譯、冥想教練,台語也能通



ChatGPT 之前讓許多人驚豔的「進階語音模式」功能,今天開始陸續針對 Plus 與 Team 用戶推出。這個模式最大的特色,就是可以用更加自然(接近於真的跟一個人聊天)的對話方式,讓使用者透過語音與 AI 進行交流。相較於舊版的功能,新的語音交談過程更加流暢、AI 反應迅速、接話過程幾乎沒有等待,也能隨時打斷 AI、插入新話題,除了可以支援多國語言在同一個對話中自由切換外,還能讓 AI 模仿或調整各種對話風格等等。

那時候在 OpenAI 推出的官方影片中,這個 AI 進階語音不只是更自然流暢而已,他還可以結合看的功能(攝影鏡頭)來回答用戶問題,或是在語音中辨識出用戶的情感而提供對應的回應,這些跟原本擬人化的語音結合在一起,效果確實令人驚艷。

不過目前的「進階語音模式」功能,似乎還沒有當時影片中「完成體」的樣子,在我實際的測試中,目前的(2024/9/25)的「進階語音模式」有下面這些特點與限制:

  • 優點:
    • AI 的語音回答確實更即時、快速、流暢、更像是兩人同步對話。(不再像是之前需要等 ChatGPT 先生成內容後, AI 才會唸出來)
    • 對話過程中,可以隨時打斷、插入話題,過程都很自然。
    • 對於語調、語速,可以透過對話調整。(也有內建的多種語音風格可以選擇)
    • 支援多國語言,可以在同一次對話中自然切換,可以聽與說閩南語。
  • 限制:
    • 付費版本也會有使用的「時數」限制,每天限量使用。
    • 但目前進階語音功能,還不具備上網搜尋、鏡頭辨識圖像等等功能。
    • 一旦討論串中出現不是語音的問答(例如自己打字提問),這個聊天室就無法再使用進階語音功能(討論串必須全部使用進階語音)。
    • 目前似乎還無法很明顯的辨識對話中的情感,要求做出情緒反應時 AI 還是比較生硬一點。




我測試了幾個 ChatGPT 「進階語音模式」的應用情境,下面跟大家分享「純心得」,之所以叫做純心得,就是因為我沒有時間錄製成影片再剪輯,所以真實過程其實是手機 App 上的語音對話,但我就用事後圖文的結果來說明

舊版本語音對話功能的應用案例:




請 ChatGPT 假裝成採訪者,引導我說出報告與文章草稿:


首先,我之前就嘗試過,利用跟 ChatGPT 進行一來一往的語音對話,一起構思一個企劃案、文章草稿,例如,請 ChatGPT 假裝成一個採訪者,採訪我對某個主題的想法,引導我把想法說出來,最後我就可以把這些內容轉換成報告或文章。

舊版本的時候,其實我就已經覺得滿好用的,只是那時候 ChatGPT 的每一次回應「要等很久」,所以對話過程相對生硬很多。

但使用新版的「進階語音」模式,整個對話討論過程完全不需要等待, AI 幾乎都可以立即回應、接話,而當我發現 AI 說的東西走偏時,我也可以立即打斷他,重新拉回主題。

最大的改變就是整個過程會更迅速,更節省時間,而腦中的想法可以更順暢地說出,更有腦力激盪的感覺。




我喜歡用這種來回對話的方式,把很多想法激發出來。




經過完整的語音討論後,請 AI 統整前面的討論,整理成報告、文章的草稿。

不過,最後這一段我用的是文字的指令,當我這樣做之後,這個聊天室就不能再開啟進階語音模式了





請 AI 當一個冥想、放鬆引導教練,或是語言家教:


其實現在有很多 App 可以做類似的事情,無論是真人還是 AI ,有一個線上家教,透過語音來教我們學習一些事情。

於是我試試看讓 ChatGPT 透過「進階語音模式」,當一個冥想教練。

首先,我先試試看在對話中讓他調整語調。(畢竟冥想教練的語調應該更緩和、舒服一點)




然後我請他當一個冥想教練,透過進階語音模式,引導我進行深呼吸的練習,或是引導我做大腦放鬆,效果還可以,這看起來也是一個適合 ChatGPT「進階語音模式」做的事情。

當然,在這種特別需要情感的情況下,AI 的聲調聽起來還是比真人的語調生硬一點點。




或者,我也請 ChatGPT 透過「進階語音模式」當一個英文家教,帶我練習口說。

相較於舊版本,因為現在對話過程更流暢,所以更有面對面家教的感覺。例如我先跟他說明想要學習的背景,透過討論,我們決定一起來練習旅行中的英文。接著 AI 提示我可以先練習餐廳中使用的英文,於是他先說幾句如何點餐的用語,然後要求我照著念一次,並且會給我即時回饋。

這部分的過程非常順暢也滿有用的,而且可以透過對話隨時調整成自己想要學習的內容,比很多固定的英文學習 App 更好用。






請 AI 當一個即時口譯協助者,支援多國語言:


我也嘗試看看把這樣的「進階語音」當作翻譯工具來使用看看,以後如果有旅行、會議場合,可否幫我更快速、流暢的翻譯雙方溝通的內容呢?

首先,我開啟語音對話後,先做一些設定,請 ChatGPT 充當即時口譯的角色,並告訴他聽到什麼語言時,要口譯成什麼語言。

然後我說了一段中文,他很順暢地直接翻譯成正確的日文內容,當然,是用說的說出來。




然後我嘗試在不同的語言之間切換, ChatGPT 的 AI 語音都可以即時口譯成我需要的另一種語言。




而且當使用台語(閩南語)溝通時,ChatGPT 的 AI 語音也能聽得懂,並且也會用台語回答。






整體來說,昨天初步測試,上述幾個應用情境,對我來說就可以產生很大幫助:

  • 利用 ChatGPT 進階語音模式做腦力激盪,完成報告、文章草稿。
  • 利用 ChatGPT 進階語音模式擔任學習助手,練習外文口說、冥想運動教練。
  • 利用 ChatGPT 進階語音模式做即時口譯,翻譯多國語言內容。

使用 ChatGPT Plus 或 Team 版本的用戶,值得試試看。



大家好,我是電腦玩物站長 Esor ,歡迎參考我的系列課程與書籍:


我的電子郵件是 esorhjy@gmail.com ,如果你有任何關於筆記術、時間管理、提升工作效率的問題,歡迎寫信跟我討論。

(歡迎社群分享。但全文轉載請來信詢問,禁止修改上述內文,禁止商業使用,並且必須註明來自電腦玩物原創作者 esor huang 異塵行者,及附上原文連結:ChatGPT 進階語音對話純測試心得:腦力激盪、即時口譯、冥想教練,台語也能通

留言

張貼留言

為了避免垃圾廣告留言過多,開始測試「留言管理」機制,讓我可以更容易回應讀者留言,並更簡單過濾掉廣告,但只要不是廣告留言都會通過審核。

這個網誌中的熱門文章

畫張圖說得更清楚! Napkin 用 AI 幫你的簡報文章手繪視覺思考圖

Google 錄音 App 內建 AI 轉錄繁體中文語音逐字稿,可中英日切換

全家沖印、 7-11 列印照片誰好用?立可得與 ibon教學+比較表

Slack 完整教學與上手心得:找到正確的團隊溝通之道

Google Maps 我的地圖完全教學!規劃自助旅行攻略

Google NotebookLM 免費中文 AI 筆記實例教學,老師、學生、創作者利器

為什麼大家愛用 Trello ?最佳整理教學讓事情井然有序

微軟 Bing AI 繪圖工具 Image Creator 免費開放,30秒輕鬆生成圖片

ChatGPT o1 會思考的 AI 新舊版實測比較表格:翻譯、摘要、企劃、文案與寫程式

Google 表單自動關閉回覆教學:時間人數到達就過期