Google Gemini 圖片 AI 辨識的 6 種應用案例，用手繪圖寫出簡單網頁

作者：


Google Bard AI 助理昨天又有了許多的更新，其中一個很讓人期待的是支援「 Google 應用服務外掛」，讓 Bard 助理可以連結我們的 Gmail、雲端硬碟、地圖等等不同 Google 符合，產出像是找出文件並改寫、連結地圖與航班工具完成旅行規劃等等任務。不過，這個看起來很厲害的功能，目前只有英文版可以使用。但中文版的 Google Bard 用戶也有一個值得試試看的更新，就是支援中文的「上傳圖片進行 AI 分析處理」的功能。

今天這篇文章，就來試試看 Google Bard 中文版的「上傳圖片進行 AI 分析處理」功能，可以有哪些應用方式，有機會達成什麼樣的效果。

基本上，辨識圖片的功能其實就是行之有年的 Google Lens 智慧鏡頭，所以我們理所當然可以想像能辨識出圖片中的文字、圖像。而當跟 Bard AI 生成結合，這些辨識出的內容可以延伸做出哪些更進一步的整理呢？

如果想了解 Google Bard 幾種關鍵功能與應用方式的朋友，歡迎參考：

（2023/10/15 更新，ChatGPT 現在還可以圖片、文字混合提問，而且效果更好：ChatGPT 圖文混合提問 9 種超能力：程式、教育、學習到行銷應用）






1. 圖片文字 OCR，中文手寫也能辨識

之前 Google Bard 圖片上傳功能只支援英文版，現在開始中文版也能使用，理所當然的，就能用 OCR 去辨識圖片內的中文文字內容。

例如我可以上傳一張公告圖檔，請 Bard：「整理現在上傳的這張圖片中的文字內容。」

如果這張圖片內的文字沒有太多變化的版面，基本上可以很快速完整的辨識出來。（這樣的 OCR 工具也很多，例如：節省從影片圖表複製翻譯資料時間，桌面端 Google 智慧鏡頭超活用）




而簡單的中文手寫筆記，只要夠清晰、結構不複雜，也能順利辨識出內容，還能請 AI 幫忙直接整理。





2. 把流程圖圖片整理成文字大綱

如果是比較複雜的流程圖「圖片」，有辦法利用 Google Bard 進行辨識嗎？這邊如果要 Bard 直接整理圖片上的流程圖，會很容易失敗，但可以分成兩步驟來做。

先單純辨識文字：「辨識下面這張流程圖圖片中的所有文字內容，並列出所有文字。」




然後請 Bard 用 AI 把散亂的文字重新整理成大綱：「根據流程圖把上述文字整理成大綱清單。」

不過太複雜的流程圖，辨識文字有一定難度外，也很難整理成有條理的大綱。





3. 看圖說故事，用照片寫出文章

Google Bard 目前似乎不允許上傳有人物的照片去做分析，但其他內容可以。

這時候，我們可以試試看請 Bard 根據圖片來寫出一段介紹：「根據這張圖片，撰寫一篇旅行文章。」





4. 根據手繪圖片，設計簡單網頁程式碼

還有一個有趣的利用，我們可以試試看手繪出一個簡單的網頁版面，請 Google Bard 分析圖片後，寫出網頁程式碼。

當然，目前 Bard 還無法進行很複雜的版面分析與設計，但像是下圖這樣的結果，是可以順利產出的。






5. 照片內容分析，介紹動植物或產品

原本的 Google Lens 智慧鏡頭就可以一定程度的辨識照片中的動物、植物、產品，現在這個功能結合到 Google Bard ，我們就可以在辨識出照片內容後，再請 AI 進行進一步的分析與介紹。





6. 描述需要的圖片情境，讓 Bard 幫你找出來

而且現在 Google Bard 除了可以上傳圖片進行 AI 辨識分析，也可以在回答時顯示圖片。

所以或許我們可以這樣問：「我需要一張可以呈現"在辦公桌上專注工作"的圖片。」

這時候 Bard 就會根據這個邏輯去找到有適合內容情境的圖片檔案，這背後也是包含了圖片內容分析的技術。




Google Bard 這一系列更新，確實有不少特別的功能，而且目前都是免費帳號即可應用。

不過實際使用上， Bard 在提問與回答上相較於 ChatGPT ，還是比較無法處理一些複雜有邏輯的任務生成。所以基本上我還是主要使用 ChatGPT 作為 AI 助理，特別情況下才會 Google Bard 獨有功能來解決問題，就像這篇文章提到的圖片辨識與延伸內容生成需求時。



大家好，我是電腦玩物站長 Esor ，歡迎參考我的系列課程與書籍：


我的電子郵件是 esorhjy@gmail.com ，如果你有任何關於筆記術、時間管理、提升工作效率的問題，歡迎寫信跟我討論。

（歡迎社群分享。但全文轉載請來信詢問，禁止修改上述內文，禁止商業使用，並且必須註明來自電腦玩物原創作者 esor huang 異塵行者，及附上原文連結：Google Bard 圖片 AI 辨識的 6 種應用案例，用手繪圖寫出簡單網頁）

文章分類：
電腦玩物站長 Esor （異塵行者），在電腦玩物上的文章有別於單純的軟體和服務介紹，而是更強調軟體和服務背後的數位工作思維及方法，並說明實際應用後帶來的生活改變。著有《電腦玩物站長的筆記思考術》、《大腦減壓的子彈筆記術：用Evernote打造快狠準系統》、《比別人快一步的Google工作術：從職場到人生的100個聰明改造提案》等暢銷書籍。

留言

  1. harmonica2nd2023年9月21日 下午3:46

    以一樣的做法上傳圖片要求擷取文字，只得到「我是語言模型，沒有能力幫這個忙。」不知道是否為選擇性開放試用新功能

    回覆刪除
  2. 匿名2023年9月27日 下午3:56

    可以用簡單的圖片, 用AI轉換成網頁程式碼,很方便!謝謝分享!

    也歡迎逛逛我的網站:
    https://hk-computer-repair.com/

    回覆刪除

張貼留言

為了避免垃圾廣告留言過多，開始測試「留言管理」機制，讓我可以更容易回應讀者留言，並更簡單過濾掉廣告，但只要不是廣告留言都會通過審核。

這個網誌中的熱門文章

全家沖印、 7-11 列印照片誰好用？立可得與 ibon教學+比較表

作者：
圖片
現在大家照片都儲存在數位手機、相機、硬碟或雲端，數位欣賞與分享很方便。但有時候就是需要拿到「實際照片」，例如： 小朋友學校的勞作作業 想要製作家庭相框 用照片來當小禮物 把照片貼在紙本手帳上 這時候，有什麼方法可以快速把數位照片「洗」成實體照片？而且最好能不花時間、立即拿到、價格也不貴呢？ 如果家裡沒有印表機（或是沒有好的印表機），又不想跑照相館，那麼這時候 「便利商店」同樣也提供了印照片的服務 ，而且價格不貴，可以立即拿到，操作流程也十分簡單。 之前我在電腦玩物分享過：「 不需買印表機也免隨身碟， 7-11 全家雲端列印超方便教學 」。這篇文章則從印照片出發： 同樣的不需買印表機、不需隨身碟，就能快速印出高品質的照片成品。
........................繼續閱讀全文內容

Google Maps 我的地圖完全教學！規劃自助旅行攻略

作者：
圖片
在之前寫完「 善用 Google 航班搜尋找出理想便宜機票的 10 個技巧 」一文後，我想繼續挖掘 Google 幫我們規劃自助旅行的潛力。 今天這篇文章，就深入的來聊聊 Google 的「我的地圖」服務，這是一個可以讓我們「自訂地圖」的工具 ，在地圖上任意繪製地標、路線，對商務需求來說可以打造出一張一張資料地圖（例如我之前在製作一本新書時建立的「 台灣推薦空拍地點地圖 」），對生活需求來說，則可以讓我們規劃自助旅行路線！ Google 「我的地圖」在規劃自助旅行路線時可以解決許多問題： 國外地點名稱地址常常難懂，用自訂地圖就能自己取一個好辨識的名稱。 在規劃路線之外，自訂地圖還能補充許多旅遊圖文資料，讓這張地圖就是旅遊手冊。 好看的自訂地圖一方面旅行時帶來好心情，二方面事後就是最好的旅遊回憶之一。 自訂地圖還能跟朋友共享合作，讓彼此都能在手機上查看這次旅行地圖。
........................繼續閱讀全文內容

Slack 完整教學與上手心得：找到正確的團隊溝通之道

作者：
圖片
你聽過或用過 Slack 嗎？過去一年， Slack 這一個團隊通訊平台服務不僅在國外爆紅，在台灣我也看過好幾個創業團隊使用 Slack 來做公司內部的訊息管理，到底 Slack 有什麼魅力？它是不是比起 LINE 或 Facebook 或 Email 更能有效率的管理團隊溝通呢？我自己今年也有機會在一個專案合作中使用了 Slack 一段時間，我覺得它吸引人之處有三點： 1. 「 很有趣 」： Slack 裡擁有跟 LINE 或 Facebook 一樣易於讓公司同事聊天打屁、傳送有趣影音圖文的功能。 2. 「 有效率 」：但是 Slack 的頻道、群組機制讓茶水間的聊天，不會干擾工作的討論，並且星號與釘選功能讓每個同事可以從聊天中記錄重點。 3. 「 有彈性 」： Slack 的架構可以讓每一個團隊設計出符合自己需求的通訊平台， Slack 的軟體則讓同事可以在任何地方和公司保持聯繫。 如果你需要中文版的同類平台，可以參考： JANDI 高效率團隊通訊平台完整教學，比 Slack 更適合中文用戶 。 2017/3 新增 ： Sortd for Slack： 改造 Slack 討論串介面變成專案任務排程看板
........................繼續閱讀全文內容

Google NotebookLM 免費中文 AI 筆記實例教學，老師、學生、創作者利器

作者：
圖片
Google NotebookLM 是一個以 AI 筆記本為概念的線上生成式 AI 問答工具。和 ChatGPT 、 Copilot 不同的是， Google NotebookLM 「相對」不會憑空生成內容，也不是上網找答案，而是結合文件資料庫 AI 分析功能（透過  Gemini Pro  分析我們的知識庫），幫助我們根據自己上傳的大量筆記、文件，生成有明確引用的論文摘要、報告企劃、文章大綱。 相較之下很適合自己已經有足夠資料，只是需要 AI 協助分析與輸出的人，例如老師規畫課程、學生製作報告、研究者撰寫論文、創作者撰寫草稿來使用。
........................繼續閱讀全文內容

畫張圖說得更清楚！ Napkin 用 AI 幫你的簡報文章手繪視覺思考圖

作者：
圖片
今天要跟大家介紹一個很有意思，也可能對老師、創作者、常做簡報的職場工作者很有幫助的 AI 工具：「 Napkin （餐巾紙）」，這是一個 AI 會根據我們提供的文字，創作手繪圖表、圖解、圖說的線上工具。 為什麼叫做 Napkin（餐巾紙）？如果你看過可以說是簡報經典著作的《簡報 Show and tell》、《餐巾紙的背後》作者丹‧羅姆（Dan Roam）系列書籍，你應該就能心領神會。
........................繼續閱讀全文內容

Google 表單自動關閉回覆教學：時間人數到達就過期

作者：
圖片
Google 表單，是 Google 雲端硬碟裡用來製作線上問卷調查的免費工具。 愈來愈強大、愈來愈漂亮的 Google 表單，可是設計出各式各樣擁有專業問題、滿足特殊調查需求的精美問卷，如果你還不知道怎麼活用他的基本功能，那麼一定要參考下面三篇我在電腦玩物中所寫的一系列教學，從基本功能到隱藏功能，會帶你上手這個好用的工具： 設計問卷調查快速免費，新版線上 Google form 表單教學 不再只有醜醜範本！如何幫 Google 表單美化背景外觀？ Google 表單的 10 個專業問券調查設計秘密教學  也因為寫了一系列實用的 Google 表單教學，所以很多朋友來問我： Google 表單還能不能滿足某某個需求？ 而其中被詢問度最高的就是：「 可不可以讓 Google 表單 自動關閉回覆 ？時間過期了問卷就關閉，填寫人數到達限額了就自動停止。 」如果可以做到，那麼 Google 表單甚至可以用在報名表、抽獎表之類的應用了。好消息是，這個問題有解了，今天開始 Google 表單可以做到限期、限額自動關閉回覆的功能囉！ 2017/8/31 新增 ： 自動移除額滿選項！ Google 表單報名購物限制數量最簡單教學
........................繼續閱讀全文內容

為什麼大家愛用 Trello ？最佳整理教學讓事情井然有序

作者：
圖片
這幾年看到身邊許多的創業團隊、學校社團、辦公室裡的部門，或是個人在需要專案管理、生活管理時，選擇了一個叫做「 Trello 」的雲端服務，這到底是一個什麼樣的管理工具，讓這麼多人都愛用 Trello ？在電腦玩物上，我也從旁敲側擊的角度，寫過幾篇「 Trello 概念」的管理教學文章： 把 Evernote 當作 Trello！ Kanbanote 筆記看板管理法 Google Drive 變身 Trello ！幫雲端硬碟建立專案看板 但是，我自己也一直使用著 Trello ，卻還沒有在電腦玩物上寫過一篇完整的介紹！雖然錯過了幾年前第一時間推薦 Trello 的時機，但在這段時間的使用經驗下，剛好可以讓我整理沉澱自己的使用方法，歸納出「 為什麼值得試試看 Trello 的關鍵特色 」，然後轉化成這篇文章深入淺出的 Trello 上手教學。 2015/6/13 新增： 免費專案管理軟體推薦！困難計畫簡單管理 13 種工具 2016 年新增 ： 如何將 Trello 切換到繁體中文版？網頁 App 全中文化 2016/7/7 新增 ： 如何活用 Trello 記帳？我的理財計畫心得與看板範本 2016/7/13 新增： 如何將網頁資料快速剪貼到 Trello？收集專案資料技巧 2016/8 新增： Trello 開放「強化功能」讓免費用戶串聯 Evernote 等雲端服務 2016/8 新增 ： Trello 卡片自訂欄位密技！最想要的強大 Trello 客製化範例教學 2016/11 新增： [時間技客-7] 重要緊急時間管理四象限在 Trello 活用與範本下載 2017/2 新增 ： Trello 團隊如何使用 Trello？ 8個專案排程協作重點技巧 2017/6 新增： 如何用 Trello 規劃自助旅行？我的 Trello 行程計畫使用技巧教學 2017/7 新增： 如何讓 Trello 列表與卡片不再落落長？專案管理的5個關鍵技巧 2017/8/23 新增 ： 如何用 Trello 做子彈筆記？我的 Trello GTD 方法範例看板分享
........................繼續閱讀全文內容

Miro 遠距工作開視覺會議的免費強大白板，專案圖解實例教學

作者：
圖片
團隊一起開會討論專案規劃、產品設計， 為了把大家的想法表達得更清楚，需要將各種思考視覺化，把各種計畫圖解化。 例如用 心智圖 展開專案流程，用 系統思考法 釐清專案關鍵環節，或是畫一張 商業模式精實畫布 。 面對面開會時，我們可以在會議室的大白板上，畫出這些圖解。 但如果想要遠距工作、遠端會議，這時候，就可以利用「線上協同合作的白板工具」 。這類遠距視覺會議的工具其實也不少，我之前介紹過的簡單版工具就有： Witeboard 世界上最簡單快速的協同合作白板，開會上課利器 Awwapp 觸控靈敏線上共用白板，免註冊電腦平板手機立即可用 但說到功能強大，可以滿足各種視覺會議的圖解需求，就不能不提到： 「 Miro 」這個線上視覺圖解白板工具。
........................繼續閱讀全文內容

最簡單養成習慣方法是「解決問題」，不靠時間表、獎懲與意志力

作者：
圖片
要持之以恆並非一件容易的事，先不說長時間的堅持往往強人所難，光是要每天重複一樣的行動、相同的規律，難道不會覺得膩？這時候一旦新鮮感淡去，剛好遇到其他事物的干擾，或者自己偶爾處在懶洋洋不想動的低潮中，那麼這件事情就很容易開始拖延下去，而想要養成的習慣也往往中斷了。
........................繼續閱讀全文內容

Excalidraw 免費 AI 生成流程圖，一鍵畫出知識圖表、專案流程、寫作大綱

作者：
圖片
用一句話簡單提示主題，就能透過 AI 生成一幅流程圖。或是提供基本的想法大綱，一鍵請 AI 畫出可接續修改的流程圖草稿。於是「老師」可以快速生成教學用的 知識圖表 ，「軟體工程師」快速畫出 技術開發架構圖 、「管理者」獲得 專案流程圖 與 商業決策分析圖 、「行銷人員」製作 活動企劃流程表 、「創作者」也能立即獲得視覺化的 寫作大綱 或 故事線草稿 。上述的應用情境，在 「 Excalidraw 」 這款線上流程圖工具中已經可以實現，他加入了「Text to diagram 」AI 功能，幫助我們透過簡單文字，快速生成複雜的流程圖表，生成草圖後還可繼續手動修改。
........................繼續閱讀全文內容