AI 科技

Google Gemini 新功能!現在「看得懂」你在螢幕和鏡頭前做的事啦!

大家是不是也常常有這種時候——手機上打開一堆 App,但搞不清楚哪個功能在幹嘛?或是拿著一個東西想問 AI:「欸,這個到底是什麼?」現在 GoogleGemini 終於幫我們把這一塊補上了!

沒錯!Gemini Live 最新上線的功能,讓 AI 開始學會「看」了!

也就是說,它不只會聽你說話、看你打的字,現在連你手機螢幕上在幹嘛、鏡頭前的東西是什麼,它都能即時幫你看懂、分析、甚至給你建議!超神 ✨

AI 能「看」螢幕是什麼意思?

這次更新之後,有些 Google One AI Premium 的用戶,已經可以搶先體驗到「螢幕即時辨識」的功能。簡單講,你只要開著 Gemini,它就可以看你手機上現在的畫面,幫你解釋內容、回答問題

比如你可能開了一個你不熟悉的 App,畫面上很多按鈕不知道幹嘛的時候,就可以問 Gemini:「這個按鈕的功能是什麼?」

等於說,你手機畫面上發生什麼事,AI 一目了然!

你可以問:「這份報表的重點是什麼?」、「這張圖是誰畫的?」甚至:「這封信裡有什麼我需要注意的地方?」

它就會看著你的畫面,直接回答你!是不是很像你手機裡住了一個超懂科技的朋友😎

鏡頭畫面也能辨識!AI 幫你挑顏色都行

除了螢幕,這次另一個超強更新是——Gemini 現在還可以「看」你相機鏡頭拍到的東西

比方說你手上拿著一個模型作品,想塗上顏色,卻不知道哪個顏色最搭,就可以直接打開鏡頭、問 Gemini:「你覺得我該用什麼顏色好看?」

Google 發佈的官方影片 裡,使用者拿著一個剛上釉的陶器作品,對著 Gemini 說:「我想幫它上色,哪個顏色比較適合?」

然後 AI 就會看著你的作品、分析形狀跟光線,幫你給出建議!根本行動設計顧問來著!

然後 Gemini 透過相機鏡頭即時分析陶器的形狀、表面反光、顏色特性,回答:「像這樣溫潤的粉色陶器,我會推薦深紅色或橄欖綠的搭配,比較能產生對比感。」

Gemini 真的能看著畫面幫你「設計配色」,回話的方式也非常自然,完全不像以前那種呆板機器人。

Gemini 領先開跑!比 Alexa、Siri 更快上線的功能

Gemini Live,搶先升級。

Google 這波升級真的搶快,因為 Amazon 的 Alexa Plus 還在早期測試、Apple 的新 Siri 傳出延後發布,Google 卻已經讓 Gemini 可以「看見」了!

而且在很多三星手機上,Gemini 早就已經是預設的 AI 助理,根本是 quietly eating everybody’s lunch(默默稱王 😆)。

怎麼用?目前僅開放 Premium 訂閱者使用

目前這個功能只開放給 Google One 的 AI Premium 用戶,也就是有用「Gemini Advanced」版本的用戶。如果你有訂閱,可以去試試看這個新技能是不是已經解鎖!

還沒用到的朋友也不用急,依照 Google 的習慣,這些功能很可能會逐步擴大開放,或是之後整合進更多裝置裡。

小結一下:

  1. Gemini Live 的「即時視覺辨識」功能真的很有感:
  2. 看懂你手機畫面,幫你分析、解說
  3. 看懂你相機拍的東西,直接互動、建議
  4. 對話式互動完全不尷尬,像在跟人聊天一樣自然
  5. 目前限定 Google One AI Premium 訂閱用戶

你會想讓 AI 看你手機畫面,幫你做什麼?留言跟我分享你會拿來做什麼~

我自己最想讓它幫我看我買的家具適不適合家裡擺!

如果你也想試試看,可以到 Google AI Studio 看看有沒有開通喔!

延伸閱讀》

Recent Posts

iOS 27 郵件 App 七項新功能整理:寫信、收信、管理全面升級,也更懂你的使用情境

伴隨 iOS 27 迎來 Apple Intelligence 與 Siri AI 的全新改版,內建的「郵件 App」也同步加入 7 項實用新功能;從搜尋郵件、...

1 小時 ago

AI 怎麼用?給從沒用過的新手教學,5 分鐘馬上能幫你做事的基礎入門課

你可能常聽到身邊的人說「這丟給 AI 就好了啊」,但自己從來沒用過,也不知道從哪裡開始。其實現在的 AI 工具不用下載、不用學任何指令,打開網頁就能用;而它最有...

6 小時 ago

Apple BTS 2026 台灣開始時間為何?預計最快本週或延到 8 月初登場

不知道是不是因為受到記憶體、儲存元件等成本飆升影響,導致今年 Apple BTS 活動暫緩推出;如今 7 月中都還沒看到半點風聲,外界都好奇今年是否還有 App...

8 小時 ago

Pixel 11 Pro Fold 新色曝光!Google「Pine」綠登場,機身更薄、相機模組也改

Google 摺疊手機 Pixel 11 Pro Fold 再度提前曝光,這次重點是全新「Pine」配色,以及更俐落的相機模組設計。從最新流出的渲染圖來看,Go...

10 小時 ago

Claude Fable 5 免費使用再延長至 7/20,Claude Code 額度加碼同步續期

Claude Fable 5 免費使用期限原定是到 7/12,相信各位應該也在上週把握機會用好用滿;但沒想到 Anthropic 稍早宣布 Claude Fab...

12 小時 ago

2026 普發一萬最新進度:地方振興金登記、領取方式、資格一次看

目前網路討論的政府普發現金資訊,至少可分成三種:上一輪中央全民普發 1 萬元、立法院正在審查的新一波「國民支援金」,以及各縣市、鄉鎮自行推出的地方振興金。 先說...

13 小時 ago