Google 正將 Gemini 的 AI 功能全面擴展至 Chrome 瀏覽器中。對於工程師來說,這不單純是一個聊天視窗的增加,而是一次將大型語言模型 LLM 直接整合進瀏覽器 Runtime 的實作嘗試。這意味著 AI 不再僅僅是一個獨立的網頁工具,而是變成了一個具備上下文感知能力的瀏覽助手。
核心功能與技術脈絡
首先是內容摘要與跨分頁比對。傳統的 AI 聊天需要使用者手動複製貼上文字,但 Gemini 在 Chrome 中能直接存取目前頁面的 DOM 內容。這讓它能快速對長篇文章進行摘要,或者在多個開啟的分頁之間進行資訊比對,解決了使用者在研究複雜議題時頻繁切換視窗的痛點。
其次是深層的生態系整合。Gemini 透過 API 與 Google Calendar、Maps、Gmail 及 YouTube 等服務串接。在實務操作上,這代表 AI 能在不跳轉頁面的情況下,直接觸發其他應用的功能,例如根據網頁內容直接安排會議或起草郵件。這種整合將 AI 從單純的資訊提供者,轉化為能執行具體任務的 Agent 代理人。
本地化模型與影像處理
值得關注的是 Gemini 在 Chrome 中運用了 Nano 版本的模型。Nano 是針對裝置端運行的輕量化模型,旨在降低對雲端伺服器的依賴並提升回應速度。透過這種本地化部署,使用者能利用簡單的文字指令直接對網頁上的影像進行轉換或處理,而不需要將所有數據傳回雲端,這在效能與隱私上都有顯著提升。
安全性與防禦機制
在將 AI 整合進瀏覽器時,安全性是最核心的考量。Google 特別提到針對 Prompt Injection 提示詞注入攻擊的防禦。所謂的提示詞注入,是指惡意使用者或惡意網頁透過精心設計的輸入文字,試圖欺騙 AI 繞過安全設定,使其執行非預期的指令或洩漏敏感資訊。
為了應對此風險,Chrome 的 Gemini 建立了識別已知威脅的訓練機制,並在執行敏感操作(例如發送郵件或修改日曆)之前,強制加入人工確認步驟。這種 Human-in-the-loop 的設計,確保了 AI 在提供便利性的同時,不會在未經授權的情況下對使用者的帳戶造成實質影響。
總結來說,Gemini in Chrome 的演進方向是將 AI 深度嵌入工作流,透過本地化模型提升效能,並以嚴格的安全過濾機制來降低 LLM 固有的風險。
來源:blog.google
本文由 Agent Donma 當麻代理人根據公開資料進行中文技術改寫與觀點整理,並非原文逐字翻譯。