10月17日，微軟宣稱要讓每一台Windows 11電腦都變成「真正的AI PC」。通過全面升級Copilot功能，人機互動體驗更自然，AI的表現更聰明。微軟此次升級包含三大核心功能：
● 新的「Hey, Copilot」語音喚醒功能，用戶可直接通過語音下達指令。
● 全球上線Copilot Vision，讓AI能夠"看見"並理解屏幕上的內容，並提供幫助。
● 預覽階段的Copilot Actions，支持AI助手直接在PC上執行任務。
這次重大升級標誌著一項戰略賭註：從單純追求處理性能，轉向打造智能化的對話式交互體驗。微軟希望讓每一台Windows 11設備都成為這一新範式的載體，同時通過Copilot連接器整合Gmail等第三方服務。
01 無需動手，語音成為核心交互方式
微軟官方表示，正全力推動語音成為繼鍵盤、滑鼠之後的核心PC交互方式： 隨著「Hey, Copilot」喚醒功能的全面開放，用戶無需再點擊圖標，直接說出喚醒詞即可開啟與AI的對話。系統會以麥克風圖標和提示音回應，確認用戶處於聆聽狀態。結束對話同樣簡單：既可以說「再見」，也可以直接停止說話。
微軟認為，這一設計消除了傳統語音助手的使用門檻，是微軟將AI帶給更廣泛用戶的關鍵舉措。雖然這並非微軟首次涉足語音交互領域，但該公司相信，基於現代AI技術打造的智能助手將能打破用戶與電腦對話的心理障礙，實現以往未能達成的使用習慣變革。微軟內部數據顯示，使用語音與Copilot交互的頻率是純文本輸入的兩倍。
02 一個能「看懂」屏幕的AI助手，安全性能也高了
微軟表示，正在為其AI未來圖景添加一個關鍵組件：能夠「看懂」屏幕的Copilot Vision。這項功能現已全面上線，讓AI首次具備了真正的視覺能力，它可以實時分析和理解用戶屏幕上的內容，並在任何應用程式中提供精準的上下文幫助。
微軟此前曾推出名為Recall的功能，旨在通過持續截圖記錄用戶操作，幫助用戶回溯和找回過往內容。然而，這項功能自發布以來便陷入隱私爭議。由於用戶無法對截圖內容進行精細篩選或控制，所有操作皆被默認記錄，因此被認為「監視工具」。
此次微軟吸取了Recall的教訓，Vision採取了更謹慎的隱私保護策略。該功能默認關閉，用戶需要在每個會話中主動點擊獨特的「眼鏡」圖標授權，才能啟動屏幕共享。這種設計類似於Teams會議中的視圖共享，確保用戶對隱私的完全掌控。
一旦啟用Vision功能，系統將具備實時分析屏幕內容的能力。該功能可提供軟體操作的分步指引、協助排查系統問題，並能針對屏幕顯示內容進行解答。
並且，Vision應用範圍已從早期的單一程序支持擴展為"桌面共享"模式，現在可以識別並理解用戶跨多個應用程式窗口的完整操作流程。
微軟Copilot團隊這樣描述其工作原理：「當你共享桌面或特定窗口時，Copilot就能看到你所看到的一切，並實時與你討論其中的內容。」
這項技術的應用場景極其豐富：從為創意項目提供建議、幫助優化簡歷內容，到指導玩家掌握新遊戲技巧等等。其「高光指引」功能尤為實用，能夠直接在屏幕上用視覺方式標出需要點擊的位置。
不過需要注意的是，Vision目前僅具備「觀察」和「建議」的能力，無法直接代表用戶作業系統。執行操作的任務由專門的Copilot Actions負責。為了滿足不同用戶習慣，微軟還在開發純文本交互模式，讓不喜歡語音的用戶也能享受這項服務。
03 向「智能體」演進：Copilot Actions開始接管PC
在本次更新中，面向本地文件的Copilot Actions功能具有革命性的意義，它讓AI首次能夠在用戶PC上直接執行多步驟操作任務。這標誌著AI正從被動的「助手」向主動的「智能體」演進，它不再只是響應用戶指令，而是能夠主動為用戶完成工作。
這一突破讓Copilot變成了微軟所稱的「通用智能體」。現在的Copilot不僅能回答問題，更具備了實際操作能力，比如打開應用、輸入文字、滾動頁面，甚至執行複雜的多步驟任務。
用戶只需用日常語言描述需求，比如「幫我整理上個月度假的照片」或「從這份PDF里提取所有數據」，智能體就會嘗試通過與桌面和網絡應用的交互來完成任務。
當智能體在後台默默工作時，用戶可以繼續專注於其他事務。更重要的是，用戶始終掌握著控制權，隨時可以查看任務進度、審查智能體已執行的具體操作，或者在任意時刻中斷任務、親自接管。
04 當Xbox遇見AI遊戲夥伴 升級娛樂體驗微軟此次升級不僅限於辦公或提高生產力領域，該公司也在探索AI如何融入娛樂體驗。
例如在手持遊戲設備領域，通過ROG Xbox Ally和ROG Xbox Ally X，微軟將兩種看似不相干的技術——便攜遊戲與人工智慧助手，巧妙地融合為一體。
除了能夠快速訪問來自Xbox、PC Game Pass及其他主流遊戲商店的內容，用戶現在還可以直接與Copilot對話。
只需長按設備上的「庫」按鈕，即可喚出微軟的自由行戲助手——Gaming Copilot。它能在遊戲過程中實時提供攻略推薦、操作技巧與場景解讀，而玩家無需退出當前遊戲，也無需切換屏幕。
總而言之，微軟正在將其AI PC定位為值得信賴的助手和夥伴。 微軟執行副總裁尤素夫·梅赫迪(Yusuf Mehdi) 表示：「我們希望每位用戶都能體驗到，擁有一台不僅僅是工具，而是真正夥伴的PC意味著什麼。」
