隨著 Windows 11 變成人工智能操作系統,微軟 Copilot 老闆不明白人工智能為何表現不佳

Enda

微軟人工智能首席執行官 Mustafa Suleyman 最近發佈於 X,他說當人們稱當今的人工智能“平庸”時,他覺得很有趣。蘇萊曼回憶起在諾基亞手機上玩貪吃蛇的經歷,他堅持認為與“超級智能人工智能”的流暢對話應該令人興奮。

但從他帖子下的回復來看,人們並沒有和他一起笑。他們很沮喪。最受歡迎的評論是關於微軟如何積極地將人工智能注入 Windows 11 的每個角落。人們喜歡人工智能解決他們的問題,而不是當它成為問題時。

而這正是微軟正在失利的地方。 Windows 上的人工智能並沒有給人留下深刻印象,因為模型不夠強大。這是因為副駕駛總是出現在不屬於它的地方。微軟一直將該操作系統視為 Copilot 的促銷工具。

儘管微軟將人工智能強加到操作系統中令人沮喪,但 Windows 11 確實配備了越來越多的人工智能功能。正如預期的那樣,副駕駛是這一切的核心。它與 ChatGPT 類似,因為它使用完全相同的模型。事實上,微軟已經開始向 Copilot 推出 GPT 5.1。

副駕駛語音和副駕駛視覺是基礎

微軟在 Copilot Voice 和 Copilot Vision 上做了很長時間的工作,這兩個功能我都用過幾次,成功率高於預期。 Copilot Voice 基本上能夠通過“Hey Copilot”來調用人工智能,比在手機上呼叫 Gemini 效果更好,有時甚至更快。

我主要使用 Copilot Voice 來詢問一些瑣碎的事情,例如倫敦的時間或貨幣兌換。在我停止說話幾秒鐘後,它會自動關閉,這就是讓我回到“嘿副駕駛”的原因。它是非侵入性的,對於您稍後將看到的一些內容來說,這是不能說的。

此外,微軟還推出了“再見”命令,您可以對副駕駛語音說該命令以立即將其關閉。

我喜歡 Copilot Vision 的想法,它可以查看屏幕上打開的任何內容並提供上下文指導。我在使用一些新軟件時已經使用過它幾次。但 Copilot Vision 的問題是它太慢了,以至於我詢問常規 Copilot 所需的時間更少。此外,Copilot Vision 在指導您了解 UI 元素時可能會出錯。

如果這兩者都像助手,那麼微軟的主要推動力是“Windows演變成一個代理操作系統”,而Copilot Actions就是它的開始。

但它最初是在 Microsoft Edge 瀏覽器中作為 Copilot Actions on Web 開始的,它允許用戶通過讓 Copilot 單擊按鈕、填寫表格以及代表他們完成預訂、購買或保留等任務來直接與網站進行交互。

然而,Microsoft Edge 現在作為人工智能瀏覽器進行營銷,該公司的人工智能首席執行官甚至稱其為“企業首個AI瀏覽器。

其代理模式在批准的站點上執行多步驟工作流程。 Edge 中的 Copilot 可以查看您的日曆、任務和瀏覽圖表來總結當天的重要事項,多選項卡分析或多選項卡推理可讓 Copilot 讀取多達數十個打開的選項卡,並為您提供單一比較或摘要。您需要在 Edge 中啟用副駕駛模式。

YouTube 摘要和視頻翻譯位於 Edge 中有用的 AI 功能列表中,因為我已多次使用它們進行研究並且效果良好。

但我仍然繼續回到使用瀏覽器的自然方式,我想這就是大多數人的感受,這就是為什麼這些功能對每個人來說都是一種侵入。

回到一家試圖改變多年來行為本能的公司,微軟在任務欄中引入了 Ask Copilot 體驗,有可能取代 Windows 搜索。微軟希望任務欄成為一個人工智能中心,通過 Copilot Actions 調用人工智能代理來代表你在你的電腦上執行任務。

就目前情況來看,微軟在人工智能方面的巨著必須是 Windows 11 中的“實驗性代理功能”,這是一個可以解鎖代理工作區、代理帳戶、本地工具訪問以及代理計算的整個基礎的開關。然而,微軟確認 Agentic 功能會產生幻覺並且不安全,但他們正在全力以赴。

隨著時間的推移,Ask Copilot 也是微軟放置更多代理的地方,包括像 Researcher 這樣的第一方代理,該公司表示,隨著時間的推移,更多的第一方和第三方代理將出現在這裡。

微軟還一直在測試文件資源管理器集成,讓 Claude 和 Manus 等 AI 應用程序可以通過標準提示訪問本地文件。一旦您允許,這些應用程序可以總結文檔、從文件夾中起草演示文稿,甚至使用該上下文將您的本地內容轉換為基本網站。

微軟的想法是讓 Windows 成為“人工智能的畫布”,代理(而不僅僅是應用程序)可以代表您處理您的數據並執行任務。

人工智能無處不在,即使它毫無意義

當然,人工智能化不僅限於Windows操作系統,而且已經滲透到所有微軟應用程序中。也許人工智能最毫無意義的包含在記事本中,現在它甚至可以向你展示副駕駛在一個看似簡單的文本編輯器中流淌的文本。

您可以輸入原始文本,右鍵單擊它,然後讓記事本使用 GPT 支持的建議重新措辭、縮短或擴展它,從而違背了記事本的全部目的。該應用程序最初的目的是幫助您快速記下想法,或者像真正的記事本一樣,它可以幫助您思考。但如果人工智能為你做到了這一點,那麼人類還算什麼!

因啟動速度太慢而被批評的 Windows 11 文件資源管理器也有相當多的人工智能。右鍵單擊圖像,您可以選擇模糊背景或擦除對象,這些選項可以通過照片應用程序的 AI 模型來檢測主題並應用編輯,而無需打開完整的編輯器。

對於文檔,文件資源管理器可以交給人工智能來總結或提取關鍵點,特別是在與 Copilot 和 Microsoft 365 連接時。這些可能很有用,但代價是文件資源管理器速度更慢,儘管具有預加載能力,但仍然感覺很慢。

有趣的是,Bing 壁紙應用程序中包含了人工智能,當您單擊桌面時,它會打開一個瀏覽器窗口來顯示 Bing 結果,並顯示有關圖像中主題的視覺搜索結果。完全沒用。

當與截圖工具配合使用時,相同的視覺智能功能是最有用的功能之一,並且現在與 Windows 版 Google Lens 一樣強大且高效。

說到生產力,Outlook、OneDrive、Word、Excel、PowerPoint 和 OneNote 都包含 Copilot。 Microsoft 365 Copilot 可以匯總長電子郵件線程、起草回复、生成演示文稿、從電子表格構建圖表以及從存儲在 OneDrive 中的文件中提取上下文,而無需您手動搜索它們。但這對您的組織安全嗎?嗯,這就是微軟更喜歡其企業客戶使用的方式。

還有專用的 Microsoft 365 Copilot 應用程序,它更像是一個人工智能優先的中心,您可以在其中與 Copilot 聊天、創建文檔並在一個地方搜索您的工作。我真的很懷念舊的 Office 應用程序和它的名字!

OneNote 是我最喜歡的筆記應用程序之一,擁有 Microsoft 365 Copilot 筆記本。不介意糟糕的命名方案,它是一個強大的工具,“將您的任務或項目所需的所有內容(例如 Copilot 聊天、Word 文檔、PowerPoint 演示文稿、Excel 文件等)整合到一個單一的、集中的空間中。”

OneNote 中的 Microsoft 365 Copilot 筆記本。來源:微軟

這具有成為項目和筆記的長期記憶層的巨大潛力,就像第二個大腦,特別是對於像我這樣使用 OneNote 來記錄和記錄我一整天的人......

Windows 設置應用程序也有自己的 AI 代理。它使用一種名為的輕量級語言模型設置穆,它使用設置數據進行優化,以幫助您查找和調整系統設置。

Microsoft Store 還提供人工智能生成的應用評論摘要,將用戶反饋整合為簡短易讀的描述,幫助你快速了解應用的整體情緒,而無需滾動瀏覽數百條評論。

我把我最喜歡的留到了最後,那就是“照片”應用中的 AI。我特別談論的是 AI 對象擦除和背景去除工具,我每天都在工作中使用它們。

這就是我對 Windows 中人工智能的總體看法。其中許多工具都有其實質內容和用途,並且已經在其他平台(例如 Android 和 macOS)中可用。但微軟無法向普通人傳達信息,這讓用戶最討厭他們的實施。

為什麼這麼多人認為 Windows 11 中的 AI 平淡無奇?

Mustafa Suleyman 可能會困惑為什麼人們不欣賞微軟的人工智能和代理操作系統的推動,但用戶很清楚他們想要什麼和不想要什麼。

一名用戶回復了AI CEO 的帖子中寫道:“問題是你正在為一個不存在的‘問題’注入解決方案。你(或你的組織,無論誰負責產品決策)不斷地將人工智能插入到任何東西中。人們不希望這樣。”

人們的共識是,這並不是說技術不好。它被強行滲透到 Windows 的每個角落,而這些地方是人們不需要或不想要它的地方。

人工智能在目前的狀態下具有極大的侵入性

所有大型科技公司都在人工智能上投入了太多的資金,以至於他們無法退出。他們唯一的解決方案是讓普通人盡可能多地使用人工智能,以證明持續投資的合理性。

我相信,當人工智能工具沒有任何關於人工智能本身的營銷炒作,而是專注於結果時,它會感覺最有用。

這就造成了一種工具的錯覺。人工智能應該是底層技術,而不是炒作詞。我知道一個事實,微軟越多使用“副駕駛”這個詞,他們就越會被討厭,即使人工智能進化成更有用的東西。

有關的:Windows 11 的 Copilot 應用確認 GPT-5,微軟準備 Microsoft 365 Copilot、Azure

微軟發布的任何有關 Copilot 的社交媒體帖子都會遭到用戶的嘲笑。該公司目前可能正在通過 Windows 中的代理來測試他們對人工智能的最大賭注,但這些代理是從“Ask Copilot”中調用的。老實說,我不認為當它向公眾發佈時用戶會喜歡它。

人工智能過載會造成隱私和信任問題

微軟的召回功能在技術上聽起來非常有用,但遭到了強烈反對,迫使該公司召回它並安排稍後推出,使其成為一個可選功能。

微軟後來明確表示,Recall 功能在操作系統本地運行,不依賴於雲,但用戶似乎並不關心,因為關於人工智能是隱私噩夢的說法已經確立。

當微軟自己承認 Windows 11 中的人工智能代理可能會產生幻覺、行為不當並遭受全新形式的攻擊時,這種感覺變得更加強烈。這並不是安全研究人員危言聳聽,而是微軟在他們的報告中承認了這一點。支持文檔

Windows 最新版詳細介紹了實驗代理功能的隱私問題,其中我詳細分析了 Windows 11 中的 AI 代理容易受到交叉提示注入、惡意 UI 元素、文檔甚至惡意軟件的影響。這些代理可能會被欺騙來複製文件、洩露敏感數據或做出不可預測的行為。這是因為他們“看到”用戶界面的方式與人類相同,但沒有人類的判斷。

當同一家希望將人工智能代理納入您的文件系統的公司也告訴您這些代理可能會被流氓文本框混淆時,信任顯然就會崩潰。人們已經不再信任 Windows 11 的遙測這樣簡單的功能。現在,微軟要求他們信任能夠訪問文檔、下載、圖片、視頻、桌面和音樂的自主代理。

人們並不認為 Windows 中的人工智能令人印象深刻,因為技術還不夠好。人們認為它平淡無奇,因為它會產生壓力。它會產生懷疑。它給人一種操作系統不再完全屬於您的感覺。

在某些時候,微軟需要停下來看看Windows 11本身的狀態。該操作系統仍因基本穩定性問題而受到批評。如果微軟真的希望人們在 Windows 上擁抱人工智能,他們需要首先修復 Windows。讓操作系統再次變得快速、穩定且可預測,就像 Windows 7 的黃金時代一樣。

當基礎紮實時,人們就會更願意嘗試新想法,比如人工智能。但當房子已經吱吱作響時,添加更多的屋頂材料只會讓每個人都想跑出去。

添加為首選來源


支持獨立博客

支持 Ko-Fi
對 Patreon 的支持

提問(論壇)

WL通訊

WL通訊!

掌握最新的 Windows、IT 和 AI 更新。受到 50,000 多名訂閱者的信賴。

姓名電子郵件免費加入