剛剛,微軟掀起生產力革命!GPT-4o 重塑 Windows,奧特曼登場劇透新模型

愛範兒 於 22/05/2024 發表 收藏文章
今天凌晨,微軟帶來了一系列重磅產品,一口氣發佈了 50 多項更新。

接棒 OpenAI 和 Google 掀起的 AI 科技月,微軟不僅要和蘋果等廠商爭奪 AI PC 的定義權,Copilot 加持的 Agent 也要給 AI 公司們帶來億點點震撼。

發佈會要點速覽:

  • Team Copilot ,從個人助理變成團隊助理
  • 全新的 Agent 代理功能
  • Phi-3 家族迎來新成員
  • Azure AI Studio,包含 API 集成、完整的工具鏈及部署全家桶
  • Fabric 大升級,推出實時智能(real-time intelligence)
  • 專為雲端規模化應用性能優化的 Cobalt 芯片
  • Sam Altman 壓軸登場,給了開發者兩個建議,預告新模型

發佈會上,微軟 CEO Satya Nadella 談到了關於現代計算的兩個夢想。

引用「第一個是,計算機能否理解我們,而不是我們必須去理解計算機?第二個夢想是,在這個信息不斷增長的世界中,如何處理關於人、地點和事物的信息,」

從 AI 基礎設施的搭建,到模型產品的落地,微軟在尋找答案的過程中,逐漸成長為一個全方位的 AI 解決方案提供商。

今夜過後,或許我們都得重新審視微軟這個巨頭。

Copilot 變身 Agent,開啓一站式服務革命

昨天,Copilot 迎來了史詩級大更新,發佈會上的 Nadella 更是為我們帶來了「Copilot+PCs」的概念。

據 Nadella 介紹,Copilot+PCs 是指 Windows 筆記本電腦配置內置 AI 硬件並支持整個操作系統的 AI 功能,並被描述為「新一類 Windows PC」。

打開 PC 上的 Copilot,你會發現它開始具備「透視」屏幕能力,能真正理解屏幕上顯示的內容,甚至給出相對應的建議。

比如,在你玩《我的世界》遊戲時,它能化身遊戲大師,不僅能用純自然語言教你怎麼打造一把劍,還可以通過「看到」你庫存裏的具體物資,給出精準的製作建議。

現在,微軟還推出了 Team Copilot ,從個人助理搖身一變成為團隊助理。

Team Copilot 預計將在今年晚些時候向企業用户推出預覽版。用户可以在 Teams、Loop、Planner 等協作工具中調用 Copilot:

  • 擔任會議主持人,整理會議議程並記錄會議要點
  • 擔任羣組協作者,幫助每個人跟蹤項目進展
  • 擔任項目經理,幫助確保每個項目順利推進

並且,Microsoft Copilot Studio 推出全新的 Agent 代理功能,讓開發者能夠根據特定任務和功能,構建主動響應數據和事件的「智能 Copilot」。


簡單來説,基於這類新功能的智能 Copilot 能夠理解上下文、進行邏輯推理、自我學習和求助,並且能夠獨立地管理複雜的業務流程。

例如,一個智能 Copilot 能夠獨立地管理一個電子商務平台的整個訂單處理流程,從預測產品需求、自動補貨、個性化客户推薦、處理訂單和物流,到收集客户反饋並優化未來的服務。

在今天開場的主題演講中,Nadella 説道:

引用作為一家平台公司,我們的目標是構建從基礎設施到數據、工具,再到應用程序可擴展性的最完整端到端堆棧,讓您能夠利用這項技術的力量來開發自己的應用程序。

微軟表示將在 Copilot Studio 中添加 Copilot connectors,以簡化開發者將其業務和協作數據連接到他們的 Copilots 的方式。

GPT-4o 成本暴降 12 倍,微軟小模型碾壓 GPT 3.5

微軟是首家將 AMD 領先的 MI300X AI 加速器芯片用於客户 AI 訓練和 AI 推理的雲服務提供商。

不久前,OpenAI 推出了最新旗艦模型 GPT-4o,彷彿《her》走入現實,現在,該模型已在 Azure AI Studio 中以 API 形式提供。

▲小彩蛋

目前 OPPO 正在將 Azure AI 語音轉文本(speech-to-text)、快速轉錄(Fast Transcription)和 Azure AI 文本轉語音(text-to-speech)技術在其新款智能手機上試點。

通過使用先進的 AI 加速器,如 Nvidia、AMD 和 Azure Maya,微軟可以為各種 AI 應用提供高性能和低成本的解決方案。比如,經過訓練後的 GPT-4o 生成的成本降低了 12 倍,響應速度反倒提高了 6 倍。


現在,Azure ND MI300X v5 虛擬機系列也正式推出,針對高需求 AI,以及諸如 Azure OpenAI Service 的高性能計算(HPC)工作負載進行了優化。

並且,微軟還宣佈推出 Cobalt 100 Arm-based 芯片,性能提升可達到 40%。

此前,微軟在官網開源了小語言模型(SLM)——Phi-3-mini,用以小勝大的實力在開源社區中取得了極大的反響。

Nadella 今天宣佈,由微軟開發的 Phi-3 系列新型多模態模型 Phi-3 Vision 、Phi-3 Small 7B、以及 Phi-3 Medium 14B,現在可以在 Azure 上使用了。


據介紹,Phi-3 系列模型功能強大、性價比高,且針對個人設備進行了優化。

其中,Phi-3-vision 支持輸入圖像和文本,並能以文本形式迴應。比如用户可以針對圖表提問,或者對特定圖像提出開放式問題。

而 Phi-3 Medium 14B 的綜合性能與 Mixtral 8x22B 和 Llama 3 70B 互有勝負,但卻能做到幾乎碾壓 Command R+ 104B 和 GPT 3.5。


倘若你是開發人員,你現在可以在 Azure AI Playground 上率先體驗這些模型,並允許自定義構建這些模型。

值得一提的是,可汗學院正與微軟達成合作,利用開發的 Phi-3 小型語言模型(SLMs)家族的新版本,探索改進數學輔導的方法。

讓 Windows 成為最開放的人工智能平台

為了更好地幫助開發人員,微軟還與此前被曝出造假的 Cognition AI 達成合作。

作為協議的一部分,首個「AI 工程師」Devin 將由 Azure 向客户提供服務,以支持代碼遷移和現代化等複雜工作。

Microsoft Fabric 迎來升級,最新的實時智能(real-time intelligence)提供了端到端軟件即服務解決方案,能夠為用户提供實時的數據分析服務,幫助他們快速處理和響應海量且詳細的數據。


舉例來説,假如你是一家大型零售連鎖店的 IT 經理,你需要實時監控各個店鋪的銷售數據、庫存水平和顧客流量,以便快速做出決策,比如補貨、促銷活動或者調整員工排班。

那麼在這種情況下,你可以使用 Microsoft Fabric 的實時智能功能來達到你想要的效果。

在今天微軟的 Build 大會上,該公司提供了有關 Windows Copilot Runtime 的具體工作原理的更多詳細信息。

Runtime 包括一個 API 庫,開發人員可以利用這些 API 來開發自己的應用程序,並提供 AI 框架和工具鏈,使其在 Windows 上發佈自己的設備上模型。


微軟昨天展示了其 Recall AI 功能,讓很多人眼前一亮,但微軟表示,開發人員還可以通過向其應用程序添加上下文信息來改進 Windows 的新 Recall 功能,提供了出現更多定製功能的潛力。

Satya Nadella 表示,Windows Copilot Runtime 是 AI PC 的重要里程碑,就像當年的 Win32 一樣。

Sam Altman 壓軸登場,給了開發者兩個建議

在發佈會即將結束時,Sam Altman 突然登場,與微軟 CTO Kevin Scott 探討了關於 AI 和開發者的關係,也談論了最近發佈的 GPT-4o,並預告下一個大模型即將面世,微軟為此也準備了一台規模更大的超級計算機。

Sam Altman 認為:
  • 這可能是打造產品或創業最令人激動的時刻,因為我們正在經歷自移動互聯網以來最大的平台革命。
  • 使用人工智能並不意味着能擺脱艱苦工作,開發者仍然需要付出巨大努力來創造出優秀的產品。

以下是 Sam Altman 和 Kevin Scott 現場對話的全文,APPSO 略作編輯:

Kevin :你是這個星球上最忙碌的人之一,這是瘋狂的一週。過去一年半發生了巨大的變化,你覺得最讓你感到驚訝的是什麼?

Sam :

開發者一直是過去一年半所發生的事情的核心部分,他們正在做的事情非常驚人。

採用速度、人才以及弄清楚如何利用這一切來構建產品的速度都非常快。當我們在 API 中推出 GPT-3 時,有些人覺得它很酷,但應用範圍很窄。

然而,看看人們用 GPT-4 所做的事情,以及現在 GPT-4o 的應用情況,儘管它還很新,還沒推出多久,但我從未見過一項技術在如此短的時間內以如此有意義的方式被如此迅速地採用。

所以,最重要的事情,聽起來像是我能説的最無聊的一點,但我認為它實際上比聽起來要深刻得多。模型會變得越來越智能。


如果你回看 GPT-3 到 3.5 再到 4 所發生的事情?它變得更智能了,你可以用它來做更多的事情。它變得更穩健了,也變得更安全了,不僅因為模型變得更智能了,而且因為我們在構建其周圍的安全工具方面投入了更多的工作。

它變得更有用了,但最根本的能力,這種令人驚歎的湧現屬性似乎使我們實際上在整體上提高了模型的通用能力。這種情況將繼續發生。

因此,當我們考慮下一步以及開發者將用它構建的那些令人難以置信的東西時,我認為這是最重要的事情。還要記住,速度和成本對我們也非常重要。

Kevin :你正處於一個充滿開發者的房間,線上還有很多開發者在觀看直播,你對他們的建議是什麼,考慮到世界上正在發生的事情,你對他們有什麼建議?


Sam :

首先,現在可能是打造產品或創業最激動人心的時刻,我敢説自互聯網時代以來,還沒有見過如此令人興奮的時刻。我們有很大的機會和能力去構建一些新的東西。構建新事物並真正改變格局的能力,都是在平台變革的時代到來的。

我們已經有一段時間沒有經歷過平台變革了,現在看起來我們正在經歷這樣的時期。所以,我最大的建議是,這是一段特別的時期,要好好利用它。現在不是推遲計劃或等待下一個機會的時候,這是一個特殊的時刻,在未來幾年裏,會有很多事情發生,許多偉大的新事物會開始湧現。

關於平台變革的第二點是,當手機革命開始或在 2008、2009 年真正興起時,你會看到人們説:「我們是一家移動公司(mobile compan),我們有移動應用。」但僅僅幾年後,沒有人再説他們是一家移動公司,因為這已經成為基礎標準。

(AIGC) 是一項了不起的新技術。但它並不能讓你擺脱構建偉大產品、偉大公司或偉大服務所需要的艱苦工作,你必須付出這樣的努力。

AI 本身是一種新的推動力,但它不會自動打破商業規則。所以,你可以把它當作一個新工具來使用,但你需要開始思考如何在你所做的事情中構建持久的價值,很容易在淘金熱的興奮中忽視這一點。

以 Copilot 之名,再次發起衝鋒

從 2023 年到 2024 年,無論你是否身處科技行業,或許都會感受到這一趨勢:人工智能正在重塑我們的生活。

而每一次技術的突破,總是會帶來生產力變革。PC 作為重要生產力工具,也在這一輪浪潮中也在面臨巨大的改變,甚至是重新定義的可能——這就是如今不斷被提及的 AI PC。

與普通 PC 不同的是,AI PC 往往需要三個方面的條件:

其中首要的就是硬件。

去年 9 月,英特爾酷睿 Ultra 處理器,構建出了 CPU+GPU+NPU 協同計算的異構加速體系,為我們展示出下一代 AI PC 的底層邏輯。


其次是本地 AI 大模型,有了強大性能的 PC 才能支撐起本地大模型的流暢運行,從而為用户提供各種 AI 服務。

最後是個人知識庫,這不僅能有效保護數據與個人隱私,也為用户建立專屬自己的個性化 AI 助手提供了支持,是讓 AI PC 真正走向生產力的必要條件。

但對於 AI PC 的定義,微軟早前就給出了它的三個條件:

  • 必須配備 NPU、CPU 和 GPU
  • 支持微軟 Copilot
  • 鍵盤上直接配有 Copilot 物理按鍵

三個條件中有兩個圍繞 Copilot 展開,而此次 Build 2024 中,微軟更是有很大篇幅用在 Copilot 上,還推出了 Copilot+PC 的概念,足以見得微軟對其重視。

這主要是因為微軟對 Copilot 的定位並非簡單的助手,而是「一種使用自然語言處理技術或大語言模型,幫助人們完成複雜或認知任務的應用程序或組件。」

這也體現出微軟的更多野心——打造一種新的交互邏輯,甚至是新的 AI PC 形態。


早在去年這個時候,Copilot 就已經出現在了微軟幾乎所有重要產品中,讓 Bing、Office、Edge 等煥發出新的活力,並通過豐富的插件集使其成為一個綜合了多種輔助功能的「接口」。

「無論是想要打開喜愛的音樂,還是預定機票、解答難題,都可以通過自然語言在 Copilot 實現」,再加上 Copilot 物理按鍵,以及 AI 加持下對自然語言的理解能力,使 PC 正在轉變為一個真正的 AI 硬件。

正如它的名字一樣,Copilot 正在越來越接近它目標中「副駕駛」的角色。

此次大會上,微軟則進一步為開發者提供了更好的開發環境,支持其構建屬於自己的定製 GPT,帶來了更大的靈活度和未來的可能性。正如瀏覽器可以看做互聯網與人連接的「接口」,Copilot 也在成為 AI 與人連接的「接口」。

這一手棋,可謂是下在了重新定位 AI PC、掌握 AI 時代話語權的關鍵點上。

還記得多年前,蘋果曾通過一系列廣告塑造了一組關於「Win boy」與「Mac boy」的形象。

Mac 這邊穿着舒適面料的 T 恤,而 PC 這邊則只是隨便找件便宜西裝了事,通過形象的直觀對比,襯托出微軟大公司作風、陳腐過時的印象,兩者形成了鮮明的對比。


而當時的微軟也確實以實際產品為蘋果提供了不少素材,面對蘋果的攻勢盡顯疲態,不過如今這一情況似乎正在悄然發生着變化。

微軟已經不再是那個穿着西裝的「商務人士」,反而更像是一名「戰士」,帶領眾廠商一同,以 AI PC 之名,吹響了與 Mac 的正面交鋒的號角,正如週一 Nadella 在接受採訪時表示的那樣:

引用蘋果在多個方面都表現得極為出色,我們現在正期待 Windows 與 Mac 能夠重新展開真正意義上的對決。

一場好戲已經緩緩拉開帷幕……

作者:超凡、王萌、崇宇


資料來源:愛範兒(ifanr)
標籤: 微軟  GPT-4o  Windows  

留言


請按此登錄後留言。未成為會員? 立即註冊
    快捷鍵:←
    快捷鍵:→