“AI将如何重塑你的未来”,这是今年MicrosoftBuild大会的主题。几个小时前,微软CEO萨提亚·纳德拉在微软Build年度开发者大会上,告诉所有人:为什么是微软,才能拥有如此宏大的野心——重塑所有人的未来。
微软的Copilot宇宙已经如预期般展开|图片来源:微软
过去一年,背靠OpenAI大模型优先使用权的微软,用Copilot掀起了“副驾驶”风潮。人们使用软件,不再只是点击图形界面(GUI)图标找功能,而是通过与AI助手的对话,用自然语言开启交互。通过Copilot,全球最大的软件厂商——微软把AI生产力带给使用Microsoft365、Teams、Github等微软全家桶用户的面前;
同时,微软面向所有开发者推出了做Copilot的工具栈——CopilotStack,包括从底层算力到上层AI应用工具,让开发者做出更多软件的Copilot及其他AI应用,从而带给用户;
21日的Build前瞻会上,微软的嫡系硬件Surface成为AI+PC的排头兵,踢掉英特尔、全力拥抱高通,微软找到了AI时代“Wintel”组合的重要伙伴。
在这场为开发者举办的会上,纳德拉主要向开发者介绍了Copilot+PC和Copilotstack的一系列更新,包括Azure云服务器、模型定制工具、模型商店、数据工具、AI应用定制工具等各个层面的进展。
必不可少地,OpenAI首席执行官SamAltman同样在大会现身,并呼吁开发者们把握住平台变革的机遇。
值得玩味的是,去年的Build大会上,Altman的出现让纳德拉或多或少表现出“受宠若惊”的神态;而今年的Build大会上,和Altman握手的是微软的CTOKevinScott——别误会,OpenAI对微软依然很重要,GPT-4o依然是最好的大模型产品,但对微软来说,它和他都已不是唯一。
对于正在将由AI引发的新一代计算变革,逐渐拉回到“微软叙事”上,纳德拉和微软已经掌握好了节奏。
01
从Copilot到TeamCopilot
相比于一年前,微软对Copilot的解读有了很大变化。
微软副总裁CharlesLamanna在接受TheVerge采访时解释道:“我们很快意识到,将Copilot限制为仅对话,极大地限制了Copilot目前的功能。”“如果你能让你的Copilot更加主动,并且能够在后台执行自动化任务,而不是让Copilot一直等着有人与它聊天,那会怎么样呢?”
“2023年微软Copilot专注于搜索数据、总结内容并生成新内容,2024年的Copilot将非常注重可定制。”
今天凌晨,微软正式推出“TeamCopilot”,将Copilot从幕后的AI问答助手辅,扩展为团队新的重要成员。微软官方博客概括了这一定义的转变:“副驾驶正在从与你一起工作的副驾驶,演变为为你工作的副驾驶。”这些Copilot将由某些事件触发,并使用企业自己的数据。
微软的这一定义正是半年来AI圈火热的智能体(agent)概念,后者可以智能地自主执行复杂任务。
微软展示了新版Copilot与人群展开合作,不再是过去的一对一体验。TeamCopilot智能副驾驶能够在会议中担任会议主持人,管理会议议程、跟踪会议时间并记录会议要点;也可以在聊天中作为协作者,提供重要信息、跟踪行动项目并解决未决问题。它还可以担任项目经理,帮助确保每个项目顺利推进,并及时通知团队进行输入。微软计划在今年晚些时候预览TeamCopilot。
TeamCopilot可以和人类用户一起在群中工作|图片来源:微软
微软也允许企业和开发人员可以定制自己的AICopilot,像虚拟员工一样工作、自动执行任务,比如能执行诸如监控电子邮件收件箱、自动执行员工任务或录数据等任务。
相应地,微软推出了MicrosoftCopilotStudio及其扩展工具,让开发者能够根据特定任务和功能,构建主动响应数据和事件的“智能副驾驶”,同时也允许客户通过将其连接到新的数据源和应用程序来增强MicrosoftCopilot智能副驾驶,从而扩展其功能。
基于这类新功能的“智能副驾驶”可通过记忆和知识了解上下文、推理操作和输入,基于用户反馈进行学习,并在不知道如何处理时寻求帮助,从而独立管理复杂、长期运行的业务流程。微软方面称,现在从IT设备采购到销售和服务的客户接待,用户都可以让基于MicrosoftCopilotStudio构建的智能副驾驶为其工作。
而在消费端,微软+高通的AI+PC组合,结合微软的本地小模型,正在向终端AI的路上狂奔。
02
微软正在让AI进入现实
“我们正在经历一次不同寻常的平台浪潮。”微软首席技术官兼AI执行副总裁KevinScott在Build开发者大会上如此称。
这个所谓的平台浪潮,或许将从微软的小模型、OpenAI的大模型以及其他一系列AI模型开始,以Azure云计算作为管道,以微软的AIPC作为终端载体,延伸至所有PC厂商的Windows设备。
首先,微软AzureAI的一大产品是“模型即服务”。在Build开发者大会上,微软宣布,OpenAI前几天发布的GPT-4o现可在AzureAIStudio中使用,也可作为API使用,这一多模态模型集成了文本、图像和音频处理。
同时,微软开发的AI小语言模型(SLMs)Phi-3系列,也发布了一款新的多模态模型——Phi-3-vision,有42亿参数,能够输入图像和文本,并接收文本回复。例如,用户可以就图表提出问题,或就特定图像提出开放式问题。
Phi-3家族的“小模型”主要为有限计算资源和低延迟场景的生成型AI应用程序提供支持,可以在AzureAI和AI模型开源社区HuggingFace上找到,用哪个取决于任务的复杂性和可用的计算资源,可以说是主打一个“性价比”。
这些模型可与微软的PC终端结合,微软希望开发者能够在Windows上构建新的AI应用程序,为PC设备提供差异化的AI体验。据称,微软现在有40多个AI模型在Windows11上运行。微软高管在Build大会上自信地称,“Windows是最开放的人工智能平台”。
Phi-3小模型的参数大小与相对质量|图片来源:微软
就在一天前,微软推出了专为AI设计的新型WindowsPC,即Copilot+PC,可实现40+TOPS(每秒万亿次操作)。
微软称其“彻底重新构思了PC的整体架构,从芯片到操作系统,从应用层到云端,将AI置于核心地位,标志着Windows平台数十年来最重大的变革。”
新的架构将CPU、GPU以及NPU集成,可以连接到Azure云中运行的大语言模型(LLM)与小语言模型(SLM)。
据微软称,其“AI工作负载性能提高了20倍”,与MacBookAir15英寸对比,“持续多线程性能高出多达58%”“本地视频播放电池续航时间长20%”。
在对OpenAI的利用上,按照微软的说法,每台Copilot+PC都配有个人AI助手,键盘上将有新的Copilot键,在未来几周内,用户可以访问包括GPT-4o在内的最新模型,
微软新PC的AI功能还包括:可以用“Recall”功能找到并记住用户在PC上看到的内容和做过的事情,以一条可以滚动浏览的时间线和各种快照呈现;可以用“Cocreator”在设备上直接生成和优化AI图像;可以用“LiveCaptions”生成实时字幕。
微软Copilot+PC的Recall功能|微软
其中,“Recall”的快照范围极广,涵盖用户在应用程序中做过的事情、实时会议里的通信、访问过的网站等等。在隐私问题上,微软称,“Recall”里的快照属于用户,保留在本地电脑上,用户可以删除单个快照,调整和删除时间范围,也可以选择过滤、不保存特定应用程序和网站。
不过,据悉运行“Recall”所需的最小硬盘空间为256GB,并且必须有50GB的可用空间。256GB设备上Recall的默认分配为25GB,可存储大约3个月的快照。
在AI生成图像方面,之前,微软推出过网页版的图像生成工具,但可能会限制用户可以创建的图像数量,也存在隐私问题,WindowsPC内置“Cocreator”,通过NPU和本地小语言模型,可以实时生成新图像,或能以电脑本地的形式缓解用户的隐私焦虑。
据介绍,微软还与Adobe、DaVinciResolve、CapCut、LiquidText、djayPro等合作,用户此后可以在PC设备上运行这些程序的AI功能,比如在PS图像处理、CapCut视频剪辑中自动删除背景。
微软的新PC有比先前更多的原生ARM64体验,包括各种Microsoft365应用程序,以及Chrome浏览器、Spotify、Zoom、WhatsApp、AdobePhotoshop、DaVinciResolve等现在都在Arm上本地运行。
除了微软自己的Surface,微软与OEM厂商宏碁、华硕、戴尔、惠普、联想、三星等合作,Copilot+PC将为这些主要PC制造商提供具有AI功能的Windows11设备,搭载高通处理器,预计6月18日起开始供货。
PC将加速AI创新,而微软的态度是,“只有当云和设备协同工作时,最丰富的AI体验才会成为可能。”
另外,OpenAI首席执行官SamAltman也出席了微软的Build开发者大会,表示模型将会变得越来越聪明,速度和成本都很重要,但最最重要的是“整体智能(overallintelligence)”。
OpenAI的SamAltman(左)出席对谈微软CTO|微软
SamAltman对开发者的建议是,“现在可能是自移动互联网诞生以来最激动人心的时机,不管是做一个产品,还是创建一家初创公司,做点新东西的最大机遇往往孕育于平台范式变革的时刻。”
“我们已经很长时间没见到平台范式变革了,现在看起来平台范式变革真的到来了。”
“所以,我最大的一个建议是,这是很特别的时机,把握住它吧。”SamAltman说道。
此外,他还提醒,“AI并不意味着可以轻轻松松就创造一个伟大的产品,或者一家伟大的公司,或者伟大的服务,你还是得干活,AI是一种加持,但单单AI是不会自动打破一些商业规则的,你可以利用这个新东西,但你还是得找到你做的东西的价值,这是在狂热的AI淘金热中很容易被忽视的。”