Build 2024 期间微软才公开多项PC端的 Copilot+ PC,而高通、英特尔、AMD 等芯片厂更不甘示落的比拼 AI 效能,才隔没有一个礼拜的 WWDC 2024,Apple 就预告了从今年秋天开始到明年年初的 Apple Intelligence 功能更新进度,并且让全新的 macOS Sequoia 同步导入包括 iPhone 镜像输出等更多的跨平台应用。
Apple Intelligence 让电脑更聪明而且好用
全新的Apple Intelligence将导入macOS Sequoia,以安全隐私为设计基础,基于Apple芯片与神经网络引擎的效能,将生成式模型与个人使用情境结合,除了具备理解和生成语言和图片的能力,还能跨App执行动作,使得macOS Sequoia、iOS 18和iPadOS 18三者之间能够深度整合Apple Intelligence 并且彼此「接续互通」。
苹果展示了 macOS Sequoia 的 iPhone「镜像输出」功能,相较于部分 Android 阵营的手机(例如Samsung、OPPO、小米、华为)的镜像功能必须以特定的形式与 Windows 11 互相链接,才能操作手机内的 App,iPhone「镜像输出」功能可以在手机不用解锁、待机模式的前提下,以「接续互通」的方式让使用者可以通过键盘鼠标在电脑主画面上滑动、开启并浏览任何iPhone里的app,好比说启动游戏、播放音频,或者在iPhone与Mac间拖放文件。

我印象最深刻的是内置于 macOS Sequoia 的「Writing Tools」,用户几乎可以在任何地方进行改写、校对和摘要文本,包括 Pages、「邮件」、「备忘录」和第三方 App 等,像是以 Apple Intelligence 驱动的「Rewrite」工具,可以依照需求在邮件里面查询合适的句子改写成自己想要的语气, 或者将一大段文章形成摘要等等。

另外,类似 Copilot+ PC 升级版的小画家,在 macOS Sequoia 则是以「Image Playground」亮相,通过全新图像功能,用户可以在几秒内创作出趣味的图像,而且有动画、插图和素描三种风格可供挑选。 「Image Playground」不仅直接内置于「消息」等 app 中,也能以独立 app 形式使用,这也就表示在 iPhone、iPad 都可以使用了。 通过《Image Playground》,用户可从各类别中挑选概念、输入描述并定义图像、从个人图库中挑选与纳入指定人物的图像,并挑出他们最喜欢的风格。

「照片」中的「回忆」功能,让用户只要输入描述,即可创作他们想看的故事。 Apple Intelligence 能依照描述挑选出最适合的照片和视频、根据照片中辨别出来的主题制作故事情节和章节,并将它们编排成剧情结构独特的电影。 此外,新的「Clean Up」工具可以辨别并移除背景中不相干的物品,而不会不小心影响到照片主体。
就像iOS 18、iPadOS 18一样,Mac上的Siri比以往更直觉好用。 用户可以对 Siri 打字,并在文字和语音之间切换,以当下最适合的方式与 Siri 进行交流。
Apple 表示,全新的 Apple Intelligence 基本上都是机上 AI,如果想要更强力的运算结果,Apple 全新打造了「Private Cloud Compute」,能够在设备端处理和服务器端大型模型之间灵活调配计算能力,其中服务器端的模型是在专属的苹果芯片服务器上运行。 指令传送到「Private Cloud Compute」的过程中,数据不会被储存或被苹果取得,而是只用来执行用户的指令,且这项隐私承诺也可受独立专家检验。
此外,ChatGPT也被整合进了 Siri 和跨 Apple 平台的全系统「书写工具」,让用户无需切换程序,就能运用其专业知识,和对图片与文件的理解能力。
Safari 改版后也直接高度整合入macOS Sequoia,像是全新的「Highlights」功能,让使用者能更轻松在网络上找资料,例如导航路线、文本摘要,或了解更多人物、音乐、电影和电视节目的快速连结。 重新设计的「阅读器」提供更丰富且不受干扰的阅读体验。 新版本将以简约的浏览页面,呈现用户阅读的文章,并为长篇文章提供摘要和目录。 当 Safari 侦测到页面中有视频,检视窗口会将视频醒目置中,并为用户保留完整的播放控件,包括「子母画面」。
更身历其境的游戏体验
这边提到更快、更流畅的游戏体验,主要是基于MetalFX Upscaling等技术,而「Game Porting Toolkit 2」 加入了游戏开发者最希望具备的功能,包括更多兼容的着色器、光追效果、Xcode支持等等,开发者甚至可以在不同的设备使用一样的着色器来开发游戏。 良的「游戏模式」可提供更流畅的影格速率,进阶的续航力管理功能则为 Mac 系列带来显著效能提升。
除了影像更精致细腻,而且支持Mac、iPhone与iPad之外,「个性化空间音频」也是这次升级重点之一,它能让玩家拥有更沉浸式的游戏体验,甚至搭配 AirPods Pro2 可以大幅降低音频延迟、灵敏度也会提高,
一系列精彩游戏大作将于 Mac 推出,包括 Ubisoft 的最畅销系列、众所瞩目的最新续作《Assassin’s Creed Shadows》,搭配「个性化空间音频」等新功能,打造身历其境的游戏体验。
在活动当中,Ubisoft宣布最新续作《Assassin’s Creed Shadows》(刺客信条:暗影者)预计今年11月15日上市,除了Mac平台之外,也支持iPad平台。
在官方新闻资料当中还提到Capcom的《RESIDENT EVIL》系列中刺激的作品,包括《RESIDENT EVIL 7 biohazard》和《RESIDENT EVIL 2》。 下一版《World of Warcraft: The War》大型扩充内容,将于今年稍晚推出。 此外,即将推出的还有《Frostpunk 2》、《Palworld》、《Sniper Elite 4》、《RoboCop: Rogue City》。 这些作品都使用了 MetalFX Upscaling 等技术,在 Mac 系列设备上加速游戏性能,并提供高品质画质。 《Control Ultimate Edition》和《鸣潮》也即将推出,充分利用最新M3系列芯片的性能,搭载光线追踪功能打造精湛视觉效果。

全新的窗口排列体验
当用户将窗口拖曳至画面边缘时,macOS Sequoia 会自动建议在台式机的排列位置。 用户可将窗口放置在指定位置,轻松地将窗口并列,或放在画面角落以便一览更多App。 新的键盘和菜单快捷键也协助用户更快地整理窗口。
视频会议推出更多更新
全新发表的「Presenter Preview」让上台简报更便利,讲者能在分享画面之前预览内容,并且可以与 FaceTime 和 Zoom 等 App 搭配使用。 用户也能换上一系列内置的优美背景,包括不同款式的渐层颜色、星系背景图片,或上传自己的照片。 使用者能在 FaceTime 或如 Webex 等第三方 App 的视频会议中更换背景,搭配苹果领先业界的分割技术,让用户在视频会议中呈现最佳样貌。
全新的「Presenter Preview」让用户在视频会议App 中分享屏幕之前(无论是分享单一App或整个屏幕),能够先预览内容,再分享给所有人。
全新「Passwords」app
macOS Sequoia 以 25 年前首次推出的「钥匙圈」为设计基础,推出全新的「Passwords」app,让用户可于同一位置,便能轻松取得密码、通行密钥、Wi-Fi 密码和其他凭证。 iCloud 同步功能由端对端加密技术支持。
推出日期
macOS Sequoia 开发者 beta 版即日起于 developer.apple.com 通过 Apple Developer Program 提供。 公开beta版将在下个月起于 beta.apple.com 通过Apple Beta Software Program提供。 将于今年秋季以免费软件更新的形式推出。 Apple Intelligence 的beta版将于今年秋季与iOS 18、iPadOS 18和macOS Sequoia一并推出,适用于Siri和设备语言设置为英文(美国)的iPhone 15 Pro、iPhone 15 Pro Max、iPad和Mac (M1及后续机型)。
