澳门·威尼斯人(中国)官方网站假使说 2024 年有什么真正的热门话题，AI 能够是当之无愧的热搜第一名。OpenAI 的 ChatGPT 和 Sora、微软的 Copilot、谷歌的 Gemini…… 基于大发言模子（LLM）的天生式 AI 器材屡见不鲜，迭代速率之疾让人目不暇接。
不外关于 Apple 来说，随同 LLM 的脚步坊镳并没有那么疾。比拟 ChatGPT，现当前 Siri 的外示只可说是差英雄意——险些为 0 的上下文会意才气，不时遭遇互联网邻接题目，语音识别也不敷精确。加上这两天 iOS 18 将集成 ChatGPT 的听说依然满天飞了，Apple「看起来」依然正在人工智能范围落伍一大截了。
虽说从 2011 年颁布 Siri 起头，Apple 对人工智能的探寻就无间没有中止，编制中集成了相当众的人工智能合联的功用。但正在天生式 AI 云云火爆的 2024 年，Apple 的外示并不出色。比拟于一年前绝口不提 AI 的场景，Apple 依然正在近来两场颁布会里依然尽能够众得提到了 AI。
即日的著作就来盘货一下 Apple 近年来颁布会上提到的与人工智能合联的软硬件编制与功用，为一个月后「AbsolutelyIncredible」的 WWDC 2024 计划少少开胃菜。
Apple 拓荒的神经收集引擎也许加快特定呆板进修模子的治理揣测，出力比 CPU 和 GPU 更高，被通俗用于 iPhone、iPad、MacBook 乃至 Apple Watch 等设置。Apple 编制平台的很众人工智能功用，比方设置端 Siri、听写、自愿纠错、Animoji 动话神态、揣测照相等，都依赖神经收集引擎正在设置当地及时加快运转，而不会影响编制集体的相应速率。通过 Core ML，第三方拓荒者也能够应用设置上的神经收集引擎加快呆板进修揣测。比方，App Store 有不少正在当地运转的文本天生图像操纵。
跟着 Apple 平台的功用对智能的请求越来越高，设置也装备的神经收集引擎也越来越疾。iPhone X 和 iPhone 8 的 A11 中的双核神经收集引擎每秒运转 6000 亿次运算，到当前 iPhone 15 中 A17 PRO 能够每秒运转 35 万亿次1操作。神经收集引擎无疑是 Apple 为其「设置端智能」所搭筑的紧张硬件「基本措施」。正因云云，它也从未缺席任何一场 Apple 的硬件颁布会，每次正在道各处理器机能时，也都市带上它：
相机界说了今世智在行机的中央体验之一。除了镜头、感光元件和治理器外，iPhone 拍摄照片的经过中还涉及巨额设置端智能。镜头和传感器的数据需求进程一系列揣测，本事最终露出正在人们刻下。照片拍摄完结后，再有很众与呆板进修合联的功用实行人脸识别和分类、天生追忆、自愿拣选壁纸、提取环节讯息等。
Deep Fusion 最初推出于 iPhone 11 系列，通过呆板进修模子实行众达 9 帧的图像合成，从而擢升低光状况下的照片品德、下降噪点等。这是 iPhone 揣测照相的紧张功用，每年都市更新。比方，iPhone 14 系列中的深度调解功用取得了图像管线优化。
然而威尼斯人官网，Deep Fusion 是一项默认开启且无法合上的编制功用。假使应用 Apple 设置自带的相机 app，Deep Fusion 会自愿开启并对每一张照片实行治理。不少用户反应，进程 Deep Fusion 治理的照片看起来对照渡过于激烈、过分锐化。
Apple ProRAW 跟着 iPhone 12 Pro 的颁布而推出，它贯串了尺度 RAW 方式的讯息与 iPhone 揣测照相的照片治理，予以用户更大的编辑空间。正在 iPhone 14 Pro 上，用户能够应用全新的主摄拍摄 4800 万像素的 ProRAW 照片，并贯串 iPhone 的呆板进修功用，取得更高的照片细节。
人像形式是另一项 iPhone 的揣测照相功用，通过摄像头获取的深度讯息进程呆板进修模子揣测，出色照相主体并笼统配景。正在 iPhone 15 系列上，用户无需手动掀开人像形式，只消 iPhone 检测到画面中有人物或宠物，编制会自愿搜求并揣测深度数据，供应后期调剂是否应用人像形式的选项。即使人像形式依然推绝伦年，但呆板进修获得的效率有时仍是不敷自然，不时虚化掉少少中心角落的细节，稀少是用它拍静物时。
与此相像，与深度讯息合联的呆板进修也依然介入了视频拍摄范围，随 iPhone 13 Pro 颁布的「影戏形式」即是一例：
综上所述，Apple 以为揣测照相具有尽头强的呆板进修属性，也是 Apple 每年中心更新的偏向。这些身手也被操纵到其他设置上，比方 Mac 和 Studio Display 的摄像头，现正在会应用 Apple Silicon 的图像信号治理器和神经收集引擎擢升画质。
Visual Lookup 是 Apple 正在 WWDC 2021 上推出的照片主体识别功用，识别后，只需求通过聚焦查找查找环节词，就能够直接找到合联的照片。比方，正在查找时输入「手机」，照片 app 就会自愿列出已识别出包罗手机的照片。正在 WWDC 2022，Apple 还更新了提取主体功用。
合联功用还被用正在了 Apple TV 和 HomePod 上，通过 HomeKit 安宁视频功用，能够识别家门口的 HomeKit 摄像头看到了什么讯息，并发出提示报告。
实况文本是另一项正在 WWDC 2021 上推出的功用，它也许识别相机画框或编制内图片（征求网页上的图片、相册中的照片、截屏、访达中的 PDF 文献等）中包罗的文本、网址、电话、地点等讯息。正在 WWDC 2022 上，实况文本还维持视频中大肆暂停帧上的讯息识别。我不时正在 Mac 上应用这项功用，加倍是正在阅读少少没有文字讯息的 PDF 文献时。集体可用性尚可，识别英语的精确率高于中文，印刷体的识别精确率高于手写体。这项功用固然应用了呆板进修，但基于 Intel 芯片的 Mac 也能够应用。
其余，比照片的理解治理也操纵到了编制的其他方面，比方照片追忆与智能倡导。它们会应用 Visual Lookup 供应的照片中暗含的场景讯息，如游历、寿辰派对、宠物、会餐等，并将照片自愿剪辑成带有配乐的短视频。短视频的天生也包罗少少呆板进修功用，会按照照片和视频的讯息以及歌曲的节拍自愿调剂效率。
输入文字也是交互设置的根基操作。除了直接通过键盘输入文字外，还能够应用听写和扫描等式样输入。然而，无论应用哪种输入式样，都离不开智能身手的操纵——听写涉及语音转文字的识别，键盘输入涉及自愿改良文本和文字预测，扫描则涉及对图片讯息的提取。近些年的 WWDC，Apple 都市效力优化文本输入体验。
从 iOS 5（2011 年）起头，听写功用就依然内置于 iPhone，当时听写需求所有通过互联网实行治理；当前，听写功用依然能够所有正在设置端运转，正在输入文字以外还能够输入 emoji，听写时也能够不停用键盘输入文字。大大都情景下，新版听写的精确率都还不错，但语气词对照众的光阴，听写也会展现题目，仍是需求人工编辑下的。
WWDC 2023 则提到新的 Transformer 模子2让听写加倍精确 —— 听写是正在 Apple Watch 和 Apple Vision Pro 等可穿着设置上输入文本的一个尽头紧张且自然的途径，听写的精确率也也许正在很大水平上肯定应用这两款设置的寻常体验怎样。
关于直接用键盘输入，WWDC 2023 先容了优化后的自愿改良功用和输入及时预测功用。自愿改良功用不只也许改良用户能够拼错的词语，还能推想用户正在打字时按下的实在键（征求滑行输入时判别的音节，以及 Apple Watch 上的全键盘）。
输入及时预测则也许按照用户个体的词汇外达气概，自愿弹出或补全词语。寻常来说，这能够预测下一个词，或者助助你补全一个不确定奈何拼写的长单词。实质体验中，输入及时预测功用正在近来几个版本中通常会「改良」出少少奇异的词组出来，有的光阴我都要质疑是不是我打错了。
Apple 呆板进修商酌网站上有不少跟 Transformer 模子等相合的商酌成绩，也会披露少少目前依然正在编制中展现的身手的配景细节。比方，怎样神速高效精确地天生文本段落、Siri 怎样通过语音触发、众模态的大发言模子等等。说大概鄙人一届 WWDC 上，少少成绩就会造成编制中集成的功用。
2023 年颁布的 Apple Watch Series 9 和 Apple Watch Ultra 2 装备了 S9 芯片，内含 4 核神经收集引擎，这是 Series 9 一系列新功用的基本，征求设置端 Siri、听写和双指互点两下手势。其余，Apple Watch 上再有一系列与运动强健合联的功用也涉及呆板进修，比方运动检测和睡眠阶段检测等。
得益于 Apple Watch Series 9 的四核神经收集引擎，不少呆板进修职责能够正在 Apple Watch 当地更高效地运转。Siri 能够正在设置端实践，无需互联网邻接，于是相应速率更疾，还能够正在当地治理用户的强健数据并给出合联解答。比方，除了气象和计时器等功用外，还能够正在 Apple Watch Series 9 上咨询 Siri 己方前一天的睡眠情景、心率情景等。
Apple Watch Series 9 还维持「双指互点两下」手势，能够通过这个手势来操作 Apple Watch 今朝界面上的首要操作，比方接听电话、开启计时器、显示智能叠放等。
watchOS 10 的智能叠放小组件功用也应用呆板进修自愿倡导今朝位于最顶部的小组件。每次正在外盘上转动数码外冠，都能看到最实时的讯息，比方即将起头的聚会日程、今朝播放中的歌曲等。
除了编制合联的功用，Apple Watch 的运动与强健功用也离不开智能身手的列入。比方，2022 年更新的 watchOS 9 扩张了对跑姿丈量的新目标，此中也包罗呆板进修因素。
涉及运动强健合联的功用，Apple 也常提到合联模子演练。比方，watchOS 9 的睡眠阶段功用参考了分歧人群的睡眠阶段临床商酌，并应用设置端呆板进修实行。然而令人不解的是，Apple Watch 上的睡眠追踪功用坊镳并不自愿监测用户是否入睡，而是通过睡眠准时功用开启，用户只可获知正在睡眠一心形式时刻的睡眠阶段情景；小睡、闹钟合上后的睡眠都不会不停跟踪。
正在 Apple 设置上再有不少辅助功用，助助正在某些知觉或功用方面有冲击的人士更好地应用今世科技，比方咱们熟知的放大镜、VoiceOver 屏幕阅读器、AirPods 助听器等。此中也有少少辅助功用涉及到 Apple 设置的神经收集引擎和设置端智能，比方创筑个体语音、音响识别等。
个体音响是一项辅助功用，通过对 150 个用户短语灌音的理解，iPhone 或 iPad 能够正在设置端创筑拟合个体声线的合成音响。正在实行 FaceTime 通话、打电话、应用辅助交换 App 以及面临面交道时，用户能够让编制应用仿真语音朗读，目前维持英语。关于面对失语危机的人来说，这项功用能够助助他们存储己方的音响，并与他人交换。
音响识别 (SoundAnalysis) 是 WWDC 2021 推出的一套框架，内置了 300 众种音响种别的分类数据，拓荒者能够直接正在 app 中移用，编制会通过麦克风对音响实行识别。正在 iOS 中，基于这个框架，Apple 正在辅助功用中参加了音响识别功用，能够识别情况中的百般音响，比方门铃声、警报器声、猫狗啼声等，还能够进修少少特定种别的音响——这对听障人士供应了必然的助助。
近期相合 Apple 能够与 OpenAI 等发展协作、WWDC 将中心擢升 Apple 平台的 AI 才气等等合联的听说不竭。我也正在思索，正在天生式 AI 的这股大潮中，Apple 终究会何去何从呢？
从这篇著作，咱们看到 Apple 有深挚的呆板进修商酌和操纵基本。然而，现当前较大的 LLM 模子坊镳依然繁复到正在设置上直接治理不行够的气象，它是否还能遵从己方「设置端智能」的价钱观？它又会怎样将有更强盛才气的 AI 器材带入己方的软件平台？