重申端侧AI,WWDC要点更新:Apple intelligence横空出世,与系统深度融合,重视端侧AI板块机会

发布于: 修改于:雪球转发:0回复:0喜欢:0

重申端侧AI,WWDC要点更新:Apple intelligence横空出世,与系统深度融合,重视端侧AI板块机会【天风计算机
#用户功能三模块
1. 大模型支持的Siri:自然语言的操作系统/APP交互,用户通过自然语言或文字(屏幕底部轻点2下)与Siri沟通,沟通时屏幕周边闪烁,Siri能感知个人数据,结合上下文深入理解用户想法,能够在app内和跨APP操作,并了解设备的功能和设置,例如闹钟设置等,第三方app可以通过Sirikit或Apple intents加入Siri
2. Writing Tools:智能写作、智能总结并notifications等结合、通话时生成概要总结、邮件智能回复
3. Image playground:文生图与创作全面结合,包括Image Wand中与iPencil全面结合将notes转化为图片,自然语言创作emoji,专用的Image Playground应用程序创作图像、自然语言搜索照片视频、图片AI编辑Clean up
此外Apple intelligence会保护个人隐私,个人数据集成在设备中,私有云计算在调用云端模型时会向用户发出请求
#开发者套件
面相developers准备了充足的开发SDK与API,包括image playground、writing tools,Sirikit和apple intents,开发者可以轻松调用apple intelligence功能,未来还会推出Xcode集成在Swift语言,开发者相关将在今年夏季推出测试版
#大模型
云端结合方式,大部分功能将在端侧AI模型完成,Apple团队在4月开源OpenELM模型,我们预计端侧AI可能由自研模型完成,同时公司与GPT-4o深度耦合,在调用ChatGPT时会询问用户,用户不需要开chatGPT账号且免费
#时间点与面向设备
面向设备包括iPhone15 pro/promax以及装备M1处理器及以上的ipad与Mac,将在IOS18/iPadOS18/macOS Sequoia中推出相关功能,今年秋季新系统推出时会有英语beta版,明年会有更多的新功能推出

T神