首页 > 原创内容 > 原创内容 > 苹果官宣:支持Apple Intelligence的模型在谷歌定制芯片上训练

苹果官宣:支持Apple Intelligence的模型在谷歌定制芯片上训练

发布时间:2024-07-30 22:53:10来源: 15210273549

公开文件显示,苹果开发自家的人工智能(AI)系统Apple Intelligence离不开谷歌定制芯片的支持。

美东时间7月29日周一,苹果官网公布了一篇技术论文,详细介绍为支持苹果个人智能化系统Apple Intelligence而开发了一些基础语言模型,包括一个用于在设备上高效运行的约30亿参数模型——端侧“苹果基础模型”(AFM),以及一个为苹果云端AI架构“私有云计算”(Private Cloud Compute)而设计的大型服务器语言模型——服务器AFM。

论文中,苹果介绍,端侧AFM和服务器AFM是苹果开发的生成式模型大家族成员,这些模型都用于支持用户和开发者。论文中,苹果披露,训练模型采用了谷歌研发的第四代AI ASIC芯片TPUv4和更新一代的芯片TPUv5。文章写道:

“我们在8192块TPUv4 芯片上从无到有训练服务器AFM,使用4096的序列长度和4096个序列的批量大小,进行6.3万亿token训练。”

“端侧AFM在2048块TPUv5p芯片上进行训练。”

在这篇长达47页的论文中,苹果没有提到谷歌或是英伟达的名字,但表示,其AFM和AFM 服务是在“云TPU 集群”上训练。这意味着,苹果向云服务商租用了服务器执行计算。

事实上,今年6月的全球开发者大会(WWDC)期间,媒体已经在苹果公布的技术文件细节中发现,谷歌成为苹果在AI领域发力的另一位赢家。苹果的工程师在构建基础模型时运用了公司自研的框架软件及多种硬件,包括仅在谷歌云上可用的张量处理单元(TPU)。只不过,苹果未透露,相比英伟达等其他AI硬件供应商,苹果有多依赖谷歌的芯片和软件。

因此,本周一在社交媒体X上有评论指出,6月就出过苹果用谷歌芯片的消息,现在我们有了更多关于训练堆栈的细节。

有评论称,苹果并不是讨厌英伟达,只不过TPU的速度更快。还有评论称,TPU速度更快,所以苹果用它是有道理的,当然也可能它比英伟达的芯片更便宜。

本周一媒体评论称,谷歌的TPU最初是为内部工作负载而创建,现在正得到更广泛的应用。苹果用谷歌芯片训练模型的决定表明,在AI训练方面,一些科技巨头可能正在寻找并且已找到英伟达AI芯片的替代品。

华尔街见闻曾提到,上周,Meta的CEO扎克伯格和Alphabet兼谷歌的CEO皮查伊都在讲话中暗示,他们的公司和其他科技业公司可能在AI基础设施方面投资过度,“可能过多投入AI”。但他们同时都承认,如果不这样做,商业风险太高。

扎克伯格说:

“落后的后果是,你在未来10到15年内,都会在最重要的技术上处于不利地位。”

皮查伊说:

AI成本高,但投资不足的风险更大。谷歌可能在AI基础设施上投资过多,主要包括购买英伟达的GPU。即使AI热潮放缓,公司购买的数据中心和计算机芯片也可以用于其他用途。对我们来说,投资不足的风险远远大于投资过度的风险。

原创内容更多>>

全球汽车供应链或面临新一轮冲击,这次原因是AI数据中心 广汽埃安与滴滴自动驾驶联手打造,Robotaxi R2正式交付 Rivian提交新专利:电动独立开启尾门玻璃及物理控制组件 2025年俄罗斯汽车市场多项指标下滑:新车销量、汽车信贷及皮卡销量同比减少 加州累计零排放汽车销量突破250万辆 充电设施持续扩建 九识智能正式进驻阿布扎比,RoboVan开启常态化运营 日元贬值推动丰田加速印度本土化与出口,首款国产电动车即将上市 起亚在韩国下调多款电动车售价以应对市场竞争 为何特斯拉、小米、理想、小鹏都力推“7年超低息”贷款? 6大趋势详解:谁说手机行业没有新东西了? 从“死了么”到合川呆呆,2026年的第一场流量“围猎” 2025年汽车产销量再创历史新高 连续17年稳居全球第一 马斯克:特斯拉将在2月14日后停售FSD,此后仅提供月度订阅方式 “死了么”将更名Demumu,估值已达数千万 1688发布“三保”抢跑计划,王强:AI驱动产业带商家呈现K型分化 荣耀500 Pro MOLLY 20周年款定于1月19日发布 赵长江:自己天天学习华为,最大的挑战“在于我自身” “Arrow Lake Refresh” 双旗舰:英特尔酷睿Ultra 9 290K/290HX Plus处理器现身 王自如回应曾称看董明珠很幸福:到今天都坚定这个观点 欧洲汽车零部件行业持续“失血”,近两年裁员逾10万人 双巨头加码AI!黄仁勋披露要与联想集团联合发布“革命性服务器”,未来2年合作规模再翻5倍 雷军直播拆车后,小米汽车的“王牌”也真正打出来了! OpenAI首款硬件曝光,前苹果传奇设计师操刀 华硕计划CES推出WiFi 8路由器,但相关标准还没确定 三星发布全球首款130英寸Micro RGB电视!支持100% BT.2020色域 firefly萤火虫右舵车量产,首批将发运至新加坡市场 轻舟智航携手奇瑞商用车,打造量产级L4无人物流车 王晓玲接任长安马自达执行副总裁,推动新能源战略落地 美团骑手“不闯红灯”安全激励活动通知,骑手保持零闯灯记录每天可获现金奖励 比亚迪元 UP DM-i(BYD ATTO 2 DM-i)欧洲发布会,并同步发布长续航纯电版(BYD ATTO 2 Comfort)