美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。
苹果基础模型的建模概述苹果官方发布论文
苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。
苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。
一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。
今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。
包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。
心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。
谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。
今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。
谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。
尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。
“虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块‘肥肉’,但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。”潘攻愚分析称。
Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。
新化月报网报料热线:886 2395@qq.com
最近更新
- 苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?2024-07-30
- 数字化技术“赋能” 众邦银行供应链金融生态优势凸显2024-07-30
- 南海农商行再次发出IPO信号,上市之路仍面临诸多考验2024-07-30
- 晋商银行太原富力华庭社区支行终止营业,10日内缴回金融许可证2024-07-30
- 存款“降息”连锁反应立竿见影 银行大额存单48小时内全面断货2024-07-30
- 湖南银行因华融湘江银行遗案受罚250万2024-07-30
- 中煤财险苦熬七年,终迎第二任总经理!中煤集团转让进行中!2024-07-30
- 国寿寿险积极开展反保险欺诈行动,维护行业形象与客户权益2024-07-30
- 永诚财险上半年净利润暴跌80%!逆境时刻新将帅能否力挽狂澜?2024-07-30
- 中国人寿财险深耕田间地头 护航“三农”发展2024-07-30
- 保险业交上半年“成绩单”!2024-07-30
- 上海:集中资源打造兼具投资、运营功能的国有资本投资运营专业平台和高能级基金管理机构2024-07-30
- 港股大众公用盘中一度涨超40% 公告称对大众交通股权投资不会直接影响业绩2024-07-30
- 中金:以旧换新有望拉动下半年大型家电零售恢复增长 看好海信家电、海尔智家及TCL电子2024-07-30
- 芯动联科获华安证券买入评级,业绩持续表现优异2024-07-30
- “价格战”重燃战火?比亚迪方程豹豹5全系降5万 最大降幅近二成2024-07-30
- 上半年国内出游27.25亿人次,总花费2.73万亿元2024-07-30
- 周皓:黄金兼具金融和消费属性,企业应根据市场变化做出调整2024-07-30
- 北京必胜客夏日爆浆榴莲季开启,携手《蛋仔派对》打造跨界合作新体验2024-07-30
- 暑期旅游市场“量涨价跌”:供需调整下的价格理性回归2024-07-30
- 2024中国国际黄金大会:创新驱动绿色发展,共绘蓝图共赢未来2024-07-30
- 制造业向品牌、创新、管理要效益——探究雷士照明的“转型样本”2024-07-30
- 北京画美整形医生王崇源:素人爆改实力派2024-07-29
- 国内冷门赛道头部玩家?深度数科以专业票据“滴灌”实体 奋力谱写票据服务实体经济新篇章2024-07-29
- 成为IBFA认证台球教练:职业生涯的荣耀2024-07-29
- UC奥运频道带你轻松追奥运,赛事资讯实时更新、趣味榜单花式整活2024-07-29
- 产业互联网周报】 OpenAI今年亏损可能达50亿美元;云计算将替代卫星成为巴黎奥运会赛事直播主要方式;美500强企业料因CrowdStrike事件损失542024-07-29
- 雷军:小米汽车目标全球前五 会在合适的时间全球化2024-07-29
- 券商看好长三角新质生产力发展业务机会,加码布局母基金,特色业务打擂台2024-07-29
- 比特币逼近7万大关,6只以太币、比特币现货ETF集体涨超3%2024-07-29