苹果取得技术突破：可在 iPhone 上运行大型语言模型

图片地址：https://img.ithome.com/newsuploadfiles/2023/12/1149e9e4-641e-4531-a15e-89c70913cc58.jpg?x-bce-process=image/format,f_auto

IT之家 12 月 21 日消息，苹果的人工智能研究人员表示，他们已取得一项重大突破，通过一种创新的闪存利用技术，成功地在内存有限的 iPhone 和其他苹果设备上部署了大型语言模型（LLM）。这一成果有望让更强大的 Siri、实时语言翻译以及融入摄影和增强现实的尖端 AI 功能登陆未来 iPhone。近年来，像 ChatGPT 和 Claude 这样的 LLM 聊天机器人风靡全球。它们能够进行流畅的对话、撰写不同风格的文本，甚至生成代码，展现出强大的语言理解和生成能力。然而，这些模型有一个致命弱点：它们极其“吃”数据和内存，普通手机根本无法满足其运行需求。为了突破这一瓶颈，苹果研究人员开辟了一条新路，将目光投向了手机中普遍存在的闪存，也就是储存应用和照片的地方。在题为“闪存中的 LLM：利用有限内存实现高效的大型语言模型推理（LLM in a flash: Efficient Large Language Model