西部郑宏达

苹果推出ReALM模型

苹果推出ReALM模型，旨在让大模型读懂屏幕的能力。并推出了80M/250M/1B/3B四种规模的模型。苹果指出，大语言模型在屏幕实体、后台实体等非对话实体的理解能力不行。

屏幕实体指用户在电子屏幕上看到的图标、按钮、图片、视频等。后台实体指电子设备的操作系统或应用程序中运行的、对用户不可见的进程和服务。更多纪要内容搜索：散户调研

苹果ReALM模型的效果是可以让AI理解用户在屏幕上看到的内容和操作，对屏幕实体和后台实体有了足够强的理解能力，那用户可以发起的智能交互范畴就会明显扩大！

苹果目前在为下一代旗舰手机所做的准备： 1、把Google Gemini模型放进手机 2、传言收购基于AI的搜索引擎Perplexity 3、推出ReALM模型，使得AI更理解手机屏幕和app程序。