标签:中科院
N拜拜了GUI!中科院团队“LLM友好”计算机使用接口来了
(由多段落组成): 近年来,随着大模型智能体(LLM Agent)在自动化任务中的广泛应用,其与计算机图形界面(GUI)的交互瓶颈日益凸显。尽管AI能力不断提升,但在实际操作中,许多Agent仍频繁“翻车”,执行效率低下、成功率不高。中国科学院软件研究所的一项突破性研究揭示:问题根源并非模型不够聪明,而是我们沿用了40多年的图形用户界面(GUI)本身——它为人类设计,却与大语言模型的能力结构严重错配。 传统GUI采用的是“命令式”交互模式,即用户必须通过一系列精确的点击、拖拽和导航来完成目标。这种模式依赖于视觉识别...