Video2GUI

Video2GUI 是一个用于合成大规模交互轨迹以支持通用图形用户界面代理预训练的项目。它通过深度学习技术生成大量交互数据，这些数据可以用来训练更加智能和适应性强的GUI代理。该项目使用JavaScript开发，并计划发布名为WildGUI的大规模数据集。Video2GUI适用于需要提升人机交互体验、增强软件自动化能力或研究自然语言处理与图形界面结合的应用场景。