微软开源 OmniParser ,秒懂屏幕截图

微软开源 OmniParser 的 AI 工具,OmniParser 作为纯视觉基础工具,不依赖额外上下文数据,能理解复杂图形用户界面,结合多种模块可跨平台工作,将屏幕元素转换为结构化数据。它在多个基准测试中表现优越,能提升 GPT-4V 对图标的标记准确率,有效解决当前 GUI 交互模型缺陷,拓宽了智能体应用范围,为开发者提供强大工具。

GitHub地址:
https://microsoft.github.io/OmniParser/

搜索