观澜Media

AI技术 · 深度资讯 · 前沿观察

Show HN:对 AI 计算机使用代理的结构化 Python 控制

大多数 CUA 框架要么是黑盒,要么是没有结构的原..

大多数 CUA 框架要么是黑盒,要么是没有结构的原始工具调用。

Orbit 位于两者之间,自然语言控制屏幕,Orbit 让 Python 控制流程。

每个步骤都有自己的模型、预算和类型输出,但在整个会话中共享上下文。

每一步混合廉价和昂贵的模型,从任何屏幕提取结构化数据到 Pydantic 模型中,并在代理遇到困难时引导代理完成任务。

构建在操作系统可访问性树上,而不是屏幕截图。

评论网址:https://news。

来源:HackerNews New

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关于我们

观澜Media

AI技术 · 深度资讯 · 前沿观察。专注科技、AI、互联网领域的深度报道与前沿资讯。

搜索归档

Access over the years of investigative journalism and breaking reports