跳过主要内容
广告OpenFree logo推广你的产品触达更多潜在用户,助力产品增长与收益提升。投放广告
Favicon of Harbor

Harbor

Free 等级项目

Harbor 是由 Terminal-Bench 创作者推出的框架,用于在容器环境中指定沙箱化智能体任务,以评估和优化智能体与语言模型。它支持评估 Claude Code、OpenHands、Codex CLI 等任意智能体,构建和分享基准与环境,通过 Daytona、Modal、LangSmith、Blaxel、Novita Sandbox、Tensorlake 和 Runta 等提供方并行开展数千个环境的实验,并生成用于 RL 优化的 rollout。

访问 harbor-framework/harbor

项目简介

Harbor 是来自 Terminal-Bench 创作者的框架,用于指定沙箱化智能体任务以进行评估和优化。它可以评估 Claude Code、OpenHands、Codex CLI 等任意智能体,构建和分享基准与环境,并行运行数千个环境中的实验,并生成用于 RL 优化的 rollout。

核心功能

  • 可评估 Claude Code、OpenHands、Codex CLI 等任意智能体;可构建和分享自定义基准与环境;可通过 Daytona、Modal、LangSmith、Blaxel、Novita Sandbox、Tensorlake 和 Runta 等提供方,在数千个环境中并行开展实验;可生成用于 RL 优化的 rollout;是 Terminal-Bench-2.0 的官方 harness。

适用场景

  • 在本地用 Docker 运行 Terminal-Bench-2.0 等基准,或在 Daytona 等云提供方上运行;在受支持数据集上评估任意智能体与语言模型;探索 SWE-Bench 和 Aider Polyglot 等第三方基准;生成用于 RL 优化的 rollout。

快速开始

  • 使用 uv tool install harbor 或 pip install harbor 安装 Harbor。运行 Terminal-Bench-2.0 示例前设置 ANTHROPIC_API_KEY,然后可使用 harbor run --dataset terminal-bench@2.0 --agent claude-code --model anthropic/claude-opus-4-1 --n-concurrent 4。使用 harbor run --help 查看受支持智能体与选项;使用 harbor datasets list

部署与要求

  • 本地基准运行使用 Docker。云运行可通过 --env 标志使用 Daytona 等提供方。Anthropic 模型需设置 ANTHROPIC_API_KEY;Daytona 云运行需设置 DAYTONA_API_KEY。

采用前须知

  • 许可证:Apache-2.0。在使用、修改或分发项目前,请确认其具体条款。

评论

登录 后发表评论。

更多类似 Harbor 的项目

Favicon of elizaOS

elizaOS

Free 等级项目星标数: 19.8K

开源智能体操作系统与 TypeScript 框架

智能体框架

elizaOS 是用于自主 AI 智能体的开源 TypeScript 框架与产品栈。其单一仓库包含核心运行时、面向 Web、桌面和移动端的 Eliza 应用、CLI、云服务、原生桥接、第一方插件,以及 Linux 和 Android 发行工具。

Favicon of Poki

Poki

Free 等级项目星标数: 0.5K

让 AI 代理像你一样操作真实 iPhone

智能体框架

Poki 是开源的本地 MCP 服务器与代理,让 AI 代理像你一样操作真实 iPhone。它从 Mac 控制 iPhone,无需越狱或额外硬件;通过核验的执行轨迹会编译为路线,使同类任务在重复执行时走更短路径。

Favicon of Rivet

Rivet

Free 等级项目星标数: 6.2K

面向智能体工作负载的编排器

智能体框架

Rivet 是一个快速、高密度且可扩展的编排器,适用于各种智能体工作负载。它可将智能体、工作流和沙箱作为持久化 Actor 运行,为 AI 智能体、协作应用和持久执行提供有状态原语。