AgentKit
Tài liệuBộ kitTham chiếu CLIỨng dụng Desktop
BetaBạn đang đọc tài liệu kênh beta (3.0.0-beta.15). Tính năng có thể thay đổi trước bản stable tiếp theo.Chuyển sang stable →

eval

ak eval triage-benchmark

Đánh giá phân loại finding đã đóng băng dựa trên nhãn đã xác minh cục bộ.

Đánh giá phân loại finding đã đóng băng dựa trên nhãn đã xác minh cục bộ.

Dùng ak eval triage-benchmark với đối số và tùy chọn dưới đây. Phần help nguyên bản giữ nguyên thuật ngữ, cú pháp, tác động và điều kiện thực thi của CLI để đối chiếu chính xác.

Contract và help của lệnh

Evaluate frozen finding triage against local verified labels

Synopsis

Evaluate frozen finding triage against local verified labels. Input must contain compact reviewed facts; raw scanner output is not accepted.

Effects: Reads local frozen replay and labels only; never calls a provider or runs review commands.

Exit status: 0 report generated; inspect safety and coverage 1 invalid input or configuration

ak eval triage-benchmark <input.json|-> [flags]

Examples

  ak eval triage-benchmark input.json --json
  ak eval triage-benchmark - --json

Options

  -h, --help             help for triage-benchmark
      --json             Emit machine-readable JSON (implies --no-interactive)
      --no-interactive   Disable interactive prompts (CI-safe)
  -q, --quiet            Suppress non-error output on stderr
  -V, --verbose          Extra diagnostic output on stderr (loses to --quiet)
  -y, --yes              Assume yes for all prompts

SEE ALSO

  • ak eval - Run controlled skill and agent evaluations