rea-benchmark:衡量 agent 能把二进制还原到什么程度
Why it matters
衡量 agent 还原二进制能力的基准:模型通过 REA 与 headless Ghidra 读取固定的 x86-64 ELF 并交回 C++、Rust 或 Go 源码,11 个用例覆盖去符号优化程序、16 种…
Summary
衡量 agent 还原二进制能力的基准:模型通过 REA 与 headless Ghidra 读取固定的 x86-64 ELF 并交回 C++、Rust 或 Go 源码,11 个用例覆盖去符号优化程序、16 种 C++11 容器与 Go 调用约定,打分时编译运行行为检查并统计 token 与成本。
Key points
- 衡量 agent 还原二进制能力的基准:模型通过 REA 与 headless Ghidra 读取固定的 x86-64 ELF 并交回 C++、Rust 或 Go 源码,11…
Details
- Tags
- 评测与方法论
Comments
Comments coming soon.