4 月 23 日消息，智元機(jī)器人發(fā)布并開(kāi)源基于仿真功能的模型評(píng)測(cè)和驗(yàn)證工具Genie Sim Benchmark，專(zhuān)注為具身 AI 模型提供性能測(cè)試和優(yōu)化支持。

　　智元機(jī)器人表示，作為 Genie Sim（智元仿真平臺(tái)）的開(kāi)源評(píng)測(cè)版本，GenieSimBenchmark 是智元繼開(kāi)源百萬(wàn)真機(jī)數(shù)據(jù)集和海量仿真數(shù)據(jù)集后，又一里程碑式的開(kāi)源項(xiàng)目。

　　Genie Sim 宣稱(chēng)能夠還原機(jī)器人的操作環(huán)境，為多樣化任務(wù)提供標(biāo)準(zhǔn)化的自動(dòng)評(píng)測(cè)體系，衡量模型在各種場(chǎng)景下的表現(xiàn)，加速算法迭代流程，同時(shí)減少模型評(píng)測(cè)對(duì)昂貴物理硬件的依賴(lài)，降低測(cè)試成本。

▲Genie Sim 仿真框架

　　Genie Sim Benchmark 建立了一套仿真基準(zhǔn)和標(biāo)準(zhǔn)化評(píng)估體系，支持從基礎(chǔ)到高級(jí)的多樣化操作任務(wù)自動(dòng)評(píng)測(cè)，本次開(kāi)源十余個(gè)高難度多樣化的評(píng)測(cè)任務(wù)，所有代碼均已在 GitHub 完整開(kāi)源。

　　開(kāi)源倉(cāng)庫(kù)不僅包含標(biāo)準(zhǔn)化的測(cè)試場(chǎng)景，支持用戶(hù)直接調(diào)用評(píng)測(cè)任務(wù)驗(yàn)證算法性能，也支持開(kāi)發(fā)者靈活定制。用戶(hù)可以基于 500 + 高保真物體資產(chǎn)庫(kù)快速搭建新場(chǎng)景，并通過(guò)評(píng)測(cè)體系自定義評(píng)測(cè)步驟和指標(biāo)，為算法研發(fā)提供從快速驗(yàn)證到精準(zhǔn)評(píng)測(cè)的全流程支持，提升開(kāi)發(fā)效率。