Gen3DEval Replication

3D 生成评测平台。输入真实 3D 资产、多视角渲染图和 prompt，输出几何指标、视觉评测分数与 pairwise 偏好结果。

启动

uv sync
cp .env.example .env
uv run uvicorn web.app:app --host 127.0.0.1 --port 7860 --reload

默认视觉评测模型：

• qwen3-vl-plus
• qwen3-vl-flash

本地 Opik

cp .env.opik.example .env.opik
docker compose --env-file .env.opik -f docker-compose.opik.yml up -d

数据集

• data/processed/manifest_120.jsonl
• data/processed/manifest_render10.jsonl
• data/processed/manifest_render1.jsonl
• data/processed/manifest_smoke3.jsonl
• data/processed/pairs_smoke3.jsonl

评测

uv run python scripts/score_assets.py --manifest data/processed/manifest_render10.jsonl --limit 1
uv run python scripts/evaluate_pairwise.py --pairs data/processed/pairs_smoke3.jsonl --limit 1

指定模型：

uv run python scripts/score_assets.py \
  --manifest data/processed/manifest_render10.jsonl \
  --model qwen3-vl-plus \
  --limit 1

前端

http://127.0.0.1:7860