223项作业与2651条评估准则:阿里Qwen团队开源BlenderWorld,为AI设立3D建模挑战

IT之家10月17日消息,阿里Qwen团队在10月14日推出了BlenderWorld的开源版本,该基准旨在评估视觉智能体在Blender中执行实际3D创作任务的能力。 此项目遵循MIT许可证,其代码及数据集已分别在GitHub、Hugging Face和ModelScope上开放。

与常规的“生成一幅图像”不同,BlenderWorld要求AI提交一个可编辑的.blend工程文件,并依据需求输出渲染图像、视频或模型导出文件。在此测试中,模型不仅需呈现美观的画面,还需构建材质、几何结构、灯光、相机等元素,形成可供设计师后续修改的3D场景。

该基准涵盖223项任务与2,651条标准,涉及产品、建筑、自然环境、角色、动画及科学可视化等9个主要类别、22个子类别。其中,78项任务仅依赖文字说明,130项任务提供图像配合文字,15项任务提供视频配合文字;另有59项任务附带尺寸、材质或相机参数等规格文件。

评估方式同样严格:系统会从8个自适应视角渲染提交的Blender项目,并结合场景检查、2,651条任务专属二元评分标准,以及8项整体视觉质量评分。最终得分由规则符合度与视觉质量各占50%权重计算得出。

该项目现已提供完整的安装、生成、打包和评估流程,支持开发者将任何生成框架接入测试。仓库信息显示其使用Blender 4.2.10,并需要Linux、Python 3.10及以上环境;评估环节还需配置具备视觉能力的模型服务。

IT之家附上参考

  • 点此前往GitHub访问BlenderWorld