IT之家 10 月 17 日消息,阿里 Qwen 团队在 10 月 14 日发布了 BlenderWorld 开源项目,这是一个专门评估视觉智能体在 Blender 中执行真实 3D 创作任务的基准测试。 该项目采用 MIT 许可证,相关代码和数据集已同步上传至 GitHub、Hugging Face 和 ModelScope 平台。
与常规的“生成一张图片”不同,BlenderWorld 要求 AI 输出一个可编辑的 .blend 工程文件,并根据需求提供渲染图、视频或模型导出文件。在此测试中,模型不能仅仅呈现美观的画面,还需要构建出材质、几何结构、灯光、相机等元素,形成一个可供设计师后续修改的 3D 场景。
该基准测试包含 223 个任务和 2,651 条评估标准,涵盖产品、建筑、自然环境、角色、动画和科学可视化等 9 个大类、22 个子类。其中,78 个任务仅提供文字描述,130 个任务提供图片加文字,15 个任务提供视频加文字;此外,还有 59 个任务附带尺寸、材质或相机参数等规格文件。
评估过程相当严格:系统会从 8 个自适应视角渲染提交的 Blender 项目,并结合场景检查、2,651 条任务专属的二元评分标准,以及 8 项整体视觉质量评分。最终成绩由规则符合度与视觉质量各占 50% 的加权计算得出。
该项目现已提供完整的安装、生成、打包和评估流程,支持开发者将任意生成框架接入测试。仓库显示其基于 Blender 4.2.10,并需要 Linux 和 Python 3.10 及以上环境;评估环节还需配置具备视觉能力的模型服务。用户通过开云官方网站在线登陆后,可便捷获取相关资源。
IT之家附上参考