Scene Synth
基于三维语义理解与生成式智能设计的多领域3DAgent平台
理解、生成并构建三维世界的智能体
SceneSynth Agent 是 SceneSynth 的交互与任务执行核心。用户可以用自然语言描述目标,Agent 结合图像、三维场景和专业上下文理解任务,自动规划步骤并调用 Skills 与 MCP 工具完成工作。
桌面端内置 AI 生 3D 功能,可从文字或参考图片生成三维资产;生成结果还能继续进入场景搭建、语义分析和工具执行流程,让“理解 3D—生成 3D—使用 3D”形成统一闭环。
嵌入 BIMBase 的三维工程智能插件
SceneSynth 以 C# 插件方式接入 BIMBase,在原生工作台中提供统一菜单和 Agent 侧边栏,直接读取当前工程、选中构件、原生属性与三维视图。
插件将数字孪生、语义关系、碰撞检测、合规审查和参数化建模整合到同一操作入口,并通过 MCP 向 Agent 提供受控工程工具。
为 BIMBase 构建完整的 AI 适配层
不停留在文件导入导出,而是直接连接模型上下文、原生构件与工程操作
Selection + View + Native Data
模型上下文感知
Agent 自动读取当前选中对象、图形 ID、原生属性和当前视图截图,不需要用户在对话中重复描述现场
IFC → RelATok → BIMSIR
工程数字孪生
构建、更新、查看、校正四个入口;保留历史快照、来源、置信度、关系与人工修正状态
AABB + 三角网格 / BVH
碰撞与合规审查
先用真实包围范围粗筛,再以网格精检;规则结果绑定对象、依据和视图定位
pyp3d + Confirm + Readback
参数化建模与安全执行
32 个独立 Python 构件入口;支持受控放置和批量场景搭建,修改前明确确认,执行后回读对象状态
SceneSynth Agent 如何工作
理解:建立工程上下文
先读取当前选择、原生属性、真实几何和当前视图;需要时再调取数字孪生与 RelATok 候选证据
规划:选择专业工具
大模型将目标拆解为工程步骤,从 67 个 MCP 工具中选择读取、截图、孪生、碰撞或参数化建模能力
执行与验证:形成闭环
写操作受白名单和确认机制约束;执行完成后重新读取对象与视图,失败时给出可定位的诊断信息
RelATok 为 Agent 提供可复核的三维语义
当任务需要补充语义时,Agent 可将 BIMBase 所选构件受控导出为 IFC;RelATok 从网格采样点云并生成 BIMSIR 0.1。预测只作为候选证据,不覆盖原生工程事实。
BIMBase / IFC
所选构件受控导出
网格与点云
每构件采样 4096 点
RelATok 推理
类别 / 部件 / 关系候选
多源证据融合
原生事实 / 几何 / 规则 / 校正
孪生 JSON / BIMSIR
Agent / 审查 / 历史版本
原生事实优先
BIMBase 图形 ID、IFC 类型、原生参数和确定性几何结果作为工程事实保留。
可校准模型候选
RelATok 输出类别、功能部件、Top-K 和置信度;低置信度结果不会静默写入事实层。
真实几何关系
使用真实 AABB 做候选筛选,以三角网格 / BVH 精检碰撞并生成可定位证据。
截图辅助复核
Agent 可读取 BIMBase 客户区截图理解整体布局;判断仍以原生属性和几何证据为主。
标准数据与历史
BIMSIR 0.1 与孪生 JSON 记录来源、证据、关系、复核状态和可查询历史快照。
本地双运行时部署
RelATok 使用独立 Python 3.10+;pyp3d 使用 BIMBase Python 3.7.9,并提供相对路径配置与环境检测。
RelATok 当前验证口径
以下为目标域双专家测试与温度校准结果,不作为生产环境 SLA;模型输出在系统中始终作为可复核候选。
设计原则
SceneSynth 的真实运行证据
从 Agent 侧边栏、工程工具执行到语义模型评估,以下图片均来自当前实机运行或评审材料,不以概念效果图代替完成成果。
插件菜单、构件属性与 Agent 同屏
指定的 BIMBase 展示图,记录 SceneSynth 插件、参数化组件属性和侧边栏能力在同一原生工作台中的运行状态。
三角网格 / BVH 与问题构件定位
以真实构件几何完成窄阶段检测,并在 BIMBase 中高亮外部问题构件,支持结果导出和后续复核。
来源、置信度、几何与历史版本
孪生数据窗口展示构件身份、模型预测、系统归属、数据状态和几何可用性,并提供历史快照和 JSON 导出。
IFC 几何到点云语义预测
对比原始 IFC 几何、模型输入点云、IFC 参考类别和双专家预测,用于分析预测一致与不一致的构件区域。
ECE 从 0.1880 降至 0.1079
温度缩放不改变类别排序,只校准预测概率;高置信度样本自动通过,其余结果保留为候选并进入复核。
对象—功能接口—关系语义解析
展示真实样本的对象级划分、INLET / OUTLET 接口与关系候选;不成立的候选由人工否定并保留证据。