glTF 2.0 扩展 MPEG_mesh_linking 详解：通过 Shadow Mesh 驱动网格变换与动画-北京尧图网络

图形学【免费下载链接】glTFglTF – Runtime 3D Asset Delivery项目地址https://gitcode.com/gh_mirrors/gl/glTF点击查看免费下载MPEG_mesh_linking是 glTF 2.0 扩展注册表中的一项 Vendor 扩展由 ISO/IEC SC29 WG3MPEG Systems场景描述工作组提出用于在一个 glTF 资产中把依赖网格dependent mesh与阴影网格shadow mesh建立逻辑链接使依赖网格能够复用阴影网格的变换与动画。阅读本文后你将掌握该扩展的设计动机、correspondence/mesh/pose/weights四个核心属性的语义与数据类型约束理解它如何与 glTF 2.0 的accessor、morph target 等核心机制协同工作并能在自己的资产中正确声明与校验这一扩展。扩展背景MPEG-I 场景描述中的网格复用需求MPEG_mesh_linking建立在 ISO/IEC FDIS 23090-14 中它与MPEG_accessor_timed、MPEG_animation_timing、MPEG_audio_spatial、MPEG_buffer_circular、MPEG_media、MPEG_scene_dynamic、MPEG_texture_video、MPEG_viewport_recommended等一同被列为 Vendor 扩展覆盖了动态场景、时序访问、媒体与音频等沉浸式场景描述所需的增强能力。在沉浸式媒体如 MPEG-I 的 6DoF 视频、交互式场景中一个常见的需求是同一份网格数据需要以多种方式被复用或驱动。例如一个高精度的依赖网格希望跟随另一个由动画或变换驱动的网格一起运动而不必重复存贮或重复驱动其变换。MPEG_mesh_linking正是为这一需求提供标准的声明方式——它不修改 glTF 2.0 核心的数据模型而是在现有mesh对象之上增加一个逻辑链接层。核心概念Shadow Mesh 与 Dependent Mesh扩展 README 的 Overview 部分给出了两个关键角色阴影网格shadow mesh指 glTF 资产中普通、常规的网格数据它本身不携带MPEG_mesh_linking扩展完全符合 glTF 2.0 核心规范的定义。它的作用相当于驱动源——承载可供依赖网格复用的变换或形变信息。依赖网格dependent mesh指携带了MPEG_mesh_linking扩展的网格。扩展通过引用阴影网格并附带对应的数据缓冲区使依赖网格能够依靠rely on阴影网格完成变换或动画。换句话说阴影网格作为辅助角色存在于 glTF 资产中其唯一使命就是帮助实现对依赖网格的变换施加application of transformation onto the dependent mesh。扩展本身不引入新的渲染语义而是建立一条链接并指明驱动这条链接所需的数据存放位置。从 JSON Schema 的顶层描述MPEG_mesh_linking.schema.json可以印证这一点——其 description 即为 glTF extension to specify a logical link between two meshes即指定两个网格之间逻辑链接的 glTF 扩展。扩展属性详解扩展挂载在mesh对象的extensions对象之下其声明结构如下表摘自 README 的属性表并对照 Schema 补充了默认行为属性类型说明是否必需correspondenceinteger引用一个accessoraccessors 数组中的索引其缓冲区存放依赖网格与关联阴影网格之间的对应值correspondence values✅ 是meshinteger引用阴影meshmeshes 数组中的索引即与依赖网格建立对应关系的目标网格✅ 是poseinteger引用一个accessor其缓冲区存放与依赖网格关联的节点的变换pose✅ 是weightsinteger引用一个accessor其缓冲区存放应用于阴影网格 morph targets 的权重否extensionsobject扩展专属对象的 JSON 对象否extrasany应用自定义数据否Schema 中明确声明required: [ correspondence, mesh, pose ]即前三者是扩展可用的强制字段weights为可选字段同时遵循 glTF 扩展惯例允许附加属性additional properties allowed。三个integer类型的属性均通过glTFid.schema.json约束其最小值为 0与 glTF 2.0 中所有 ID 型字段的约定一致见 glTFid.schema.json。correspondence定义网格间的对应关系correspondence通过指定accessors数组中的索引来引用一个accessor该 accessor 描述的缓冲区中存放依赖网格与其关联阴影网格之间的对应值。这条对应关系是扩展能够工作的基础——它回答了依赖网格的哪些部分对应阴影网格的哪些部分这一问题。在数据类型上有明确约束type必须为SCALAR标量componentType必须符合 ISO/IEC 23090-14:7.4 的规定具体枚举由该国际标准定义本扩展规范不另行放开。这意味着对应值以标量形式按序遍历存放在 buffer 中其数量与网格顶点/图元数相对应消费端据此建立两网格之间的索引映射。mesh指定阴影网格mesh通过指定meshes数组中的索引来引用阴影网格。被引用的网格本身是普通 glTF 2.0 网格不带本扩展其结构遵循 mesh.schema.json包含一个或多个primitives每个 primitive 由attributes及可选的indices、material、mode、targets构成并可选地携带weights数组对应 morph targets 的默认权重。依赖网格与阴影网格之间可以处于不同的节点层级——扩展只负责声明链接关系阴影网格的节点变换或动画驱动由pose字段引用的数据体现。pose提供依赖网格的变换数据pose通过指定accessors数组中的索引来引用一个accessor该 accessor 描述的缓冲区存放与依赖网格关联的节点的变换。这些变换数据是驱动依赖网格位置、朝向、缩放的直接来源可以来自阴影网格的动画采样结果也可以是运行期动态计算的节点姿态。数据类型约束非常明确componentType必须为FLOAT即常量 5126见 accessor.schema.jsontype必须为MAT44×4 变换矩阵。每个节点对应一个 4×4 齐次变换矩阵因此该 accessor 的count应等于需要驱动的节点数量其bufferView与byteOffset遵循核心规范中 accessor 的对齐与偏移规则。weights驱动阴影网格的 Morph Targets可选weights是唯一可选的数值字段通过引用一个accessor使其缓冲区存放应用于阴影网格 morph targets 的权重。这是为了支持这样一种场景依赖网格不仅要跟随阴影网格的刚体变换还要驱动阴影网格上的变形目标morph targets——即利用阴影网格的形变来带动依赖网格的形变。其数据类型约束为componentType必须为FLOATtype必须为SCALAR。权重值的个数应与阴影网格 morph target 的数量一致——这与 glTF 2.0 核心规范中 mesh.schema.json 对顶层weights数组的约定数组元素数量必须与 morph targets 数量一致相呼应阴影网格 morph targets 本身在 mesh.primitive.schema.json 中由targets数组定义每个 target 以POSITION、NORMAL、TANGENT语义映射到位移 accessor。当weights缺省时可回退到阴影网格自身的 morph target 权重即 mesh 顶层weights属性。extensions 与 extras与 glTF 2.0 所有对象一致参考 glTFProperty.schema.json 的扩展机制说明MPEG_mesh_linking自身也预留了extensionsobject类型允许在扩展内部再嵌套其他扩展专属数据如与MPEG_animation_timing等 MPEG 系列扩展联动extrasany类型用于存放应用自定义数据不会影响扩展语义。两者均为可选Schema 中对应extensions: {}、extras: {}的宽松声明。资产声明示例下面是一个基于 MPEG_mesh_linking.schema.json 字段约束构造的示意性 glTF 片段用于说明扩展在 JSON 资产中的挂载方式具体索引与 buffer 布局需按实际资产填充{ asset: { version: 2.0 }, extensionsUsed: [ MPEG_mesh_linking ], meshes: [ { name: shadowMesh, primitives: [ { attributes: { POSITION: 0, NORMAL: 1 }, targets: [ { POSITION: 2 } ] } ], weights: [ 0.0 ] }, { name: dependentMesh, primitives: [ { attributes: { POSITION: 3, NORMAL: 4 } } ], extensions: { MPEG_mesh_linking: { correspondence: 5, mesh: 0, pose: 6, weights: 7 } } } ], accessors: [ { bufferView: 0, componentType: 5126, count: 4, type: VEC3 }, { bufferView: 1, componentType: 5126, count: 4, type: VEC3 }, { bufferView: 2, componentType: 5126, count: 4, type: VEC3 }, { bufferView: 3, componentType: 5126, count: 4, type: VEC3 }, { bufferView: 4, componentType: 5126, count: 4, type: VEC3 }, { bufferView: 5, componentType: 5126, count: 4, type: SCALAR }, { bufferView: 6, componentType: 5126, count: 1, type: MAT4 }, { bufferView: 7, componentType: 5126, count: 1, type: SCALAR } ] }要点说明扩展名称MPEG_mesh_linking必须出现在顶层extensionsUsed数组中若加载器不支持即无法正确驱动依赖网格则还应列入extensionsRequired参见扩展注册表的机制说明mesh指向meshes[0]阴影网格而扩展本身挂载在meshes[1]依赖网格上correspondenceSCALAR、poseFLOAT MAT4、weightsFLOAT SCALAR三个 accessor 的数据类型严格遵守扩展规范若资产未提供weights则可回退使用阴影网格顶层weights数组驱动其 morph targets。工作机制与典型使用流程综合扩展概述与字段语义依赖网格的驱动链路可以概括为声明链接在依赖网格的extensions.MPEG_mesh_linking中通过mesh字段指向阴影网格建立两网格之间的逻辑链接建立对应通过correspondence引用的 SCALAR accessor读取依赖网格与阴影网格之间的顶点/元素对应值确定变换的施加范围与映射方式提供姿态通过pose引用的 FLOAT/MAT4 accessor获取与依赖网格关联节点的 4×4 变换矩阵。这些矩阵可由阴影网格节点动画、MPEG 系列时序扩展或运行期逻辑产生依赖网格据此完成位姿同步驱动形变可选当阴影网格定义了 morph targets 时通过weights引用的 FLOAT/SCALAR accessor 提供变形权重使依赖网格同步跟随阴影网格的形变渲染消费运行期渲染器 / 播放器将上述变换与形变作用到依赖网格上实现复用一个网格的动画驱动另一个网格的效果。已知实现与生态状态Known ImplementationsREADME 中列出的已知实现为 ISO/IEC WD 23090-24《Coded representation of immersive media — Part 24: Conformance and Reference Software for Scene Description for MPEG Media》即 MPEG 场景描述的一致性测试与参考软件用于验证该扩展等 MPEG 系列扩展的实现是否符合规范。注册表状态在本仓库的扩展注册表中MPEG_mesh_linking被列为Vendor 扩展Vendor 前缀不属 Khronos IP 框架覆盖与其余 MPEG 系列扩展并列。它面向 MPEG-I 沉浸式媒体场景描述这一特定领域并非通用渲染引擎的普遍依赖项。兼容性与注意事项依赖版本扩展针对 glTF 2.0 规范编写所有引用对象accessors、meshes均遵循 glTF 2.0 核心 schema扩展前缀与命名MPEG前缀是经注册的厂商前缀见 Prefixes.md名称遵循PREFIX_scope_feature的推荐结构加载器行为若加载器不支持本扩展依赖网格将无法正确获得变换/形变驱动。是否将其列入extensionsRequired取决于资产作者——若缺少该扩展会导致资产无法按预期渲染则必须列入若存在可接受的核心 glTF 回退表现则仅需列入extensionsUsed数据合规correspondence的 componentType 由 ISO/IEC 23090-14:7.4 另行规定pose/weights必须为FLOAT对应type分别为MAT4/SCALAR资产制作时应严格遵循否则将无法通过参考软件ISO/IEC 23090-24的一致性验证。延伸阅读扩展规范全文extensions/2.0/Vendor/MPEG_mesh_linking/README.mdJSON Schemaextensions/2.0/Vendor/MPEG_mesh_linking/schema/MPEG_mesh_linking.schema.jsonglTF 2.0 扩展注册表extensions/README.md核心 accessor 定义specification/2.0/schema/accessor.schema.json核心 mesh 与 morph targets 定义specification/2.0/schema/mesh.schema.json、specification/2.0/schema/mesh.primitive.schema.json底层标准依据ISO/IEC FDIS 23090-14Scene Description、ISO/IEC WD 23090-24Conformance and Reference Software for Scene Description本扩展的完整使用语义特别是correspondence的具体对应规则与componentType枚举由 ISO/IEC 23090-14 标准正文定义仓库内文档与 Schema 仅提供 glTF 集成层面的声明与约束生产环境落地时建议结合 MPEG 场景描述参考软件进行一致性验证。赞分享图形学【免费下载链接】glTFglTF – Runtime 3D Asset Delivery项目地址https://gitcode.com/gh_mirrors/gl/glTF点击查看免费下载相关推荐AVR-HAL核心组件解析从通用抽象到Arduino专用实现AVR HAL核心组件解析从通用抽象到Arduino专用实现 AVR HAL是针对AVR微控制器的嵌入式硬件抽象层HAL实现它基于 embedded h嵌入式Unity轻量级网格动画库——Mesh-AnimationUnity轻量级网格动画库——Mesh Animation 1. 项目基础介绍 Mesh Animation 是一个开源项目旨在为Unity开发提供一个轻量级3D渲染图形学游戏开发Easy-Vibe 数据模型全景文档、图、时序与向量四类模型的选型与实战Easy Vibe 数据模型全景文档、图、时序与向量四类模型的选型与实战 ::: tip 导读本文是 Datawhale easy vibe 学习项目「5图形学上一篇如何快速集成UIScrollView-InfiniteScroll3分钟实现iOS列表无限加载下一篇3步掌握CDS APIPython气候数据下载终极指南创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考

glTF 2.0 扩展 MPEG_mesh_linking 详解：通过 Shadow Mesh 驱动网格变换与动画

相关推荐

Mooncake 鲲鹏 Kunpeng UB 传输层（Unified Bus Transport）构建与使用指南

Qtile 屏幕配置完全指南：Screen、Bar、Widget 与多显示器布局实战

八. SCL 模拟量平均值滤波（乞丐版）

更多资讯

STM32F407+OV5640图像采集调试实战：从接线到显示全流程解析

Agent-Reach 实战：在命令行中运行 AI Agent 的完整指南

OpenShell：从体验断层到效率提升的Windows经典开始菜单定制指南

儿童推理动画《神探杰克鼠》：从嗅觉破案到角色设计的创作全拆解

cmder清屏完全指南：命令、快捷键与底层原理解析

上下文模式（Context-Mode）工程实践：从设计到排查的完整指南

今日更新

Multisim仿真NE555 PWM控制器：从搭电路到调占空比全流程

S32K312 AUTOSAR BSW开发实战：从配置踩坑到烧录交付

双目视觉三维人脸重建：从视差图到点云粗配准全流程解析

本周精选

CMOS设计三大物理效应：体效应、沟道长度调制与亚阈值导电

微信小程序在线阅读毕设全解析：Java后端+MySQL+避坑实战

Android音频问题五层分析法：从App到Codec的系统化诊断

本月热门

我发现了一个新思路：用 Remotion + Claude Code 像写代码一样自动化生成短视频

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式：TaoToken 统一 Key 配置与验证

2026 大模型集体涨价：用 Python 做企业 Token 成本测算与选型避坑（附配置）

读完文章，想聊聊您的网站？