尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
LTX-2.5 两阶段超分工作流:ltx-2.5-mlx-q8 中空间 2x 与时间 2x 上采样器原理详解
LTX-2.5 两阶段超分工作流ltx-2.5-mlx-q8 中空间 2x 与时间 2x 上采样器原理详解在ltx-2.5-mlx-q8仓库中LTX-2.5 两阶段超分工作流由两个独立的潜空间上采样器组成spatial_upscaler_x2空间 2x 上采样和temporal_upscaler_x2时间 2x 上采样。它们配合 48 层音视频 DiT 主模型先放清晰再放流畅是 Apple Silicon 上以小显存跑出高分辨率、高帧数视频的核心方案。为什么需要两阶段超分先懂原理再动手LTX-2.5 的 DiT 直接在 128 通道的三维潜空间3D Latent中生成视频潜空间分辨率远小于像素分辨率。一次性生成高分辨率长视频显存和耗时都会指数级上升。两阶段超分的思路是第一阶段低分辨率生成— 用较小的几何尺寸如 512×288跑 DiT得到底子视频第二阶段潜空间放大— 用两个专用上采样网络把潜空间在空间维度放大 2 倍、时间维度放大 2 倍最后由 VAE Decoder 解码成像素视频。这样做的好处是DiT 只需处理低分辨率 token而细节补充交给轻量得多的上采样器完成。仓库 README.md 的实测显示int8 文本编码器 流式加载后整次运行峰值显存可压到 14.6 GB这正是小机器能跑通该工作流的前提。组件速览仓库里都有什么文件作用spatial_upscaler_x2_v1_1.safetensors空间 2x 上采样器权重spatial_upscaler_x2_v1_1_config.json空间上采样器结构配置temporal_upscaler_x2_v1_0.safetensors时间 2x 上采样器权重temporal_upscaler_x2_v1_0_config.json时间上采样器结构配置vae_decoder.safetensors潜空间 → 像素的最终解码器vae_decoder_pruna.safetensorsPrunaAI 精简版解码器解码约快 2 倍gemma4-12b-ltx-v1/int8 量化文本编码器13.6 GB vs 23.8 GB两个上采样器都叫LatentUpsampler区别只在往哪个维度放大。第一阶段空间 2x 上采样器如何工作打开 spatial_upscaler_x2_v1_1_config.json关键参数一目了然参数值含义_class_nameLatentUpsampler潜空间上采样网络in_channels128与 DiT 潜空间通道数对齐见 config.json 的in_channelsmid_channels1024内部工作通道数决定细节生成能力num_blocks_per_stage4每级残差块数量dims3作用于三维张量时间 × 高 × 宽spatial_upsampletrue只放大空间维度spatial_scale2.0高、宽各放大 2 倍rational_resamplerfalse不做有理数重采样不需要原理上它把 DiT 输出的 128 通道潜变量送入 1024 通道的中间特征流用 4 组块逐级提取高频细节最后以spatial_scale: 2.0将高宽同时翻倍——像素分辨率随之提升 4 倍面积而 DiT 本身从未处理过这些新像素。第二阶段时间 2x 上采样器如何工作temporal_upscaler_x2_v1_0_config.json 的结构几乎相同但方向完全相反参数值含义mid_channels512比空间版小一半任务更轻temporal_upsampletrue只放大时间维度spatial_scale1.0空间尺寸保持不变rational_resamplertrue使用有理数重采样插帧rational_resampler: true是关键差异时间维度的插值不是简单复制帧而是按有理数间隔对相邻帧做重采样从而在帧率翻倍如 24 fps → 48 fps的同时保持运动平滑。由于插帧不需要像补细节那样强的表征能力mid_channels降到 512 即可。两个上采样器在 LTX-2.5 流水线中的位置结合 embedded_config.json 中AVTransformer3DModel的定义完整数据流为文本编码—gemma4-12b-ltx-v1文本编码器 connector.safetensors 连接器生成条件向量DiT 去噪— 48 层 TransformerRoPE 位置编码上限[20, 2048, 2048]即时间维 20 帧、空间维各 2048 潜格在低分辨率潜空间生成视频空间 2x—spatial_upscaler_x2_v1_1把潜空间高宽翻倍时间 2x—temporal_upscaler_x2_v1_0把帧数翻倍VAE 解码— 由 vae_decoder.safetensors或更快的 Pruna 版输出像素视频vocoder.safetensors 与 audio_vae.safetensors 处理音轨。 两个阶段互相独立、可单独使用只想要更清晰的画面就只跑空间上采样只想要更流畅的运动就只跑时间上采样。低显存实战技巧让两阶段超分跑进 24 GBint8 文本编码器是刚需本仓库存在的意义就是把编码器从 bf16 量化到 int8组大小 64、embed_tokens刻意保留 bf16峰值显存从约 24.8 GB 降到 14.6 GB搭配 Pruna 解码器vae_decoder_pruna.safetensors 解码约快 2 倍把 704×512×121 档位的解码峰值从 21.1 GB 压到 14.5 GB超预算的换页运行直接变成可运行记住地板效应LTX-2.5 峰值显存由编码器决定、与几何尺寸几乎无关256×256×9 与 512×288×121 的峰值差不到 0.01 GB所以省显存靠换编码器而不是缩分辨率量化与精度分离int8 编码器改变的是条件信号输出视频与 bf16 版不同但同样有效官方盲测含人脸特写判为可接受不必追求逐比特一致。常见问题两阶段超分 FAQQ为什么上采样器要在潜空间做而不是解码成像素再放大A潜空间只有 128 通道、尺寸是像素的 1/8 左右计算量小得多且上采样后统一交给 VAE 解码保证空间和时间两次放大共享同一套解码口径。Q文件名里的x2和v1_1是什么意思Ax2表示放大倍数2 倍v1_1/v1_0是各自的版本号——空间版迭代到 1.1时间版仍是 1.0两者可独立升级。Q能否把两次 2x 串成 4xA技术上可以链式调用但每多一级放大细节外推的不确定性都会叠加官方默认工作流就是各 2 倍一次建议先按标准档位验证效果。总结ltx-2.5-mlx-q8的两阶段超分工作流把放大拆成两个各司其职的潜空间网络空间 2x 上采样器负责细节时间 2x 上采样器负责帧率。配合 int8 编码器与 Pruna 解码器24 GB 显存的 Apple Silicon 也能完整跑通这套 LTX-2.5 高分辨率视频生成流程——先看清每个组件的参数含义再按自己的显存档位组合就是最稳的上手路径。创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
RELATED

相关推荐

ltx-2.5-mlx-q8 内存优化实战:int8 文本编码器 + DiT 流式加载,峰值压到 14.6GB 的完整方案

ltx-2.5-mlx-q8 内存优化实战:int8 文本编码器 + DiT 流式加载,峰值压到 14.6GB 的完整方案

ltx-2.5-mlx-q8 内存优化实战:int8 文本编码器 DiT 流式加载,峰值压到 14.6GB 的完整方案 ltx-2.5-mlx-q8 是面向 Apple Silicon(MLX)的 LTX-2.5 文生视频 内存优化组件全集:用 int8 量化文本编码器 搭配 DiT 流式加…

📅 2026/10/30 2:24:49
深入 ltx-2.5-mlx-q8 量化配方:int8 group 64 完整拆解,embed_tokens 为何必须保持 bf16

深入 ltx-2.5-mlx-q8 量化配方:int8 group 64 完整拆解,embed_tokens 为何必须保持 bf16

深入 ltx-2.5-mlx-q8 量化配方:int8 group 64 完整拆解,embed_tokens 为何必须保持 bf16 如果你想在 24 GB 甚至 16 GB 内存的 Apple Silicon 上跑 LTX-2.5 文生视频,ltx-2.5-mlx-q8 是目前最实用的一站。它的量化配方只有两句话&#xff1a…

📅 2026/10/30 2:24:49
【完全免费】游戏解包三步上手:完整提取贴图/音频/模型资源

【完全免费】游戏解包三步上手:完整提取贴图/音频/模型资源

【完全免费】游戏解包三步上手:完整提取贴图/音频/模型资源 【免费下载链接】游戏解包工具及教程 游戏解包工具及教程 项目地址: https://gitcode.com/open-source-toolkit/598a3 「游戏解包工具及教程」是一个打包好的游戏资源提取工具集:解压即…

📅 2026/10/30 2:19:49
MORE NEWS

更多资讯

📰

5G毫米波与室内电波传播仿真技术解析

1. 项目背景与核心价值城市与室内电波传播仿真一直是无线通信系统设计中的关键难题。随着5G毫米波频段和物联网设备的普及,传统经验模型在复杂城市场景下的预测误差可达15dB以上。我们团队开发的这套高频电磁场仿真系统,专门针对280MHz-100GHz频段的传播…

📰

STM32F103上运行GRBL:CNC脱机控制器设计与实现

简介:面向DIY雕刻机、CNC、激光机与写字机控制爱好者的STM32F103 GRBL脱机控制代码包,主要解决脱离电脑、通过SD卡执行加工文件的需求。代码基于STM32F103RC搭建,硬件引脚可按自身板卡替换,配合迪文二代4.3英寸屏完成人机交互&…

📰

高频电磁场仿真在5G与室内信号优化中的应用解析

1. 项目背景与核心价值高频电磁场仿真在城市与室内电波传播领域的应用,正随着无线通信技术的快速发展而变得日益重要。这个主题主要解决的是在复杂城市环境和室内空间中的电磁波传播特性分析问题,对于5G网络规划、室内信号覆盖优化、物联网设备部署等场景…

📰

Go 敏感词过滤实战:DFA/Trie 匹配与 AC 自动机选型

简介:Sensitive-word-filtering 是一份面向 Go 开发者与内容安全场景的轻量敏感词过滤实现,核心沿用 Java 版 DFA 算法思路并迁移至 Go,适合需要在服务端快速接入关键词检测、文本校验或替换功能的开发者参考。压缩包共 6 个文件,…

📰

华为昇腾AI算子库CANN ops-nn架构解析与性能优化

1. 项目背景与核心价值CANN ops-nn作为华为昇腾AI生态中的关键基础设施,本质上是一个面向神经网络计算的高性能算子库。这个项目最吸引我的地方在于它直接针对AI计算中最耗时的核心运算环节进行深度优化。在实际的AI模型开发中,算子性能往往成为整个系统…

📰

通用型物联网平台架构设计与关键技术解析

1. 物联网平台概述通用型物联网平台是指能够连接、管理和控制各类物联网设备的综合性软件系统。这类平台通常具备设备接入、数据采集、远程控制、数据分析等核心功能模块,为不同行业的物联网应用提供统一的技术支撑。在当前的数字化转型浪潮中,物联网平台…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬