尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
从入门到精通:LTX-2.3-22b-IC-LoRA-Ingredients完整使用指南
从入门到精通LTX-2.3-22b-IC-LoRA-Ingredients完整使用指南LTX-2.3-22b-IC-LoRA-Ingredients是基于LTX-2.3-22B基础模型训练的IC-LoRAin-context LoRA模型通过参考表reference sheet控制视频生成确保角色、道具和场景在生成视频中保持视觉一致性。本指南将帮助你快速掌握这一强大视频生成工具的使用方法。 什么是IC-LoRA Reference Sheet ControlIC-LoRAin-context LoRA是一种创新的视频生成控制技术它通过参考表——一张包含场景中角色、道具和位置的复合图像——来调节视频生成过程。这种技术能够让生成的视频在遵循提示描述的动作的同时保持参考表中元素的视觉一致性。该模型基于LTX-2.3基础模型构建专门针对视频到视频video-to-video的生成任务进行优化。 模型文件信息项目中包含的主要模型文件为ltx-2.3-22b-ic-lora-ingredients-0.9.safetensors 快速开始ComfyUI使用指南 安装步骤克隆仓库git clone https://gitcode.com/hf_mirrors/Lightricks/LTX-2.3-22b-IC-LoRA-Ingredients将LoRA权重文件复制到ComfyUI的models/loras目录下加载LTX-2.3-22B基础模型并添加ltx-2.3-22b-ic-lora-ingredients-0.9.safetensors作为LoRA初始强度设置为1.0之后可根据需要调整使用LTX-2 ComfyUI仓库中的IC-LoRA/reference工作流该工作流已连接参考控制输入。将参考表静态视频作为控制/参考输入连接忽略参考路径的通用LoRA加载器将不会应用条件。 推荐设置LoRA强度/权重1.4推理步数30引导尺度4.0分辨率和帧数768×448121帧24 fps训练时使用的参数能获得最佳效果提示词结构使用两部分结构Reference sheet: … / Generated video: …。Reference sheet:部分描述参考表中的面板内容Generated video:部分描述要生成的动作。负面提示词worst quality, inconsistent motion, blurry, jittery, distorted时空引导建议使用时空引导STG模式stg_vblock 29scale 1.0有助于提高运动稳定性 控制信号要求 参考表规范控制信号类型参考表是一张单一的复合图像每个不同的视觉元素有一个清晰的面板每个角色有面部特写身体周转图每个道具有产品风格的渲染图以及一个清晰的位置面板布置在黑色背景上无文字。预期输入由参考表构建的静态视频循环播放以匹配输出剪辑的长度和帧率分辨率与输出相同缩小因子1。预处理使用元素驱动的参考表生成器创作参考表然后将静态图像循环成静态视频。帧数必须≥121以满足参考编码/121帧读取桶的要求训练中的所有目标均≥121帧。对齐参考视频应匹配输出分辨率和帧率其帧数必须至少为输出长度限制为≥121。✍️ 提示词编写指南模型训练时采用了特定的提示词结构使用时请遵循以下格式Reference sheet: 描述参考表中的面板内容——角色、道具、位置 Generated video: 描述你想要生成的动作/镜头在推理时参考表作为静态视频提供事物的外观而提示中的Generated video:部分提供发生的事情。模型在上下文中读取参考潜变量并渲染一个新的剪辑其角色、道具和设置与参考表匹配。 示例视频项目提供了多个示例视频展示了模型的实际效果examples/ingredients_lora_1.mp4examples/ingredients_lora_2.mp4examples/ingredients_lora_3.mp4examples/ingredients_lora_4.mp4examples/ingredients_lora_5.mp4examples/ingredients_lora_6.mp4 模型工作原理IC-LoRAin-context LoRA技术在DiT transformer上应用具体包括attn1/attn2q/k/v/out投影和前馈层。模型通过参考表静态视频提供的潜变量进行上下文学习然后根据提示词生成新的视频内容同时保持参考表中定义的视觉元素一致性。️ 故障排除与技巧提高元素一致性的技巧更大的面板效果更好元素在参考图像中占据的空间越大它在生成的视频中就越忠实地保留下来。给重要的角色/道具更大、更突出的面板而不是小的或拥挤的面板。身份漂移问题如果角色的面部或服装发生漂移请确保参考表中有该角色清晰的正面特写和完整的周转图并且其面板不会杂乱或充满文字。元素未出现模型只会重现参考表上存在的元素——为任何需要保留的道具/角色添加专用面板并在提示的Reference sheet:部分描述它。参考视频太短参考静态视频必须≥121帧较短的参考会破坏参考编码桶。⚙️ 技术细节基础模型LTX-2.3-22B (dev)训练类型IC-LoRA (in-context LoRA)控制类型参考表条件——角色/道具/位置身份带入生成的视频参考缩小因子1参考以与输出相同的分辨率提供管道细节参考表作为静态视频提供静止的参考表循环到输出的长度和帧率。模型通过参考潜变量的video_to_video策略进行训练推理时不应用额外的颜色/空间变换。 许可证信息该模型使用LTX-2-community-license许可证。完整条款请参见项目中的许可证文件。 相关资源代码GitHub RepositoryIC-LoRA文档docs.ltx.video — IC-LoRA使用指南创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
RELATED

相关推荐

JoyAI-Image-Edit-Plus-Diffusers实战教程:10个经典图像编辑案例详解

JoyAI-Image-Edit-Plus-Diffusers实战教程:10个经典图像编辑案例详解

JoyAI-Image-Edit-Plus-Diffusers实战教程:10个经典图像编辑案例详解 想要掌握AI图像编辑的终极技巧吗?JoyAI-Image-Edit-Plus-Diffusers作为一款强大的图像编辑AI工具,基于先进的Diffusers框架,为用户提供了简单快速的图像处理体…

📅 2026/11/3 1:40:37
揭秘IC-LoRA技术:LTX-2.3-22b-IC-LoRA-Ingredients核心原理详解 [特殊字符]

揭秘IC-LoRA技术:LTX-2.3-22b-IC-LoRA-Ingredients核心原理详解 [特殊字符]

揭秘IC-LoRA技术:LTX-2.3-22b-IC-LoRA-Ingredients核心原理详解 🎬 想要让AI生成的视频角色始终保持一致?LTX-2.3-22b-IC-LoRA-Ingredients项目为你带来了革命性的解决方案!这个基于IC-LoRA(In-Context LoRA&#xff…

📅 2026/11/3 1:40:37
Intern-S2-Preview时间序列分析:10个实用地震检测案例终极指南

Intern-S2-Preview时间序列分析:10个实用地震检测案例终极指南

Intern-S2-Preview时间序列分析:10个实用地震检测案例终极指南 Intern-S2-Preview作为一款350亿参数的科学多模态基础模型,在时间序列分析领域展现出了强大的地震检测能力。本文将为您详细介绍如何利用这一先进AI工具进行高效地震监测,并提供…

📅 2026/11/3 1:35:37
MORE NEWS

更多资讯

📰

鸡蛋大小的关节,凭什么撑得住启元人形机器人

这篇文章要回答一个问题:一个体积只有鸡蛋大小的关节,凭什么能撑住一台将近 17 公斤的人形机器人?还是老办法,从官方开源的模型文件里把每个关节的力矩上限和速度上限掏出来,再用中学物理的杠杆原理算一遍.算完发现两件事:这个数字确实够用,顺便还暴露了一个官方从没公开过的参…

📰

用键盘管理 Mac 窗口:Spectacle 快捷键实操指南

用键盘管理 Mac 窗口:Spectacle 快捷键实操指南 【免费下载链接】spectacle Spectacle allows you to organize your windows without using a mouse. 项目地址: https://gitcode.com/gh_mirrors/sp/spectacle 周一早上,工位上两块屏:…

📰

EverOS 完整解析:把 AI Agent 的长期记忆写成 Markdown 文件,LoCoMo 基准做到 94.42%

EverOS 完整解析:把 AI Agent 的长期记忆写成 Markdown 文件,LoCoMo 基准做到 94.42% 【免费下载链接】EverOS One portable memory layer for every AI agent: local-first, Markdown-native, user-owned, and self-evolving across apps, tools, and w…

📰

【数据Agent论文·总览】30篇论文如何连成一条线:从查询到可信分析

读完三十篇数据Agent论文,如果只记住三十个系统名字,仍然很难回答一个问题:我们究竟准备研究哪一种失败,又凭什么认为它值得做? 进入专栏:数据Agent:30篇论文精读 这篇文章给整个系列建立一张…

📰

如何快速本地部署Qwen-Image-2512-FP8:新手零基础上手文生图推理完整教程

如何快速本地部署Qwen-Image-2512-FP8:新手零基础上手文生图推理完整教程 想在本地部署 Qwen-Image-2512-FP8 并跑通文生图推理吗?这份新手零基础教程带你用最短路径完成:一个仓库、两步命令、一张图片。Qwen-Image-2512-FP8 是 Unsloth 团队…

📰

dsh-purge 完整安装指南:一条命令装好,三步激活,一条命令验收

dsh-purge 完整安装指南:一条命令装好,三步激活,一条命令验收 【免费下载链接】dsh-purge DeepSeek Harness 破甲:让所有模型都能破甲,不同模型可换不同提示词;默认提示词面向国模「小码酱」。Jailbreak fo…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬