turbot2va-ltx2 / code /docs /CODE_LAYOUT.md
luyu1021's picture
Add documented LTX-2 training source, recipes and checkpoint release plan
76b7b25 verified
|
Raw History Blame Contribute Delete
2.89 kB

代码范围和出处

主要源码是 my_repos/TurboT2AV/LTX-2,Git HEAD 402c7b304c4bbf21e1b35312ad59c2c7abe88aab,包含实际工作树中的训练器/配置修改。完整 patch 在 provenance/source_worktree.patch,复制来源 hash 在 ../release/source_manifest.json。发布增加文档、注释、独立 launcher 和 CPU 导出工具,未修改源训练工作树。

目录/模块 用途
LTX-2/packages/ltx-distillation/src/ltx_distillation/train_distillation.py FSDP、optimizer、G/critic 分阶段反向、checkpoint、data cursor、benchmark、安全停止
.../dmd.py DCM、SCM 精确 JVP、distribution matching、critic loss
.../rcm.py 对完整训练核心的语义 alias;核心仍在 dmd.py
.../models/ltx_internal_jvp.py AV transformer 的内部精确 JVP
.../models/ltx_trig_wrapper.py TrigFlow 参数化
.../data.py 文本和 latent LMDB、反向 distributed sampler
.../tools/ LMDB 制作、teacher/student 推理、数据校验
LTX-2/packages/ltx-core 上游 LTX-2 transformer、Gemma、AV VAE 和组件
LTX-2/packages/ltx-causal 被训练核心 import 的因果模型支持;本次权重属于 bidirectional AV
LTX-2/packages/ltx-pipelines 原 LTX AV pipelines、媒体输出
LTX-2/packages/pe 历史本地 prompt 增强工具与 system prompt
configs 10 条带中文参数注释的实际配方
docs/experiments 全部有效配置、关键训练日志、launch-time 源码和 provenance
evaluation 独立评测工具快照
scripts 可移机 launcher、generator 导出和上传工具

repository/LTX-2 是另一上游版本;repository/OmniForcing/LTX-2 包含因果/ODE 的另一训练路线;repository/TurboDiffusion/turbot2va/LTX-2 与 my_repos/turbo-t2av/LTX-2 主要是加速推理副本,缺少此主线训练器。它们不合并覆盖主训练实现,比较记录在 provenance/code_copies.json。

原仓库用于浏览器/下载服务的环境、安装缓存、egg-info、训练介质与模型权重排除。readme 缺失的两个本地 Python 包已补 README;它们原声明的 Apache license 字段改为引用随包附带的完整 LTX Community License,与实际源码/基座许可证一致。

每个修改过的 Python 文件加醒目 TurboT2VA 修改说明;保留原 copyright 和 attribution。原始训练配置的参数值保留,原机器路径在历史配置中通过 ${WORKSPACE_ROOT} 表示;可运行 configs/ 则使用 /path/to/... 并由 launcher 显式覆盖。

发布副本新增修复:内部 JVP 音频 RF timestep/tangent 从 [B] reshaping 为 [B,1,1],使 batch>1 的音频解码广播正确;toy/reference float64 模型的时间值保留 float64,生产 BF16 路径仍用 float32。既有 checkpoint 未重新训练,原运行源码在 provenance 中保留。