尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
任意长视频的连贯深度:Metric-Video-Depth-Anything-Base-MLX如何实现32帧窗口推理与跨帧一致性
计算机视觉深度学习【免费下载链接】Metric-Video-Depth-Anything-Base-MLX项目地址https://ai.gitcode.com/hf_mirrors/mlx-community/Metric-Video-Depth-Anything-Base-MLX点击查看免费下载Metric-Video-Depth-Anything-Base-MLX 是 ByteDance Video Depth AnythingCVPR 2025 highlight的 MLX 移植版专为 Apple Silicon 打造能够对任意长度的视频输出连贯、跨帧一致的单目深度图。它的核心思路是以32 帧为一个窗口进行推理让每一帧都参考窗口内其他帧的信息从而告别逐帧独立估计带来的深度抖动。 它解决什么问题单帧深度估计模型有个通病每帧独立预测相邻帧之间深度会随机跳变播放起来像水波晃动。而视频深度估计video depth estimation的目标就是让整段视频的 depth map 平滑连贯。Metric-Video-Depth-Anything-Base-MLX 的架构由三部分组成见 README.md模块作用DINOv2 backbone提取每一帧的视觉特征DPT head将特征解回归为像素级深度AnimateDiff 风格时序运动模块在帧与帧之间传递、对齐特征是跨帧一致性的关键 它是Metric 模型直接输出以米为单位的绝对深度而不是相对远近这为后续的 3D 重建、机器人感知等应用省去了尺度标定。 32 帧窗口推理长视频如何分而不断整个视频不可能一次性塞进显存模型采用滑动窗口策略在 config.json 中可以看到关键参数num_frames: 32含义是每次取32 帧送入模型联合推理。窗口内所有帧共享时序运动模块的交互深度彼此对齐相邻窗口之间通过重叠与对齐衔接最终把深度图拼接成覆盖整段视频的连贯结果——这就是它能处理 arbitrarily long videos 的秘密。其他值得关注的配置同样在 config.json 中metric: trueMetric 模型输出绝对深度米跳过非 Metric 模型所需的 scale/shift 窗口对齐encoder: vitbViT-Base 编码器pe: ape使用绝对位置编码out_channels: [96, 192, 384, 768]DPT head 的多尺度特征通道。输入分辨率由 preprocessor_config.json 指定为518。 快速上手在 Apple Silicon 上跑通深度估计通过mlx_vlm加载模型用法详见 README.md核心流程只有三步from mlx_vlm import load from mlx_vlm.models.video_depth_anything.generate import ( VideoDepthPredictor, read_video_frames, ) model, processor load(mlx-community/Metric-Video-Depth-Anything-Base-MLX) predictor VideoDepthPredictor(model, processor) frames, fps read_video_frames(input.mp4, max_len300, target_fps15) depths predictor.infer(frames) # 输出 (T, H, W) float32 深度图 小贴士输入张量是 channel-last 的(B, T, H, W, 3)H 和 W 必须是 14 的整数倍target_fps建议设为 15 左右帧数过多会显著增加推理时间权重为 fp32GPU 上结果与 PyTorch 参考实现相对误差约 1%CPU 上可精确到约 1e-5见 README.md。本地模型权重文件为 model.safetensors通过 Git LFS 分发。也可以克隆仓库离线使用git clone https://gitcode.com/hf_mirrors/mlx-community/Metric-Video-Depth-Anything-Base-MLX⚖️ 注意事项模型基于官方 checkpoint 转换权重采用CC-BY-NC-4.0协议仅限非商业用途由于是 Metric 模型输出可直接当米使用但建议先校准再用于精确测量场景。总结Metric-Video-Depth-Anything-Base-MLX 用DINOv2 DPT 时序运动模块的组合配合32 帧窗口推理在 Apple Silicon 上实现了任意长视频的连贯深度估计。对想快速验证视频深度、3D 重建效果的新手来说它是一个开箱即用、精度与速度兼顾的起点。赞分享计算机视觉深度学习【免费下载链接】Metric-Video-Depth-Anything-Base-MLX项目地址https://ai.gitcode.com/hf_mirrors/mlx-community/Metric-Video-Depth-Anything-Base-MLX点击查看免费下载相关推荐告别抖动的深度图Metric-Video-Depth-Anything-Small-MLX如何实现任意长视频的时序一致性告别抖动的深度图Metric Video Depth Anything Small MLX如何实现任意长视频的时序一致性 Metric Video Dept计算机视觉Terraform AWS Provideraws_appintegrations_event_integration 数据源详解——按名称读取 AppIntegrations 事件集成Terraform AWS Provideraws_appintegrations_event_integration 数据源详解——按名称读取 AppInt人工智能计算机视觉深度学习Feast 向量数据库集成基于 ADR-0010 的 RAG 检索能力设计、实现与实战指南Feast 向量数据库集成基于 ADR 0010 的 RAG 检索能力设计、实现与实战指南 本文基于 Feast 仓库中的架构决策记录 ADR 0010: V计算机视觉深度学习上一篇掌握shadcn-vue中的Tailwind配置定制化原子化CSS的全攻略下一篇tiny11builder 构建失败oscdimg.exe 缺失的终极修复全方案创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
RELATED

相关推荐

零样本学习实战:从语义对齐到CLIP升级的完整复现指南

零样本学习实战:从语义对齐到CLIP升级的完整复现指南

简介:本资源是一份面向人工智能方向研究者与进阶学习者的零样本学习(Zero-Shot Learning)实践套件,聚焦于算法复现与语义建模能力训练,适用于计算机视觉、跨模态理解等场景下的小样本泛化问题研究。压缩包共11个文件&a…

📅 2026/10/18 16:33:49
壁纸小程序源码全解析:取图、广告变现与部署避坑指南

壁纸小程序源码全解析:取图、广告变现与部署避坑指南

简介:一款面向微信、抖音、快手、QQ等多平台的全开源取图壁纸小程序源码包,适合需要快速搭建壁纸类应用的小程序开发者和运营者使用。压缩包内共包含两千二百八十九个文件,主要类型包括后端逻辑脚本、前端交互脚本、图片素材、动图、页面结构…

📅 2026/10/18 16:33:49
红蚂蚁目标检测数据集:三种标注格式与YOLO训练避坑指南

红蚂蚁目标检测数据集:三种标注格式与YOLO训练避坑指南

简介:YOLO红蚂蚁目标检测数据集基于真实场景拍摄,图片质量高、场景丰富,共含10000张图片,全部经LabelImg标注且框质量可靠;并同时提供voc(xml)、coco(json)、yolo(txt)三种格式标签,分别存放于独立文件夹&a…

📅 2026/10/18 16:33:49
MORE NEWS

更多资讯

📰

大模型Agent记忆系统实战指南:上下文管理、向量检索与遗忘机制

我不太喜欢用“记忆”这个词来描述大模型应用里的缓存机制,因为大部分人第一次给自己的Agent加记忆时,都把问题想得太简单了——不就是把聊天记录存起来,下次再塞回去吗?我一开始也是这么干的,结果做出来的东西不仅回答…

📰

论文AIGC检测率99.8%怎么降?从检测原理到写作重构实操指南

论文提交当天我就觉得稳了,查重率一遍过,格式也没问题,结果导师在群里扔来一张截图:AIGC检测报告,疑似AI生成内容99.8%。整个宿舍安静了三秒钟。这不是个别案例,这届本科生几乎人人要过一关:毕业…

📰

渗透测试基础:扫描与口令破解的闭环训练体系

1. 项目概述:这不是“黑客速成班”,而是一套可验证、可复现、可教学的渗透测试基础能力训练体系“【CyberSecurityLearning 54】扫描技术口令破解”这个标题,乍看像某次线上课的编号,但背后承载的是网络安全初学者最真实、最迫切、…

📰

Git分支模型实战:五分支协作契约与落地规范

1. 项目概述:这不是Git命令,而是一套让团队不再为“谁改了谁的代码”吵架的协作契约“Branching Model”——看到这个词,很多人第一反应是打开Git手册查git checkout -b,但真正让一个十人开发组从每周三次紧急回滚、四次合并冲突、…

📰

TimescaleDB Windows zip包安装指南:让PostgreSQL 12变身时序数据库

简介:TimescaleDB v2.3.0 for PostgreSQL 12 Windows x64 的完整安装包,面向需要处理物联网、金融行情、日志分析、运营监控等海量时间序列数据的开发与运维人员。压缩包共40个文件,大小仅4.27MB,包含3个DLL动态库、1个control控制…

📰

自然语言指令辅助系统:语义翻译中间件设计与落地

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬