下载APP

首页 / Stability.ai 推首个视频-4D视频工具，游戏、电影行业有福了

体育数码

Stability.ai 推首个视频-4D视频工具，游戏、电影行业有福了

元宇宙头条中国站 2024-08-19 09:00:00 热度 3492

元宇宙头条

11-14 14:28 494288

重磅推出！！！

Stability.ai 宣布推出 Stable Video 4D模型，这是一款视频到视频的生成模型，只需上传一段视频，就可以得到八个不同角度的视频。最后可以得到一个3D的动态视频。

并且速度超快，只需40 秒左右就可以生成八个不同角度的视频。无论想从哪个角度观察，Stable Video 4D 都能轻松满足。

值得注意的是，Stable Video 4D不仅仅是简单的3D技术。4D的可是包含了宽度（x）、高度（y）、深度（z）和时间（t）四个维度。这意味着可以从不同角度和时间去看原视频，这可不是简单的3D技术可比拟的。

如何使用：

只需要上传一个视频，并指定3D摄像机的位置。Stable Video 4D就会根据这些位置生成八个不同视角的视频。

目前Stable Video 4D目前仍处于研究阶段，该模型已在Hugging Face平台上发布，供开发者和研究人员使用和探索。

地址：

https://huggingface.co/stabilityai/sv4d

温馨提示：需要申请，申请了不一定让你玩。。。

下面我们梳理一下SV4D的技术路线，并分析一下他的主要特点（虽然有点无聊，亲耐心食用）

SV4D是一种技术，它能够捕捉并展示一个物体在不同时间点和不同角度的样子。比如一个在跳舞的人，你想要记录下他每个动作的瞬并且是不同角度的。

这个技术就像是有多个相机围绕着这个物体，每个相机都在同一时间拍下照片，但是从不同的角度。最后，这些照片会被组合在一起，创建出一个完整的图像，这个图像不仅展示了物体在不同时间的样子，还提供不同的视角。

SV4D实现步骤如下图：

首先会用一个特别的工具（SV3D）来看原视频的第一帧，然后想象出如果从不同角度看到的会是什么样。

然后在视频的每一帧上加一点“调料”（噪声），这样可以让模型更好地理解视频中的动作。

接着模型（SV4D）会有很多层，每一层都像是一个过滤器，帮助看清楚视频中的细节，并且保持不同角度看起来都是一样的。

注意有一个特别的地方（空间注意力层），它可以看清楚每一帧的每一个角落。还有一个能力，就是可以记住第一帧的样子，然后让后面的每一帧都和第一帧动作看起来连贯。

最后，用一个方法来让视频变得更长。把一张照片变成一个动画，让每一帧都流畅地连接起来。

这就是SV4D实现的步骤，各位看懂了没？

说实话，小编觉得SV4D真的是个十分具备创新性的工具。

它不仅大大简化了视频制作的过程，还为视频生成提高了一条全新的思路（视频生成视频），为原有视频提供更多角度的视频。

特别是在游戏开发、电影等场景。这种需要多视角视频的领域，SV4D的出现无疑又提供了全新的思路。

最后弱弱问一下Stability公司：

哥，咱还开源吗？

来源：AI先锋官

编辑：Luke

（声明：请读者严格遵守所在地法律法规，本文不代表任何投资建议）

元宇宙电商虚拟购物

本文来源：元宇宙头条文章作者：元宇宙头条中国站

元宇宙头条中国站

累计发布内容523篇累计总热度10万+

523篇 10万+

更多文章

FTX 后院起火，Binance 釜底抽薪

元宇宙头条现已开放专栏入驻，详情请见入驻指南： #

免责声明：
1、本文版权归原作者所有，仅代表作者本人观点，不代表元宇宙头条观点或立场。
2、如发现文章、图片等侵权行为，侵权责任将由作者本人承担。

上一篇：Confiction Labs通过“曝光证明”打击Web3游戏机器人

下一篇：蜘蛛侠妖娆起舞，下一代ControlNet来了！贾佳亚团队推出，即插即用，还能控制视频生成

评论共0条

默认

说点什么吧

重磅！2024 TIME 100位最具影响力AI人物公布

速途元宇宙研究院 11-18 19:25

WDTA发布《大模型供应链安全要求》标准，推进AI安全、可信、负责任发展

速途元宇宙研究院 11-18 19:25

人工智能对国家发展的深远影响

速途元宇宙研究院 11-18 19:25

特朗普：计划让美国成为全球加密之都

速途元宇宙研究院 11-18 19:25

【人工智能|综述篇】远程工作趋势的革命：视频会议中的 AR 和 AI

速途元宇宙研究院 11-18 19:25

Magic 公司筹集了 3.2 亿美元，开发 AI 编程助手

速途元宇宙研究院 11-18 19:25

您需要登录后才可以回帖立即登录

元宇宙头条中国站

个人认证

+关注

微信公众号

关于我们

由元宇宙联邦、元宇宙联邦大学、元宇宙时代和元宇宙头条联合打造的、面对全世界的融媒体“元宇宙头条”APP正式创版上线。

关于我们| 联系我们| 加入我们| 意见反馈

Stability.ai 推首个视频-4D视频工具，游戏、电影行业有福了

关于我们

网站地图