HumanDiT:一款由浙大联合字节推出的姿态引导的高保真人体视频生成框架

85 ℃

HumanDiT 是由浙江大学和字节跳动联合提出的一种姿态引导的高保真人体视频生成框架。它基于扩散变换器(Diffusion Transformer,DiT),能够在大规模数据集上进行训练,生成具有精细身体渲染的长序列人体运动视频。

HumanDiT:一款由浙大联合字节推出的姿态引导的高保真人体视频生成框架

HumanDiT功能特点:

1、姿态引导的视频生成:HumanDiT 通过关键点扩散变换器(Keypoint-DiT)生成后续姿态序列,确保视频中人体动作的连贯性和自然性。

2、长序列视频生成:支持多种视频分辨率和可变序列长度,适合生成长序列的高质量视频。

3、个性化特征保持:引入前缀潜在参考策略,在长序列中保持个性化特征。

4、灵活的输入与输出:能从静态图像或现有视频中继续生成视频,适用于多种应用场景。

5、姿态适配与细化:基于姿态适配器实现给定序列的姿态转移,通过姿态细化模块增强面部和手部特征与参考图像的对齐效果。

HumanDiT项目地址:

1、官方网址https://agnjason.github.io/HumanDiT-page/

2、arXiv 技术论文https://arxiv.org/pdf/2502.04847

Doubao-1.5-pro:一款由豆包团队开发的高性能稀疏 MoE大语言模型

一款由字节跳动推出的先进AI视频生成工具——Phantom

浙江大学推出的 DeepSeek 系列专题线上公开课

AnyCharV :一款由香港大学联合清华大学等机构推出的角色可控视频生成框架

CineMaster:快手推出的一款具备3D感知能力的文本到视频生成框架

标签: 字节跳动框架, 浙江大学, 视频生成框架

上面是“HumanDiT:一款由浙大联合字节推出的姿态引导的高保真人体视频生成框架”的全面内容,想了解更多关于 IT知识 内容,请继续关注web建站教程。

当前网址:https://m.ipkd.cn/webs_17001.html

声明:本站提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请发送到邮箱:admin@ipkd.cn,我们会在看到邮件的第一时间内为您处理!

php语法如何设置User Agent字符串(简单示列)
WeUI轻松快速上手(微信官方推出)
wordpress如何实现pc端和移动端通用模板
wordpress技巧如何显示当前评论的摘要
mysql查询根据时间查询数据(今天/昨天/n天内/第n天等)