Qihoo-T2X:一款由360CVGroup开发的高效扩散变换器模型

78 ℃

Qihoo-T2X 是由 360 AI 研究院和中山大学联合开发的高效多模态生成模型,基于代理标记化扩散 Transformer(PT-DiT)架构。该模型通过引入稀疏代理标记注意力机制,显著降低了传统扩散 Transformer 在全局自注意力计算中的冗余性。Qihoo-T2X 支持多种任务,包括文本到图像(T2I)、文本到视频(T2V)和文本到多视图(T2MV)生成。

Qihoo-T2X:一款由360CVGroup开发的高效扩散变换器模型

Qihoo-T2X功能特点:

1、高效计算

– Qihoo-T2X 通过代理标记化注意力机制,大幅减少了计算复杂度,相比其他扩散模型(如 DiT 和 PixArt-α),计算量分别减少了 48% 和 35%。

2、多任务适应性

– 文本到图像(T2I):根据文本描述生成高质量、高分辨率的图像,适用于创意设计和艺术创作。

– 文本到视频(T2V):生成连贯的视频内容,支持动态场景和视频序列,适用于视频创作和动画制作。

– 文本到多视图(T2MV):生成同一物体或场景的多视角图像,适用于 3D 对象展示和虚拟现实(VR)/增强现实(AR)应用。

3、Qihoo-T2X细节建模能力

– 结合窗口注意力和移位窗口注意力机制,增强局部细节建模能力,避免因稀疏注意力机制导致的细节丢失。

4、开源与可扩展性

– Qihoo-T2X 的源代码已开源,支持社区贡献和进一步开发。

Qihoo-T2X应用场景:

1、创意设计与艺术创作:快速生成高质量艺术图像,支持多种风格,为艺术家提供灵感。

2、视频内容生成:生成连贯的动画视频,减少视频创作成本和时间。

3、教育与培训:生成教学用图像和视频,帮助学生理解复杂概念。

4、娱乐与游戏开发:生成虚拟场景、角色和动态内容,提升沉浸感。

Qihoo-T2X相关网址:

1、项目官网https://360cvgroup.github.io/Qihoo-T2X/

2、GitHub仓库https://github.com/360CVGroup/Qihoo-T2X

3、arXiv技术论文https://arxiv.org/pdf/2409.04005

阿里国际开源Ovis2系列:多模态大语言模型的六大版本震撼来袭,免费使用!

SignLLM:全球首个手语视频的多语言手语AI大模型

Doubao-1.5-pro:一款由豆包团队开发的高性能稀疏 MoE大语言模型

人大高瓴AI联合蚂蚁推出LLaDA,打破大语言模型“逆诅咒”

好伴AI

标签: 360AI, AI大语言模型

上面是“Qihoo-T2X:一款由360CVGroup开发的高效扩散变换器模型”的全面内容,想了解更多关于 IT知识 内容,请继续关注web建站教程。

当前网址:https://m.ipkd.cn/webs_17292.html

声明:本站提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请发送到邮箱:admin@ipkd.cn,我们会在看到邮件的第一时间内为您处理!

zblog建站如何添加分类关键词、描述(具体步骤如下)
php语法如何实现内定抽奖功能?
HTTP协议中请求头和响应头的常用字段有哪些?
vscode如何设置自动格式化但不换行
seo赚钱其实越来越容易了