首个中文原生DiT架构!腾讯混元文生图大模型宣布全面开源
2024-05-14 15:32:57
•
来源:
导读 关于首个中文原生DiT架构!腾讯混元文生图大模型宣布全面开源,这个很多人还不知道,今天澜澜就给大家说道说道,下面就让我们一起来看看吧!...
关于首个中文原生DiT架构!腾讯混元文生图大模型宣布全面开源,这个很多人还不知道,今天澜澜就给大家说道说道,下面就让我们一起来看看吧!
快科技5月14日消息,今日,腾讯旗下混元文生图大模型(混元DiT,Diffusion Models with Transformers)宣布全面开源。
目前已在Hugging Face、Github上发布,包含模型权重、推理代码、模型算法等完整模型,供企业与个人开发者免费商用。
据媒体报道,腾讯混元文生图负责人卢清林表示,混元DiT开源的价值有两方面。
一方面这是业内首个中文原生DiT架构,弥补了开源社区的空白,另一方面混元DiT为全面开放,与现网版本完全一致。
据介绍,此次开源的混元DiT采用了与Sora同样的背后关键技术——DiT架构,还支持256字中文理解,不仅支持文生图,也可作为视频等多模态视觉生成的基础。
腾讯方面表示,为了构建混元DiT设计了Transformer结构、文本编码器和位置编码,构建了完整的数据管道,用于更新和评估数据,为模型优化迭代提供帮助。
为了实现细粒度的文本理解,还训练了多模态大语言模型来优化图像的文本描述。
最终,混元DiT能够与用户进行多轮对话,根据上下文生成并完善图像。
以上就是关于【首个中文原生DiT架构!腾讯混元文生图大模型宣布全面开源】的相关内容,希望对亲们有所帮助!
标签:
郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如有侵权行为,请第一时间联系我们修改或删除,多谢。