技术咨询
代买器件
商务客服
研发客服宣布，联通数据智能公司打造、首个完全在国产昇腾AI软硬件平台上实现训练和推理的中文原生文生图模型“联通元景文生图模型”，正式开源。
该模型实现了多项自主创新突破：
首先是在架构上，通过在SDXL架构中融合复合语言编码模块，实现了对中文长文本、多属性对应和中文特色词汇的精确语义理解，对应图像的生成效果得到了极大提升。
其次是在昇腾AI大规模算力集群上，实现了中文原生文生图模型的训练和推理，并将模型和代码对业界开源，以推动文生图领域的国产化进程。
据悉，原始SDXL的语言编码器仅使用英文CLIP模型，智能支持英文文本输入，输入长度也不能超过77个token。
对此，联通元景文生图模型一方面将英文CLIP模型替换成中文CLIP，并引入复合语言编码架构，使用基于encoder-decoder架构的语言模型，突破文本长度限制。
通过引入复合语言编码模块，元景文生图模型实现了原生中文语义理解，避免了利用翻译插件等作为中介调用英文文生图模型造成的中文信息损失。
同时，通过引入海量中文图文对数据进行预训练，模型对中文专属名词，如鼠标-老鼠、仙鹤-吊车等英文模型易混淆的对象，以及中文菜谱等英文模型无法理解的名词，都能够准确理解并生成对应的高质量图片。
文章来源于:21IC 原文链接
本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。