本文主要是介绍【深度学习】sdxl中的 text_encoder text_encoder_2 区别,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
镜像问题是:https://editor.csdn.net/md/?articleId=135867689
代码仓库:
https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/tree/main
截图:
为什么有两个CLIP编码器 text_encoder
和 text_encoder_2
?
在仔细阅读这些代码后,我们了解到 text_encoder_2
主要是用于 refiner
模型的。
if 'clip' in self.stages:subfolder = 'text_encoder'self.models['clip'] = CLIPModel(**models_args, embedding_dim=get_clip_embedding_dim(self.version, self.pipeline_type), output_hidden_states=self.config.get('clip_hidden_states', False), subfolder=subfolder)if 'clip2' in self.stages:subfolder = 'text_encoder_2'self.models['clip2'] = CLIPWithProjModel(**models_args, output_hidden_states=self.config.get('clip_hidden_states', False), subfolder=subfolder)
这篇关于【深度学习】sdxl中的 text_encoder text_encoder_2 区别的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!