StableIdentity

释放双眼,带上耳机,听听看~!
StableIdentity是一种创新的生成模型,通过稳定的身份保留和灵活的可编辑性,能够将任何人插入任何场景。它利用面部编码器和身份先验对输入的面部进行编码,然后将面部表示投射到一个可编辑的先验空间中。同时,StableIdentity还设计了一个掩蔽的两阶段扩散损失,以提升对输入面部的像素级感知,并保持生成的多样性。

StableIdentity官网链接地址:https://huggingface.co/papers/2401.15975

StableIdentity 介绍

StableIdentity是一个基于大型预训练文本到图像模型的最新进展,能够实现高质量的以人为中心的生成。与现有方法不同的是,StableIdentity能够确保稳定的身份保留和灵活的可编辑性,即使在训练过程中只使用了每个主体的一张面部图像。它利用面部编码器和身份先验对输入的面部进行编码,然后将面部表示投射到一个可编辑的先验空间中。通过结合身份先验和可编辑性先验,学习到的身份可以在各种上下文中注入。此外,StableIdentity还设计了一个掩蔽的两阶段扩散损失,以提升对输入面部的像素级感知,并保持生成的多样性。大量实验证明,StableIdentity的性能优于以往的定制方法。学习到的身份还可以灵活地与ControlNet等现成模块结合使用。值得注意的是,我们是首个能够直接将从单张图像学习到的身份注入到视频/3D生成中而无需微调的方法。我们相信,StableIdentity是统一图像、视频和3D定制生成模型的重要一步。

StableIdentity用户群体

StableIdentity可应用于图像、视频和3D生成领域,适用于需要定制化人物形象的场景。

一个社交媒体平台使用StableIdentity定制用户头像

一家影视公司将StableIdentity应用于角色形象的定制化

一家游戏开发公司利用StableIdentity生成游戏角色

StableIdentity的核心功能

  • 身份一致的重新语境化
  • 可编辑的身份注入
  • 像素级感知
  • 多样性生成
本网站的内容主要来自互联网上的各种资源,仅供参考和信息分享之用,不代表本网站拥有相关版权或知识产权。如您认为内容侵犯您的权益,请联系我们,我们将尽快采取行动,包括删除或更正。
个人头像生成器

AI Photo Generator For LinkedIn™

2024-2-18 15:51:52

个人头像生成器

aiphoto.studio

2024-2-27 15:11:56

个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索