0

0

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

王林

王林

发布时间:2024-05-11 09:01:10

|

1405人浏览过

|

来源于51CTO.COM

转载

controlnet作者新作,玩儿得人直呼过瘾,刚开源就揽星1.2k。

用于操纵图像照明效果的IC-Light,全称lmposing Consistent Light。

玩法很简单:

上传意味着系统会自动分离人物等主体,并选择光源位置,填上提示词,就能毫无破绽地融入新环境了!

赶紧来个王家卫式的打光:

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

不喜欢?

没关系,换成窗外打进来的自然光,也就分分钟的事。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

目前,IC-Light提供两类模型:文本条件重照明模型,还有背景条件模型。

两种模型都需要以前景图像作为输入。

鉴于之前Controlnet太好玩儿,这次IC-Light一出现就颇受关注,还有网友迅速做出了ComfyUI插件。

(疑惑,大家这么拼,都不睡觉的吗??)

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

不管是期待值还是用后体验,网友给得都很高:

Nice!迫不及待要上手玩了嘻嘻嘻嘻。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

谁能帮我把这图换个背景?

从远古MCN到贴吧再到现在小红书,各个时代,都不乏“谁能帮我换张背景”这种求助贴。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

但热心网友的帮助,往往是这样子的:

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

就离谱。

不过说实在话,这种需求不仅存在于你我普通人之间,电商做商品海报,也常常有类似的需求。

有了IC-Light,好像一切都变得简单起来。

上传主体原图+选择光源位置+提示词,完事儿。

来看效果:

这样一张佛像原图,加上提示词“佛像、细致的脸部、科幻RGB发光、赛博朋克”,再选择“光从左侧打来”。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

就能得到一张崭新的成品:

Vinteo AI
Vinteo AI

利用人工智能在逼真的室内环境中创建产品可视化。无需设计师和产品照片拍摄

下载

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

哪怕是日常场景也是适用的。

最后出的效果肉眼看还是比较自然:

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

根据网友分享的测评,动漫场景也适用……

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

背后技术

如前所说,IC-Light现在提供两类模型,两种模型都需要以前景图像作为输入。

一类是文本条件重照明模型。

简单来说就是用户可以通过输入提示词来搞定生成。

比如输入“左侧光线”“月光”等,模型会通过这些提示词和初始潜变量,来生成符合要求和特征的图像。

另一类是背景条件模型。

这种就更简单了,不需要复杂的提示词,模型结合背景提示信息,对前景的物体进行不同风格的光照变化。

而其背后的技术原理,是通过潜在空间的一致性,确保模型输出在不同光源组合下具有一致性,从而可以稳定地合成各种光照效果。

具体如下:

在HDR空间中,所有照明的光线传输都彼此独立,不同光源的外观混合效果与多光源直接作用下的外观在数学上(也就是理想状态下)是一致的。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

以上面这张图的灯光阶段为例,来自“外观混合”和“光源混合”的两个图像是一致的,(理想情况下,在HDR空间中数学上等效)

因此,在训练重新照明模型时,研究人员在潜在空间中使用多层感知机(MLP)让不同光源的组合和传输具有一致性,并用来指导生成效果。

最终产生高度一致的重新光照效果。

由于模型使用了潜在扩散技术,因此可以在潜在空间内实现学习和重光照操作,从而在各种光照条件下产生高度一致的效果。

这些结果非常一致——尽管在训练时,模型没有直接使用法线图数据,但可以将不同的重新光照合并为法线贴图。

看下面这张图,从左到右依次是输入、模型输出、重新照明、分割的阴影图像和合并的法线贴图。

ControlNet作者新作爆火:P照片换背景不求人,AI打光完美融入

感兴趣的小伙伴可以前往下面地址试玩儿哟~

GitHub直通车:https://github.com/lllyasviel/IC-Light?tab=readme-ov-file。

相关专题

更多
http与https有哪些区别
http与https有哪些区别

http与https的区别:1、协议安全性;2、连接方式;3、证书管理;4、连接状态;5、端口号;6、资源消耗;7、兼容性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1994

2024.08.16

PS使用蒙版相关教程
PS使用蒙版相关教程

本专题整合了ps使用蒙版相关教程,阅读专题下面的文章了解更多详细内容。

23

2026.01.19

java用途介绍
java用途介绍

本专题整合了java用途功能相关介绍,阅读专题下面的文章了解更多详细内容。

15

2026.01.19

java输出数组相关教程
java输出数组相关教程

本专题整合了java输出数组相关教程,阅读专题下面的文章了解更多详细内容。

4

2026.01.19

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

2

2026.01.19

xml格式相关教程
xml格式相关教程

本专题整合了xml格式相关教程汇总,阅读专题下面的文章了解更多详细内容。

4

2026.01.19

PHP WebSocket 实时通信开发
PHP WebSocket 实时通信开发

本专题系统讲解 PHP 在实时通信与长连接场景中的应用实践,涵盖 WebSocket 协议原理、服务端连接管理、消息推送机制、心跳检测、断线重连以及与前端的实时交互实现。通过聊天系统、实时通知等案例,帮助开发者掌握 使用 PHP 构建实时通信与推送服务的完整开发流程,适用于即时消息与高互动性应用场景。

13

2026.01.19

微信聊天记录删除恢复导出教程汇总
微信聊天记录删除恢复导出教程汇总

本专题整合了微信聊天记录相关教程大全,阅读专题下面的文章了解更多详细内容。

93

2026.01.18

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

112

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
10分钟--Midjourney创作自己的漫画
10分钟--Midjourney创作自己的漫画

共1课时 | 0.1万人学习

Midjourney 关键词系列整合
Midjourney 关键词系列整合

共13课时 | 0.9万人学习

AI绘画教程
AI绘画教程

共2课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号