开源大神、设计巨头都在跟进,AI打光功能为何如此受关注?
大家好,我是花生~
前两天开源领域的大佬 lllyasviel 张吕敏突然在 Github 上发布了一条更新动态,推出了 IC-Light 的 2.0 版本。IC-Light 之前我为大家介绍过了, 它是一个照明控制项目,支持通过文本和背景图,自动使前景主体与背景的光照、色调变得一致,从而让二者融为一体。
了解 IC-Light:
一文详解打光神器 IC-Light!可控制光照方向和色彩氛围,免费使用
大家好,这里是和你们一起探索 AI 的花生~ Controlnet、SD WebUI Forge 和 LayerDiffusion 的作者 lllyasviel 大神最近又推出了一个新的项目 IC-Light,可以实现控制一张图像的光照方向和色调氛围,今天一起我们了解一下它的特点及用法
阅读文章 >一、IC-Light v2.0 简介
IC-Light 推出后立刻就受到了广泛的关注,毕竟手动调整色调光影进行图层融合的步骤是很繁杂的,如果能用 AI 一键搞定,那对设计、摄影等行业来说意味着巨大的生产力解放。
但初始版本的 IC-Light 是基于 SD 1.5 训练的,虽然能控制整体光照色调,但难以实现细节上的准确控制,还很容易出现暗部过暗、 “调色过度”的情况,导致人物的服装颜色、肤色或物品本体色彩严重失真。因此设想虽然很美好,但 IC-Light 无法进一步应用到实际项目中。
而此次推出的 IC-Light v2.0 则很好地解决了以上的问题,因为它是基于新推出的 Flux 模型训练的,还具备 16 通道的 VAE 和原生高分辨率,可以更准确地识别图像的光照色调特征,从而实现更细致、逼真的融合效果。
下面是官方放出的 v2.0 处理效果图。当背景换成霓虹风格后,人物的皮肤、衣物色调都有发生对应的改变,甚至面部的高光也有合理变化,整体融合效果非常棒。细致观察的话你会发现,人物面部的毛孔、皱纹等细节,在更换光照色调后依旧被完美保存下来了,甚至在新光照环境下更加明显。
下图则是 IC-Light v 1.0 的处理效果,对比上图,可以明显看出 v2.0 在细节质感上处理的很好。
除了人像,v2.0 在处理物体融合上的效果也很不错,将来在电商合成领域肯定有巨大的应用潜力;并且对于动漫、油画等风格化图像,v2.0 也能根据背景,修改主体的色调光照。
视频来源:Twitter@ @WilliamLamkin
IC-Light v2.0 是一个还在进行中的项目,现在放出是第一个完成训练的模型(根据背景调整前景),之后还会陆续放出其他 3 个模型,它们的侧重点各有不同。需要注意的是,v2.0 模型不能用于商业用途的,目前作者还没有将模型开源出来,不过我们可以在 Huggingface 上免费体验它的处理效果。
IC-Light v2.0 在线体验:
二、越来越多的 AI 打光工具
无独有偶,Adobe 在前段时间的 Max 大会上也发布了一项 AI 打光功能 ProjectPerfectBlend (完美融合)。它可以一键将人物图层的光照色调整为与周围环境一致,还能自动加上新的投影细节。演示此功能时,场下的欢呼惊叹声不断,看来设计师们对这项功能的需求的确很迫切,就是不知道我们能不能顺利用上。
知名 AI 图像放大工具 Magnific 也在 6 月份的时候新增了 Relight (重新打光)功能,同样可以对根据背景修改主体的光照色调,使不同图层完美融为一体,效果非常不错。
三、AI 打光功能的意义
无论是开源领域还是商业公司,都在主动推进 AI 打光技术的普及和发展,这足以说明这项功能的重要性。
目前生成式 AI 技术已经深入到设计的方方面面,我们可以用它轻松生成高清人像,生成各种风格的素材,或者借助 controlnet 完成超级符号、IP 角色、字体、建筑等设计任务,但如何将不同图层的物体完美融合到一起,目前为止没有一个很好的 AI 解决方法。
以电商产品合成为例,目前已经可以用 AI 生成各种风格的高质量场景图,但想要将已有产品完美融入其中,还是要靠后期人工处理。因为虽然有 AI 轻度重绘可以进行融合,但这会扭曲产品原本的细节,比如文字、花纹、轮廓线条等,尤其是带透明和半透明产品,复杂的光影必须要人工细修才能得到较好的结果。
而如果能有比较好的 AI 打光工具出现,我们就不用费劲地去分析光源,因为 AI 能比人眼更准确、快速地完成相关分析;也不用一个个地调整图层了,AI 可以统一处理,完美实现不同图层的光照色调一致。
即使无法处理非常复杂的光影,对于简单的产品和场景、在需要大批量处理的情况下,引入 AI 绝对是提升效率的好方法。它不仅能降低成本,也能将设计师从繁琐、重复的机械性操作中解放出来,更专注于创意、设计表现的提升。AI 的发展潜力是无限的,也许这个想法很快就能实现。
- 免责声明
- 本文所包含的观点仅代表作者个人看法,不代表新火种的观点。在新火种上获取的所有信息均不应被视为投资建议。新火种对本文可能提及或链接的任何项目不表示认可。 交易和投资涉及高风险,读者在采取与本文内容相关的任何行动之前,请务必进行充分的尽职调查。最终的决策应该基于您自己的独立判断。新火种不对因依赖本文观点而产生的任何金钱损失负任何责任。