小张Python

在一些业务场景中，需要对人像图片添加特定光源，来增加氛围感，例如赛博朋克科技、海边夕阳余晖、以及红蓝相间的高冷；但实现这个功能的难点是：如何将光源与原图片融合，在图片上产生正常光的镜面反射；如RGB光在人脸上的科技光，阳光在人脸上的泛黄。下图是本人跑的样例结果，每张图共有四列，前三列分别为 原图、目标光源、加完光源的目标图片；最后一列是 基于第三列的目标光源图像， 又做了次扩图操作，关于【扩图】可以参考。开源项目 IC-Light 正是用于实现这一功能，专业名词为 image relighting；

ComfyUI 项目的出现加快了这种趋势的形成，workflow(工作流)是项目的核心概念，为了实现某个功能/图像操作，需要借助多模型/多步骤操作，在 worflow 会把每个步骤视为一个节点，例如加载图像，通过连线的方式将节点间串联起来，一个节点的输出对应另一个节点的输入，最后，一个workflow 是由 N 个点 和 M 条线组成。因此，目前几乎每个 workflow 都会有多模型组成的痕迹，有的是纯cv 模型，有的可能 CV + LLM 相结合，也就是某种意义上的多模态。