视频编辑的门槛正在被AI拉平。DecartAI开源的Lucy Edit模型,让用文字修改视频这件事变得像换装游戏一样简单。
这个被称为"视频领域开源Nano Banana"的项目,核心能力在于理解自然语言指令。输入"给这位女士换上哥特裙装",系统就能在保持人物动作、表情不变的前提下,精准替换服装。实测中,从职业装变比基尼、人类变蜥蜴人这类操作,都能在16毫秒内完成渲染。
比较有意思的是那个"给扎克伯格T恤加文字"的演示,AI准确理解了"表达真实想法"的潜台词,在衣服上生成"WiFi太烂"的字样——这种带点讽刺的幽默感,倒是比技术本身更让人印象深刻。
从演示效果看,Lucy Edit 在服装更换上表现最出色,人物/角色替换也很强,物体替换在结构相似的情况下效果不错。颜色修改和添加物体的效果相对不太稳定,全局场景转换可能会改变主体身份。81 帧的视频生成比短视频的时间一致性更好。
技术上有两个亮点:一是身份保持技术,换装不换脸;二是动态适配能力,衣服褶皱会随动作自然摆动。开发者版已在HuggingFace开源,专业版通过FAL提供API服务。
目前能看到的应用场景:
他们提供了三个版本:开源的 Lucy Edit Dev 模型放在 Hugging Face,ComfyUI 节点方便工作流集成,还有通过 FAL 提供的 Pro 版 API。模型对 20-30 词的详细描述反应最好,使用特定触发词(Change、Add、Replace、Transform to)能让模型更准确理解编辑意图。
对开发者来说,ComfyUI节点和HuggingFace模型都已开放;普通用户可以通过playground.decart.ai在线体验。不过要注意,480P以上分辨率目前还是Pro版专属。
当同行还在卷文生视频时,这个团队选择了更务实的赛道。毕竟修改现有素材,比从零生成更符合实际工作流。下次见客户前,或许你可以先让AI给演示视频换上对方公司的代表色。
官网:https://decart.ai
github:https://github.com/decartAI/lucy-edit-comfyui
huggingface:https://huggingface.co/decart-ai/Lucy-Edit-Dev