优酷×侯明昊：AI与真人实拍，看进去就出不来
AI无疑2023的重要关键词，而这一次我们在视频层面，实践了Ai风格重置与艺人实拍的无缝融合，感谢优酷客户给予的创意空间，与我们一同进行的AI探索。闲话少说，先看片。
优酷2023Brand Film “看进去就出不来”的优酷
原初的Brief是，如何表达优酷有着精彩内容，横跨热血漫改剧、风雅国学、新国风动漫、潮酷综艺。我们很快锁定“看进去就出不来”的想法，主角被“吸入”优酷世界后，以AI分身横穿《异人之下》、《万卷风雅集》、《暗河传》、《这就是街舞》，各个有着精彩内容的AI世界。几个场景中尤以热播漫改剧《异人之下》为主推，凭一句“武当王也拜见老天师”炸裂社交圈的“王也”本也——侯明昊，当仁不让成为了我们推荐的“穿越者”。
第一道难关：艺人在场景，怎么和素材互动
如何让想法落地，确实有太多未知X因素。最先遇到的难题是，怎么表现艺人与场景素材的互动？
各种剧各种综艺都已成片，不可能跟着你的脚本转。那，穿越到场景内，利用某个媒介介质看AI重置素材？这也太逊了，在内部这个easy solution第一秒也被推翻了。只能和自己死磕了：无论如何，都要实现ai重置与真人实拍的无缝融合，这是“死命令”。接下来，就是一番翻找素材，找寻合适角度机位的苦功夫。
在大段的素材找寻那几帧的潜力镜头，所有为数不多的空景和大wide景，就成了我们眼中的香饽饽。要“神还原”既有的影视剧/综艺素材的拍摄角度与摄影机焦距，拍摄硬件黑科技少不了：在实拍中Motion Control与Q-Take双管齐下，配合艺人绿幕前无实物表演，才达成了后期AI合成神同步的基础。
shooting board中，人物与素材须融合的镜头节选
第二道难关：AI风格化，如何平衡艺人和其他素材
攻克了第一道难关，接下来才是最难过的关——AI解决素材和真人的融合度。艺人的AI化形象需要有辨识度，又需要平衡全篇其余镜头的AI风格化。AI小组和后期团队紧密配合，在Stable Diffusion中尝试了不同的预处理模型，并反复实验不同的seed值。多次反复试验后，采用油画风格SDXL大模型插件，基于v1.5模型的官方升级版，语言模型引入了OpenAI的CLIP使得提示词更容易被理解。
为更好保证艺人的可辨识度，依然借助于传统online的后期方式，为牵涉到艺人的画面垫了一层底，再融合ai风格化重置，完成了虚与实的平衡融合。这样，也算一定程度上完成了从传统后期到AI后期的小跨越。
AI艺人与AI场景的融合demo
第三道难关：如何防抖
在AI重置中，还有一个需要对抗的问题就是抖动，在许多AI探索的作品中抖动感还是非常强烈的。为了解决这个问题，我们使用了kaiber，一个基于SD的底层模型，通过添加视频高级融合算法，以降噪、去模糊、增强、放大、缩小、超分辨率等，使风格化加强同时，减少抖动与前后帧不连贯的问题，保证了视频稳定度。
第四道难关？关关都是难关
在AI的探索过程中，其实会随机得到许多意想不到的效果，这些过程稿或遗珠未必能出现在成片中，我们也挑选了其中一部分分享出来。
异人之下土河车片段早期尝试稿
街舞赛博朋克AI方向寻找稿
街舞赛博朋克尝试稿
暗河传不同程度重置对比
过场AI自动演算过程稿
本片落地于电影院和户外大屏，取得了不错的反响。
重庆观音桥
影院
长沙五一广场国金通道
写在最后的思考
此番优酷2023Brand Film由好旺角创意厂牌H2O操刀，与优酷一同攻坚克难了素材与实拍融合的AI制作。算作为2023的AI大潮中，贡献了一朵别样的浪花。在过程中，团队深深地被以天为计量单位的迭代速度震惊了，一切都在几何级数野蛮生长。短短一两月之间，不断有新预处理器及新的“丹药”Lora产生，真正应验了“学无止境”。
AI在疯狂生长，而我们的观点始终是：AI不能代替人类的思考，尤其是创意人的思考。如何善用巧用AI工具，才是我们的学无止境。
创作人员名单
创意合伙人：Thomas.Li
业务总监：Serena.Liu
创意总监：David.Li
客户服务：Lydia Xu、琳子
项目信息
专业评分
专业评分已截止
评论
评论
推荐评论
全部评论（5条）