Audio Lip Sync Pro 推荐,一段音频直接长出面部动画

给虚拟角色配音容易,让嘴动起来难。传统流程是先转写文本、再逐音素打点、再映射到形变键,三步手工活,一分钟成片配一小时口型是行业常态,常态的意思是所有人都忍着,忍到工具出现,出现之前的每一天都是这个产品的潜在市场需求证明。上周冲进发布榜前五的这款 Blender 插件把三步合成一步,音频拖进去,面部关键帧直接长出来,长出来的曲线还能手动修,自动生成不排斥人工精修。我核了商店页、发布信息与开发者自述,这个小工具切中虚拟主播社区刚需,刚需标志是出现之前大家用土办法硬扛,出现之后土办法一夜作废,作废的土办法是最真诚的敬意。

主要功能

工作流极简。在 Blender 的视频序列器里选中音频剪辑,运行插件,面部形变关键帧批量生成,从音轨到动画就一步,中间没有任何转写环节,转写这步省了,转写错误连带的口型错位也一起省了。帧率可自定义,音频偏移自动校准,音画不同步的原始素材也能用。进阶功能三件。多文件批处理一条命令跑完。动画镜像省去对称调整。自动眨眼参数可调,眨眼频率与幅度都是滑杆的事,活人与木偶的差距常常就在那几次眨眼。

技术口径要交代。它生成的是形变键动画,要求模型带业界通用的那套面部形变标准。任意骨骼绑定不在承诺范围内,纯骨骼工作流的同学先确认自己的资产是否达标,达标了再买,不达标先改造资产。语言方面官方称任意语言可用,英语与普通话效果最佳,中文虚拟主播是第一受益人群,这个支持力度在海外工具里少见。

全本地运行,无账号无订阅无联网,这点对内容创作者的素材安全是实打实的加分,未公开的商业素材也不怕外泄。兼容两大渲染器,插件本身以开源许可分发,买了还能自己改,改完的版本商业使用不受限,工具的可塑性交到用户手里。

谁在做谁在用

开发者是新加坡的一位工程师,自述白天上班晚上写插件,这是他的第一个付费产品,上线一个月在虚拟主播社区攒下一小批忠实用户,按自称口径,忠实到有人把工作流整个迁了过来。定价分层,完整版五十美元一次买断,学生档十三美元不可商用,团队五席一百二,试用版免费限三秒音频。三秒够判断效果,判断标准给一个,看生成曲线密度与嘴形贴合度,贴合度差的插件三秒内必露馅。

与开源方案对比,免费命令行工具输出的口型时间轴还要自己接进三维软件,胶水代码写着写着一下午就没了。这边原生插件直接在网格上写曲线,省的是胶水工程,省下的工程就是省下的时间。发布榜当日第五,百来个赞,评论里已有虚拟主播社区用户晒工作流,晒的配置从入门本到工作站都有,门槛高低的反馈都算真实,真实的反馈比五星好评有用,有用的反馈会变成下一版功能清单,清单式的进化比灵感式的进化扎实。

解决了什么需求

虚拟主播产能瓶颈在动画不在直播,一场直播回放要配口型,手工打点按小时计,粉丝催更以天计,缺口就这么来的。批处理功能对这个场景是降维打击,一晚上把一周的素材跑完,机器不睡觉,人睡。三维短片与独立游戏过场动画同理,过场的量一大,口型就是最大的时间黑洞。建模师出身的创作者自己攒了形变键资产的,这个插件让资产直接变现,变现效率比接外包单高,高出来的部分就是时间,时间拿去接下一单,或者休息。

一句话收尾,嘴型这件事终于从手艺活变成了流水线,配音师和动画师可以早点下班了。

来源

  • 商店页 https://superhivemarket.com/products/audio-lip-sync-pro
  • Product Hunt 发布帖 https://www.producthunt.com/products/audio-lip-sync-pro-for-blender
  • 开发者主页 https://holotype.com.sg/shop