Autodesk旗下Wonder Dynamics公司最近推出Wonder Animation,这是其基于人工智能在线平台Wonder Studio的新增“视频转3D场景”工具。该功能目前处于测试阶段,旨在帮助艺术家更接近制作完整的动画电影,将编辑后的真人视频转变为3D环境中的CG角色动画场景。
Wonder Studio自去年推出以来,便提供了一体化解决方案,可将CG角色插入视频片段,跟踪真人演员的动作,并将其替换为CG角色,同时自动匹配角色的灯光与背景。除了渲染的视频,该平台还为演员、摄像机轨道和动作捕捉数据生成干净的板和alpha蒙版,可用作独立的动作捕捉工具。
Wonder Animation进一步扩展了Wonder Studio的应用范围,其核心技术在于其能够将具有多种剪辑和不同镜头的影片片段,一键转化为3D动画。
这一过程中,无论是远景、中景还是特写镜头,都能被精准地捕捉并转换。用户可以在转换后的3D场景中,对动画、角色、环境、灯光和摄影机追踪数据进行全面的编辑和调整。
值得注意的是,Wonder Animation不仅支持将影片转换为3D场景,还能将这些场景导出到多种流行的3D编辑软件中,如Maya、Blender和Unreal Engine。这意味着创作者可以在自己熟悉的平台上,对转换后的3D场景进行进一步的加工和优化。
从Autodesk发布的展示视频中可以看到,转换后的动画影片能够完整地重建成3D场景,并在Maya中进行编辑。这一技术的创新之处在于,它能够在一定程度上呈现出实拍场景的虚拟版本,包含所有摄影机设定、角色动画和脸部动画,所有这些都整合于单一的3D场景中。
Autodesk强调,尽管AI技术已经取得了巨大的进步,但目前仍普遍存在一种误解,认为AI是一键解决方案。而Wonder Animation则致力于打破这一误解,它帮助创作者更接近创作完整的动画电影,同时确保他们拥有完全的创意掌控权。
这与市面上大多数生成式AI工具的模式截然不同,Wonder Animation的输出是完全可编辑的,用户可以根据自己的需求进行调整和优化。
Wonder Animation是Wonder Studio所有订阅的一部分,目前处于测试阶段。该平台基于浏览器,可在Chrome或Safari中运行,目前不支持移动浏览器。
包括Lite和Pro两种订阅选项,Lite订阅每月29.99美元或每年299.88美元,可导出1080p渲染视频、动作捕捉数据、干净的画面、摄像机轨道和3D场景;Pro订阅每月149.99美元或每年1499.88美元,最高导出分辨率提高到4K,同时还可以导出roto蒙版。
使用以积分为基础:处理一秒钟的视频需要20个积分。精简版订阅每月包含3000个积分,专业版订阅每月包含12000个积分。