Luma发布新AI模型支持视频生成与编辑
快速阅读: 据Luma消息,该公司近日推出Ray3 Modify新模型,支持通过角色参考图像修改视频并保留原表演细节,可自动生成起止帧间过渡画面以提升创作连贯性,已上线Dream Machine平台。
美国人工智能视频与3D建模公司Luma近日发布名为Ray3 Modify的新模型。该模型支持用户通过提供角色参考图像,在保留原始镜头表演效果的前提下对现有视频进行修改,并可根据指定的起始帧与结束帧自动生成过渡画面,提升创作连贯性。
Luma表示,Ray3 Modify有效解决了创意工作室在使用AI编辑或生成特效时难以保留人类表演细节的问题。新模型能更精准地跟随输入视频内容,使制作团队可继续采用真人演员拍摄品牌或创意素材,同时保留其原有动作、节奏、视线方向及情感表达。
借助该技术,创作者可将真人演员外观转换为指定角色形象,并在整段拍摄中保持服装、外貌特征与身份信息的一致性。此外,通过设定起止参考帧,用户还能引导模型生成特定过渡效果,实现对角色行为与场景衔接的精细控制。
Luma联合创始人兼首席执行官阿米特·贾因指出,当前生成式视频模型虽表现力强,但控制难度大。Ray3 Modify融合现实拍摄与AI生成能力,在赋予创作者充分控制权的同时,使其无需重新搭景即可即时调整场景、更换服装,甚至“重拍”镜头。
该模型已上线Luma旗下Dream Machine平台。今年6月,该公司首次推出视频修改功能。11月,Luma宣布完成9亿美元融资,由沙特公共投资基金旗下的AI公司Humain领投,a16z、Amplify Partners和Matrix Partners等原有投资方跟投。公司还计划与Humain合作在沙特建设2吉瓦规模的AI算力集群。
(以上内容均由Ai生成)
引用自:TechCrunch科技媒体