【财新网】6月13日凌晨,美国AI初创公司Luma宣布其视频生成大模型“Dream Machine(造梦机)”开启测试,将免费开放给所有用户,通过在官网输入文字描述和提示词,Dream Machine可以在120秒以内生成120帧影像(视频长度约5秒),拥有较高的画面逼真度和流畅度。
这将加剧当前AI视频赛道的竞争。2月,OpenAI推出文生视频模型Sora,可根据用户提示词生成长达1分钟的视频,效果足以乱真,但至今仅定向邀请测试、尚未打开公测。此外,Pika、Runway和PixVerse等文生视频产品基于原创模型,生成视频长度约为3-4秒,但部分产品有付费门槛。
在国内,字节跳动、生数科技、腾讯、快手(01024.HK)等公司也陆续公布了文生视频模型进展。其中,字节跳动剪映旗下的“即梦”以及快手的“可灵”已经针对测试用户开放使用权限。(详见《GPT革命|快手上线类Sora视频大模型 可生成2分钟视频》)即梦有图片生视频、文本生视频两个选项,除了输入提示词,可以选择运镜类型、视频比例和运动速度,生成3-6秒的视频,并可再次生成、重新编辑。快手在6月6日开放测试的自研文生视频模型“可灵”,采用类Sora的技术路线,生成的视频分辨率为1080p,时长约为2分钟(帧率30fps),且支持输出自由宽高比。