可灵大模型(Kling)是由快手大模型团队自研打造的视频生成大模型,具备强大的视频生成能力,可灵大模型的采用了原生的文生视频技术路线,替代了图像生成+时序模块的组合,这也是可灵生成时间长、帧率高,能准确处理复杂运动的核心,从而让用户可以轻松高效地完成艺术视频创作,由于采用了与Sora类似的模型架构,据说在效果上可以对标Sora

可灵大模型的主要特点:

合理运动生成:可灵大模型能够生成大幅度且合理的运动,采用3D时空联合注意力机制,更好地建模视频中的复杂时空运动。

物理世界模拟:它能够模拟真实物理世界的特性,包括光影反射、重力影响下的流体运动等,构建起一个无限逼近现实的想象空间。

概念组合与想象力:具备强大的概念组合能力和想象力,能够生成符合物理规律的视频内容。

视频质量:生成的视频具有1080p的分辨率,时长可达到2分钟(帧率30fps),并且支持多种宽高比。

的应用方面,基于“可灵”大模型,未来将无法有更多应用方向落地,比如即将首发的“AI 唱跳”新玩法,可以仅需一张照片就能驱动表情和肢体动作,生成“唱跳”视频。

如何使用可灵大模型?

访问官方网站:访问可灵大模型的官方网站。

注册并登录账号:在官网上注册一个用户账号,并使用该账号登录。

选择视频生成参数:根据需求选择视频生成的相关参数,如视频长度、分辨率等。可灵大模型支持生成长达2分钟、帧率30fps的视频,分辨率高达1080p,并且支持自由调整宽高比。

输入或上传视频创作内容:可以直接输入文本描述来指导AI生成视频,或者上传预先制作的素材作为参考。

生成视频:提交所有设置后,可灵大模型将开始生成视频。该模型具备强大的概念组合能力和想象力,能够生成大幅度的合理运动和模拟物理世界特性的视频。

下载和编辑视频:生成的视频可以直接下载到本地。如果需要进一步编辑,可以使用快影App中的AI创作功能进行调整和优化。

可灵在哪里可以找到?

基于“可灵”的文生视频功能位于“快影”App 首页的“AI 玩法”模块下的“AI 生视频”页面,目前处于限时内测免费的状态,用户可以申请体验。

可灵(图1)

申请流程:下载快影APP - AI玩法 - AI生视频模块 - 填问卷申请。

除了视频生成模块,快手大模型团队还向其中加入了自研3D人脸重建技术,以及背景稳定性和重定向模块,更生动地展现表情和运动效果,同时可灵大模型还计划开放图生视频功能,用户可以期待更多创新的视频生成工具。