一个通过文本文档生成视频的AI应用教程

如今AI发展的越来越迅猛了,从一开始的文本生成,到后来的图像生成,然后出现了基于人工智能出了各式各样的插件和应用,最近又包括之前分享的AI翻唱:AI实现孙燕姿翻唱周杰伦的歌曲,全景图像生成:用Skybox AI如何生成全景图片,如今又有了依据文本生成视频的AI应用。

这是个github上的一个项目,下面教大家如何在google colab上实现云端部署:

首先打开github,搜索camenduru:

选择camenduru/text-to-video-synthesis-colab这个项目,跳转页面进入后,点击readme.md里的框框。

这个项目将会在google colab上部署,界面如下如:

上面代码框是需要部署环境,下面左侧的代码框是生成视频。右侧是参数设置包括提示词,避免提示词,跳数,生成的图像与输入提示的紧密程度与输入的多样性之间的权衡,帧率,总的帧数等

等视频文件生成完毕,点击文件图标

在output里下载文件到本地,就能查看视频效果。

注意由于自己的colab是免费版本,如果生成更长视频则云端环境不会分配更多的GPU和内存会导致错误。为了避免报错,只能减少生成的数据或者购买谷歌服务(捂脸):

分享一个我生成的视频:

再分享一个项目,同样是文本转视频:Picsart-AI-Research/Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators (github.com),感兴趣的同学自己动手试试吧。

发表回复