前面文章的介绍,我们可以通过在自己笔记本电脑上部署的Llama 3大模型生成文章、文本润色、生成摘要等。今天我们更进一步,在文本的基础上,快速制作一部儿童故事短视频,且可根据自己需要完全原创……
前提:有AI大模型对话机器人
第一种方式(推荐),可参考前面文章,自己部署大模型,深入体验一下大模型:
部署Llama 3 8B开源大模型:玩转 AI,笔记本电脑安装属于自己的 Llama 3 8B 大模型和对话客户端
部署Llama 3 8BWeb版对话机器人:一文彻底整明白,基于 Ollama 工具的 LLM 大语言模型 Web 可视化对话机器人部署指南
部署中文版**Llama 3(Llama3-Chinese-Chat)**大模型:基于Llama 3搭建中文版(Llama3-Chinese-Chat)大模型对话聊天机器人
第二种方式,可以使用免费的大模型,国内大模型包括 阿里的通义,百度的文心一言,抖音的豆包等。
由于老牛同学在自己的笔记本电脑部署了Llama大模型,因此使用的自己的AI大模型,下面就开始视频制作了。
第一分钟:明确儿童故事创意和编写Prompt提示词
这部分包含两部分:
明确儿童故事创意:因为是儿童故事,我相信大家能想象出很多的创意,耳熟能详的包括龟兔赛跑、守株待兔、亡羊补牢等,老牛同学今天的创意是小猫钓鱼故事。
编写Prompt提示词:编写Prompt提示词是一个技术活,目前还可作为一份职业,Prompt提示词的好坏,直接影响着AI大模型的输出结果。Prompt提示词的编写技巧,可以参考老牛同学的文章:高效编写大模型 Prompt 提示词,解锁 AI 无限创意潜能
老牛同学新小猫钓鱼记故事创意的Prompt提示词如下:
|
|
第二分钟:借助Llama 3等大模型生成故事内容🎨
把以上故事创意Prompt提示词输入到Llama 3大模型中,即可生成故事内容,老牛同学的新小猫钓鱼记故事内容如下(特别注意,由于大模型的计算不可约性原理,不同大模型或者相同大模型,多次输入的产出内容可能不一样):
|
|
第三分钟:借助「剪映」图文生成功能生成短视频
目前还没有根据文本生成视频的开源大模型,国外OpenAI发布的Sora大模型,我们目前无法访问。幸运的是,国内剪映有类似的功能,可根据文本内容,自动匹配素材并生成视频。
- 打开剪映App,点击图文成片按钮:
- 在“图文成片”页,点击自由编辑文案按钮:
- 输入新小猫钓鱼记文本内容,点击应用按钮:
- 在底部弹框选择智能匹配素材选项
- 即可开始制作视频:
- 最导出视频即可:
导出的视频存储在手机中了~
最后总结
到目前为止,我们的原创视频制作完成了。
剪映的智能匹配素材功能,虽然方便我们视频制作过程,但老牛同学的新小猫钓鱼记匹配的素材,感觉都是根据每句文案产出,并没有上下文关联,导致素材一会儿是动漫风格、一会儿是现代网络图片等,全文的素材特别不协调。
而反观OpanAI的Sora根据Prompt提示词制作的视频,全文内容一致、形象逼真,真心希望我们大模型能快速发展,赶超国际水平~
关注本公众号,我们共同学习进步 👇🏻👇🏻👇🏻
我的本博客原地址:https://ntopic.cn/p/2024053101