Midjourney 与 ChatGPT 的结合,从图像到视频的跨越
OpenAI 的代码解释器(Code Interpreter)开放之后,ChatGPT 的能力已经提升了一个数量级,甚至被称为一场产品迭代,达到了 GPT-4.5。
AI 也开始玩出新的花样,让 Code Interpreter 与 Midjourney 相结合来产生不一样的用途。
Midjourney最近相继推出了缩放(Zoom Out)和平移(Panning)功能,现在加上 ChatGPT 最新的代码解释器能力,原本生成的静态图片,如今可以生成惊艳的视频。(查看相关文章:Midjourney 又推新功能,让图像进入“平移”世界)
接下来将教你如何使用 Code interpreter 将 Midjourney 生成的图片变为视频。以下创作经历由社区用户分享:
1. 在设置(Setting)中启用Beta功能——>选择”Code Interpreter“
2. 在下拉菜单中选择切换到 Code Interpreter
然后上传你的图片。
作者想展示一些豪华餐厅的食物。因此,将要求 GPT-4 从左到右为这张食物图像制作动画。
(通过修改下面的 GPT-4 提示,您可以创建自己的动画。)
以下是这次用来制作美食动画的提示:
Prompt:
“这张图片是全景照片。
帮我把它变成一个长宽比为3:2的视频,图像充满整个视频(所以两边被剪掉了)。视频应位于图像的中间。
然后。平滑地平移视频(没有突然跳跃),如下所示:
开始:中心——>右——>中心——>左——>中心:结束
使用 imageio 库来帮助您。将帧直接保存到视频文件而不是列表中
使用 8 像素的帧步长。如有必要,裁剪图像的边缘,使图像的大小可以被帧步长整除。”
接下来等待生成,一起来看成品:
如何修改 Prompt 来对视频进行调整:
要缩小图像,请告诉 GPT 将其大小调整 50%。
要将视频从下往上平移,请将提示更改为:“开始:底部 -> 中心 -> 顶部:结束”
要想使视频速度加快 2 倍,请将帧步长从 8 像素更改为 16 像素。
这是 Midjourney 与 ChatGPT 两大 AI 工具相结合所产生的新效果。在 AI 工具繁荣的时代,将最优秀的工具结合到一起使用,这或许会成为未来的一个不错的结合点,毕竟术业有专攻。
其他作品: