导读 我对生成人工智能领域的增长感到惊讶。我们已经习惯了ChatGPT，它根据我们的书面提示生成文本。最近，我们也看到人工智能制作视频。ChatGPT...
我对生成人工智能领域的增长感到惊讶。我们已经习惯了ChatGPT，它根据我们的书面提示生成文本。最近，我们也看到人工智能制作视频。ChatGPT现在有它，其他公司也有。今天，我们要谈谈GoogleLumiere。它会根据您输入的提示创建视频，而且效果非常好。让我们了解更多相关信息。什么是GoogleLumiere?
谷歌最近推出了“Lumiere”。现在，它到底做了什么?GoogleLumiere是一个视频生成人工智能模型。它使用一种新的扩散模型，称为Space-Time-U-Net或STUNet。这个STUNet的工作原理是空间和时间的概念。所以它基本上是视频中事物的位置以及它们最终将如何移动和变化。此过程使Lumiere能够一次性创建视频，而不是采用将较小的静止帧放在一起的传统路线。
它是如何工作的?
现在让我们谈谈输入提示后该过程如何进行。一旦你向GoogleLumiere发出提示，它就会使用STUNet框架并计算出你所要求的对象将放置在框架中的位置以及它们将如何移动以创建更多最终流动在一起的框架。这最终使视频能够以更加无缝的运动方式出现。这里的一个区别是GoogleLumiere更关注运动本身以及它生成的内容应该在给定点的位置。其他模型通常从已发生运动的生成关键帧拼接视频。
GoogleLumiere还从稳定视频扩散中生成80帧，而不是25帧。这有助于视频显得近乎真实，从谷歌发布的视频中可以明显看出。然而，由于它是人工智能，它确实让我们看到了视频中人工的地方。但它仍然令人印象深刻。