Google은 텍스트 기반 명령을 사용하여 보다 사실적인 이미지와 비디오를 만드는 데 도움이 되는 새로운 생성 AI 도구인 Lumiere를 출시했습니다. Lumiere의 가장 큰 장점 중 하나는 끊김 현상 없이 사실적으로 보이는 움직임을 만들어내는 능력입니다. 이는 실제로 키프레임을 먼저 사용한 다음 동작이 어떻게 진행되어야 하는지 학습하는 대신 소프트웨어가 모든 비디오 프레임을 동시에 생성하기 때문에 가능합니다.

인상적이지 않을 수도 있지만 최신 생성 인공 지능 도구의 도움으로 우리는 더 나아가 놀라운 작품을 만들 수 있습니다.

Lumiere는 또한 확산 확률 모델을 사용하여 이미지 생성을 돕습니다. 이는 시공간 U-Net과 결합됩니다. 모르시는 분들을 위해 말씀드리자면, U-Net은 시간적 확대/축소와 이미지에 주의 블록을 추가하는 아키텍처입니다. 가장 좋은 점은 이 새로운 생성 AI 도구를 다른 많은 모델과 함께 사용할 수 있어 이전에 본 것보다 더 사실적인 이미지와 비디오를 만드는 데 도움이 된다는 것입니다.

Lumiere를 사용하여 다음을 만들 수 있습니다.

  • 영화 촬영법은 이미지의 단일 부분에 애니메이션을 적용합니다.

  • 애니메이션 비디오의 개체는 다른 개체로 대체될 수 있습니다.

  • 스타일화된 생성: 생성된 모든 아트 스타일을 다른 스타일로 변경할 수 있습니다.

  • 이미지를 비디오로: 원하는 이미지에 애니메이션을 적용하는 데 도움이 됩니다.

  • 비디오 투 비디오: 사용자가 다양한 예술적 스타일로 비디오를 만들 수 있습니다.

  • 이 글을 쓰는 시점에서 Lumiere는 최대 5초 길이의 비디오만 만들 수 있으며 비디오 전환 및 다중 각도 카메라 작업을 만드는 기능은 없습니다. Lumiere를 사용해보고 싶다면 표준 GPU로는 할 수 없다는 점도 주목할 가치가 있습니다. PC 자체에는 강력한 그래픽 처리 기능이 있어야 합니다. 그렇지 않으면 도구가 전혀 실행되지 않습니다.

    체험판 방문:

    https://lumiere-video.github.io/