11월 16일, 소셜 미디어 대기업 메타는 최신 인공지능(AI) 모델을 소개했습니다.공식 기사.

실제로 9월 28일에 열린 메타 커넥트 컨퍼런스에서 메타는 에뮤(표현형 미디어 유니버스) 모델을 공개했습니다.이제 이에 대한 업데이트가 있습니다.

첫째, 는 텍스트 및 이미지 입력을 기반으로 비디오 편집을 생성할 수 있습니다. 둘째, 이미지 조작에 특화된 은 이미지 편집의 정밀도를 크게 향상시킵니다.

손쉬운 동영상 제작

메타는 절차를 두 단계로 나누어 처음에는 텍스트 프롬프트를 기반으로 이미지를 생성한 다음, 텍스트와 생성된 이미지를 모두 기반으로 비디오를 생성합니다. 이러한 '요인화' 또는 분리된 비디오 생성 방식을 통해 비디오 생성 모델을 효율적으로 학습할 수 있습니다.

차이점

복잡한 일련의 모델(예: 5가지 모델에 대한비디오 만들기), 이 최첨단 기술은 실행이 간단합니다. 단 두 개의 디퓨전 모델만 사용하여 초당 16프레임으로 512x512 4초 동영상을 제작할 수 있습니다.

(출처: 메타)

업그레이드된 제품 - 에뮤 편집

또한 최근 몇 년 동안 인스트럭터블 이미지 생성 모델이 상당히 발전했지만 정밀한 제어를 제공하는 데 제약이 있습니다.

따라서 다양한 이미지 조작 작업을 간소화하고 이미지 편집의 기능과 정확성을 높이기 위해 고안된 혁신적인 방법인 Emu Edit를 소개합니다.

현재의 수많은 생성 AI 모델과 달리 Emu Edit는 지침을 꼼꼼하게 준수하여 주어진 지침과 관련이 없는 입력 이미지의 원본 픽셀을 보존합니다.

예를 들어 야구 모자에 "알로하!"라는 텍스트를 삽입할 때는 모자의 모양을 변경하지 않아야 합니다.

가장 큰 데이터베이스

모델 학습을 용이하게 하기 위해 메타는 천만 개의 합성 샘플로 구성된 데이터 세트를 큐레이션했습니다. 각 샘플은 입력 이미지, 작업 설명, 해당 타깃 출력 이미지로 구성됩니다.

그들은 표현했습니다,

지금까지의 데이터 세트 중 가장 큰 규모라고 생각합니다;

FB 및 IG와 깊이 있는 결합

메타는 또한 다음과 같이 표현했습니다.의 아이디어인스타그램 게시물에 애니메이션 정적 사진을 추가하거나 완전히 새로운 콘텐츠를 제작할 수 있으며, 향후 자회사인 페이스북 및 인스타그램과 긴밀하게 통합될 것으로 예상됩니다. 그러나 구체적인 시기는 아직 당국에서 공식적으로 발표하지 않았습니다.