✅ 높은 생성, ✅ 품질 안무, ✅ 음악 임베딩을 사용합니다, ✅ Frozen Jukebox 모델 인코딩, ✅ 조건부 확산 모델을 사용합니다, ✅ 시간적 일관성을 시행합니다, ✅ 여러 5개를 처리합니다., ✅ 두 번째 클립, ✅ 임의 지원, ✅ 전체 비디오 길이, ✅ 임의의 공간 및 시간적 제약, ✅ 조인트에 적합합니다, 현명한 제약, ✅ 모션에 유용합니다, ✅ 사이
EDGE: 음악에서 편집 가능한 댄스 생성은 주크박스 모델의 음악 임베딩을 사용하여 음악에서 고품질 안무를 생성하는 AI 도구입니다.이 도구는 고정된 주크박스 모델을 사용하여 입력 음악을 임베딩으로 인코딩한 다음 조건부 확산 모델을 사용하여 음악 임베딩을 일련의 5초 댄스 클립에 매핑하는 방식으로 작동합니다.추론 시 여러 클립 배치에 시간적 제약 조건을 적용하여 임의 길이의 전체 비디오로 연결하기 전에 시간적 일관성을 강화합니다.이 도구는 임의의 공간적 및 시간적 제약을 지원하므로 관절 제약이 적용되는 댄스, 중간 모션 및 댄스 연속을 포함하여 다양한 최종 사용자 애플리케이션에 적합합니다.또한 EDGE에는 슬라이딩을 그대로 유지하면서 물리적 현실성을 향상하고 의도하지 않은 발 슬라이딩을 방지하여 생성된 댄스가 물리적으로 그럴듯하게 유지되는 새로운 접촉 일관성 손실 기능이 있습니다.이 도구는 물리적 사실성을 염두에 두고 훈련되었으며 EDGE에서 생성된 댄스에 대한 인간 평가자의 강한 선호도에서 알 수 있듯이 이전 작업보다 뛰어난 성능을 보이는 것으로 나타났습니다.전반적으로 EDGE: 음악에서 편집 가능한 댄스 생성은 음악에서 고품질 안무를 생성하는 데 적합한 강력한 AI 도구로, 엔터테인먼트 및 예술을 포함한 다양한 산업에 잠재적으로 응용할 수 있습니다.