깃(Git)선제압
한국어

로그인

글 읽기는 로그인 없이 됩니다. 커뮤니티에 글 · 댓글을 쓰거나 추천 · 신고를 하려면 로그인해 주세요.

로그인하면 아래 안내에 동의한 것으로 봅니다. 이용 안내 · 개인정보 안내

로그인하지 않고 둘러보기

← 소식

영상 생성

엔비디아 Cosmos 3 오픈 체크포인트 4종, 주행·로봇 월드 시뮬레이션용

올린 때 기준일

엔비디아가 Cosmos 3 계열에 상호작용형 월드 시뮬레이션용 오픈 가중치 체크포인트 4종을 추가했다. 다중 센서 주행 장면과 양팔 로봇 시뮬레이션이 대상이며 범용 텍스트-투-비디오 모델은 아니다.

무슨 일이 있었나

엔비디아가 Hugging Face 공식 블로그에 올린 글을 바탕으로 한 내용이다.

  • 오픈 가중치 체크포인트 4종이 Cosmos 3 계열에 추가됐다. 용도는 상호작용형 월드 시뮬레이션과 다중 센서·다중 시점 주행 장면이다.
  • Cosmos3-Nano-Transfer-Auto는 날씨, 조명, 시간대를 바꾼 다중 시점 주행 데이터를 생성한다.
  • Cosmos3-Nano-Sim-Auto는 주행 시뮬레이션을 위해 동기화된 카메라와 LiDAR 관측을 스트리밍한다.
  • 양팔 시뮬레이션 체크포인트는 YAM과 AgiBot 형태를 지원하며, 정책 또는 사람이 조작하는 조이스틱으로 제어한다.
  • 4종 모두 Cosmos 3 Nano(학습 가능 파라미터 16B, 공식)를 추가 학습한 예시이며, OpenMDW1.1 라이선스로 약관 범위 내 상업·비상업 이용이 가능하다고 한다.

우리 관점

로컬 영상 생성 용도로 바로 쓰는 모델이라기보다 물리 AI 시뮬레이션용 자료로 보는 것이 맞다. 폐루프 사용에는 별도의 시뮬레이션 런타임과 WSM 렌더러가 필요하다고 해서 설치만으로 쓰는 도구는 아니다. 확인한 범위에서는 네 번째 체크포인트 이름, 벤치마크 수치, 클립 길이, 해상도가 나오지 않았다. 맥이나 일반 PC에서 어느 정도 사양으로 돌아가는지도 알려지지 않았다. 기본 Cosmos 3는 6월 공개였고 이번에 새로 나온 것은 이 4종뿐이다.

출처와 관련 글

영상 생성의 다른 소식

  1. 구글 Gemini Omni 1.2 Flash 정식 출시, 15초 영상 지원 (blog.google)

    구글이 Gemini Omni 1.2 Flash를 Gemini API와 Google Cloud 등에서 정식 제공한다고 밝혔다. 15초 영상 생성과 다중 턴 편집을 지원하며 720p 가격은 초당 $0.07(공식)이다.

    영상 생성| |출처 2곳 |우리 관점 있음
  2. LTX-2 코드 v1.6.0, 코드는 Apache 2.0으로… 가중치는 별도 라이선스 유지 (github.com)

    Lightricks가 LTX-2 저장소를 v1.6.0(11월 4일)과 v1.6.1(11월 5일)로 올렸다. 코드는 Apache 2.0이 됐지만 모델 가중치는 그 라이선스에 포함되지 않고, 옛 API가 여러 개 제거됐다.

    영상 생성| |출처 1곳 |우리 관점 있음
  3. MiniMax-H3용 빠른 디코더 Sol-H3-VAE, ComfyUI 0.44.0에 지원 추가 (huggingface.co)

    H3 영상의 VAE 디코딩을 대신하는 Sol-H3-VAE가 공개됐고 ComfyUI 0.44.0이 11월 4일 지원을 넣었다. RTX 5090 기준 5초 클립 디코딩이 12.5초에서 5.0초로 줄었다는 제작팀 수치가 있다.

    영상 생성| |출처 2곳 |우리 관점 있음

소식 전체 보기