세계 최고의 실시간 아바타 모델이 이제 오픈소스로 공개되었으며, 가중치도 함께 제공됩니다. 모델을 가져와서 수정하고, 비용 없이 사용하세요. 특별한 점: 저희 모델은 사용자가 말하는 동안 듣습니다 — 전이중 방식으로, 아바타가 최소 지연 시간으로 실시간 반응합니다. • 모든 프레임이 생성되어, 미리 렌더링된 재생에서 발생하는 성가신 애니메이션 루프를 방지합니다. • 전체 스트리밍 인프라가 포함되어 있어 바로 시작할 수 있습니다.
AVTR-1은 완전한 오픈소스 실시간 AI 아바타 모델로, 사전 녹화된 비디오 루프에 말하는 입을 덧붙이는 방식이 아닌 모든 프레임의 얼굴을 실시간으로 생성합니다. 전이중(full-duplex) 모드로 작동하여, 사용자가 말하는 동안 아바타가 듣고 최소 지연 시간으로 즉시 반응합니다. 이 모델과 완전한 스트리밍 인프라는 GitHub에서 무료로 다운로드할 수 있으며, 사용 비용이 없습니다.
아바타는 사용자가 말을 마칠 때까지 기다리지 않습니다. 지속적으로 듣고, 단어뿐만 아니라 대화의 감정적 톤과 일치하는 표정과 미세 표정으로 응답합니다.
아바타 얼굴의 모든 프레임이 즉석에서 생성됩니다. 이는 다른 아바타 시스템에서 현실감을 깨뜨리는 반복적이고 기계적인 애니메이션을 제거합니다.
모델 가중치는 오픈 라이선스로 공개됩니다. AVTR-1을 다운로드, 수정 및 배포할 때 사용당 요금이나 로열티를 지불할 필요가 없습니다.
릴리스에는 실시간 스트리밍을 위한 전체 파이프라인이 포함되어 있어, 다운로드에서 작동하는 아바타까지 몇 분 만에 완료할 수 있으며 몇 달이 걸리지 않습니다.
"오늘까지 모든 '실시간' AI 아바타는 동일한 트릭이었습니다 — 사전 녹화된 얼굴에 생성된 입을 덧붙이는 방식이었죠. 오늘, 그것이 바뀝니다."
이 한 문장은 핵심 혁신을 포착합니다: AVTR-1은 정적 비디오에 립싱크 오버레이가 아닙니다. 표정, 반응 및 미세 움직임을 포함한 전체 얼굴을 실시간으로 생성합니다. 아바타는 사용자가 말할 때 놀라움, 공감 또는 혼란을 보여줄 수 있어, 상호작용이 로봇처럼 느껴지지 않고 진정으로 인간처럼 느껴지게 합니다.
생생하고 반응하는 디지털 프레즌스가 필요한 제품을 구축 중인 경우 — 영업 코치, 언어 튜터, 고객 지원 에이전트 또는 가상 프리젠터 등. 사전 녹화된 아바타 루프의 언캐니 밸리(uncanny valley)나 독점 실시간 모델의 높은 비용에 좌절했다면, AVTR-1은 실제로 듣는 무료 오픈 대안을 제공합니다.
고려해볼 만한 다른 도구
Loading comments…
제작자
neon_dev
웹사이트 방문
avaturn.live
프로젝트 정보
제품 키워드
성과
