기본 다중 모드 기반 모델
Seele02
MoT(Mixture-of-Transformers) 아키텍처를 기반으로 구축된 기본 다중 모드 기반 모델입니다.
텍스트, 3D 및 공간 신호는 기본 이해, 생성 및 다중 회전 편집을 통해 하나의 표현을 공유합니다.
변압기 혼합물텍스트 · 3D · 공간에이전트 준비
MoT · 아키텍처
이해와 세대 전문가,
공유된 글로벌 자기 관심에 의해 융합되었습니다.
Seele02는 첫날부터 복합 공간에서 열차를 운행합니다. 두 개의 전문가 네트워크(이해 및 생성)는 매개변수를 완전히 분리된 상태로 유지하는 반면, 단일 공유 self-attention은 교차 모드 정렬 및 융합을 처리합니다.
공유된 글로벌 셀프 어텐션크로스모달 융합 버스
텍스트
3D
공간
전문가 이해
추론 측면, 집중.
텍스트, 3D 구조 및 공간 신호에서 의미와 관계를 추출하고 추론, 계획, 도구 호출 및 다중 회전 편집에 안정적인 컨텍스트를 제공합니다.
세대 전문가
세대 측면, 집중.
기하학, 질감, 시공간적 일관성을 전문으로 합니다. 출력은 제어 및 편집 가능한 상태로 유지되며 다중 턴 상호 작용 전반에 걸쳐 ID를 유지합니다.
공유된 자기 관심
다양한 양식을 아우르는 하나의 글로벌 버스.
모든 양식은 범용 버스와 동일한 전역 self-attention을 공유합니다. 전문가들은 하나의 컨텍스트 내에서 끝에서 끝까지 정보를 읽고 정렬하며 이음매 전체에 걸쳐 정보를 보존합니다.
분리 · 통합
분리된 매개변수, 통합 인터페이스.
분리된 전문가는 독립적으로 확장 가능한 교육 및 추론 경로를 제공합니다. 통합 인터페이스를 사용하면 맨 위에 있는 에이전트가 목표에 집중하는 동안 아래에서 방식 전환이 발생합니다.
세 가지 양식 · 네이티브
세 가지 양식, 하나의 표현.
텍스트, 3D 및 공간은 동일한 글로벌 관심에 대해 사전 훈련된 Seele02 내부의 통합 표현 공간을 공유합니다. 교차 모달 이해, 생성 및 다중 회전 편집이 자연스럽게 이루어집니다.
01텍스트
텍스트
지침 따르기, 추론, 긴 컨텍스트 대화 및 도구 사용 — 에이전트의 의미론적 백본과 양식 전반에 걸친 링구아 프랑카입니다.
- 다중 회전 지침 및 도구 호출
- 크로스 모달 설명 및 설명
- 구조화된 출력 및 함수 스키마
023d
3D
기본 3D 표현으로 기하학적 자산을 이해하고 생성합니다. 다중 회전, 언어 기반 편집을 통해 형상, 토폴로지 및 자산 ID를 안정적으로 유지합니다.
- 3D 자산 생성 및 편집
- 보기 일관성이 있는 ID 보존
- 생산 준비가 완료된 내보내기 가능한 형식
03공간적
공간
대화형 세계, 공간 계획 및 제어 가능한 장면 전개를 위한 공간 관계, 카메라 동작 및 장면 구조에 대한 통합 보기입니다.
- 공간 관계 및 장면 그래프
- 카메라 궤적 및 시점 제어
- 지속적이고 탐구 가능한 세계 상태
한 모델은 3D 장면을 읽고, 이를 텍스트로 설명하고, 새로운 관점을 렌더링하고, 자연어 지침에서 공간 레이아웃을 편집합니다. 이 모든 것이 단일 컨텍스트에서 엔드 투 엔드로 진행됩니다.
에이전트 기본 모델
기본 도구 사용. 범용 에이전트를 위한 기반 모델입니다.
도구 사용은 사전 훈련 시간에 모델의 기본 인터페이스로 내장되어 있습니다. Seele02는 다단계 계획, 교차 모드 결정 및 외부 기능 호출이 필요한 복잡한 작업을 구동합니다.
기본 도구 사용
네이티브 함수 호출. 구조화된 인수와 반환 값은 모달 간 컨텍스트를 통해 원활하게 흐릅니다.
다중 회전 계획 및 편집
긴 컨텍스트와 공유된 교차 모드 주의를 통해 에이전트는 여러 턴과 양식에 걸쳐 동일한 자산을 반복할 수 있습니다.
교차 모드 결정
하나의 모델은 텍스트, 3D 및 공간 전반에 걸쳐 의사 결정 기반을 전환합니다. 단일 백본은 모든 양식을 포괄합니다.
안정적인 자산 아이덴티티
개체, 장면 및 캐릭터는 다중 회전 상호 작용 및 교차 모달 변환 전반에 걸쳐 안정적이고 안정적으로 정체성을 유지합니다.
SKU 2개 · 기본 1개
모델 라인업.
다양한 작업 부하를 위한 두 가지 제품 라인. 둘 다 동일한 MoT 베이스와 에이전트 인터페이스를 공유하므로 애플리케이션은 필요에 따라 둘 사이를 전환할 수 있습니다.
플래시
지연 시간이 짧은 상호작용을 위해 제작되었습니다.
실시간 대화, 인스턴트 생성 및 빈번한 에이전트 호출에 맞춰 조정되었습니다. 1초 미만의 피드백이 필요한 경험을 위해 대기 시간을 줄이고 처리량을 높입니다.
- 실시간 다중 모드 대화
- 고주파 도구 호출 및 오케스트레이션
- 제품 UI 내부 즉시 생성
프로
복잡한 추론과 고품질 생산을 위해 제작되었습니다.
장기적인 계획, 다단계 추론, 고충실도 생성을 위해 설계되었습니다. 콘텐츠 제작 파이프라인, 에이전트 오케스트레이션, 품질이 중요한 워크플로에 적합합니다.
- 길고 다단계 추론
- 고품질 3D 및 공간 생성
- 에이전트 오케스트레이션 및 다중 에이전트 협업
다음으로 구축젤레02
차세대 다중 모드 경험을 위한 기본 기반을 찾고 계십니까? 제품과 에이전트가 하나의 통합 MoT 프레임워크 내에서 생각하고, 생성하고, 행동하게 하세요.
