birdf00t
Multimodal Nested Learning for Decoupled and Coordinated Optimization
모달리티 간 최적화 불균형 문제를 해결하기 위해, 기존의 일체형 학습 구조를 중첩된 하위 프로세스들로 재구성한 학습 프레임워크
오디오-이미지 인식, 이미지-텍스트 인식, 2D-3D 인식 작업에서 가장 높은 성능
- ✉️ me@61rd.com
- 🔗 GitHub
모달리티 간 최적화 불균형 문제를 해결하기 위해, 기존의 일체형 학습 구조를 중첩된 하위 프로세스들로 재구성한 학습 프레임워크
오디오-이미지 인식, 이미지-텍스트 인식, 2D-3D 인식 작업에서 가장 높은 성능