- MOFA-Video: Controllable Image Animation via Generative Motion Field Adaptions in Frozen Image-to-Video Diffusion Model
- ✨V-Express: Conditional Dropout for Progressive Training of Portrait Video Generation
EMO처럼 얼굴 비디오 생성 모델이 나왔다. Tencent AI에서 한 연구로 코드까지 공개했다 - Kaleido Diffusion: Improving Conditional Diffusion Models with Autoregressive Latent Modeling
MLLM의 text와 image 사이 관계성에 대한 연구가 화두이다. - Video-MME: The First-Ever Comprehensive Evaluation Benchmark of Multi-modal LLMs in Video Analysis
- ✔Learning Temporally Consistent Video Depth from Video Diffusion Priors
input으로 비디오를 넣으면 depth map을 자동으로 만들어 주는 모델. 생성 연구의 여러 방면에서 유용하게 쓸 수 있을 것 같다. 코드 없음 - ✔ZeroSmooth: Training-free Diffuser Adaptation for High Frame Rate Video Generation
videocrafter 같은 비디오 생성 모델. zero-shot training free가 특징이다. TencentAI에서 했다.
공부