VAE 학습 분석 및 Dense Video Caption 프롬프트 연구
VAE 직접 학습시켜서 과정이랑 추론 단계 뜯어봄. 사전/사후 분포 비교 셀 추가해서 분석 깊이 높임. Seedance 2.0 돌리려고 ActivityNet 캡션 데이터 보는데, Dense Video Caption 방식 프롬프트 짜는 게 좀 까다로움.
이 날의 포인트
- VAE 학습 및 추론 과정 분석 자동화
- 사전/사후 분포 비교 로직 구현
- Seedance 2.0용 Dense Video Caption 프롬프트 전략 수립
세션별로 뭘 시켰나 (3개)
-home-son-prj-vae
16:43 — 17:22
155개 메시지
vae를 직접 학습시켜서 그 학습 과정과 추론 과정을 분석해보고 싶어. 관련된 자료들 다 알아서 받아서 이 폴더에 저장하거나 하고, (/mnt/4tb에 데이터들이 있으니 필요하면 활용) 결과를 md파일과 주피터 노트북 파일로 만들어줘.
-mnt-4tb-datasets-activitynet-captions-annotations
17:45 — 18:00
20개 메시지
seedance 1.0 논문에 언급된 dense video caption 방식으로 프롬프트를 생성해 seedance 2.0 모델을 추론하려고 해. dvc 캡션의 대표주자인 애를 받아서 내용을 봤는데, 프롬프트로는 어떻게 적어야 할지 모르겠네?
-home-son-prj-vae
17:47 — 18:23
151개 메시지
ㅇㅇ 사전 사후 분포 비교하는 셀 추가해줘.