Dataset Viewer 리팩토링 및 로컬 LLM 환경 정리
laion_viewer를 dataset_viewer로 이름 바꾸고 전체적으로 리팩토링함. OpenVid 랜덤 셔플 후 비디오 로딩 안 되는 버그 잡느라 고생 좀 함. 중간에 로컬 LLM 모델 샤드들이랑 안 쓰는 GPT OSS 120B 정리하고, 데이터셋 추가 다운로드 작업도 병행함.
이 날의 포인트
- laion_viewer 프로젝트 명칭 및 구조 변경
- OpenVid 랜덤 셔플 시 비디오 로딩 이슈 디버깅
- 로컬 LLM 모델 샤드 및 불필요한 대형 모델 삭제
- e621, danbouru 데이터셋 추가 확보
세션별로 뭘 시켰나 (22개)
-mnt-4tb-datasets
claude
09:49 — 16:58
48개 메시지
현재 상황
-home-son-prj-dataset-viewer
claude
09:51 — 09:51
6개 메시지
(시스템 메시지만 있음)
-home-son-prj-laion-viewer
claude
09:52 — 14:58
658개 메시지
/mnt/4tb/dataset을 바라보는 viewer를 만들었어. 이 프로젝트 명을 dataset_viewer로 바꾸려고 해. 폴더명부터 연관된 거 다 바꿔줄래? (기존: laion_viewer)
-home-son-prj-local-llm
claude
14:57 — 17:50
59개 메시지
지금 docker로 로컬 모델 돌고있나?
-home-son-prj-dataset-viewer
claude
14:59 — 15:19
10개 메시지
(시스템 메시지만 있음)
-home-son-prj-dataset-viewer
claude
14:59 — 15:19
24개 메시지
너 지금 로컬 모델 쓰고 있는거 맞아?
-mnt-4tb-datasets
claude
15:03 — 15:03
1개 메시지
테스트
-mnt-4tb-datasets
claude
15:05 — 15:05
2개 메시지
test
-mnt-4tb-datasets
claude
15:06 — 15:06
2개 메시지
test
-mnt-4tb-datasets
claude
15:07 — 15:07
2개 메시지
test
-mnt-4tb-datasets
claude
15:08 — 15:08
1개 메시지
test
-mnt-4tb-datasets
claude
15:09 — 15:15
7개 메시지
test
-mnt-4tb-datasets
claude
15:15 — 15:16
5개 메시지
test
-mnt-4tb-datasets
claude
15:17 — 15:17
3개 메시지
(시스템 메시지만 있음)
-home-son-prj-dataset-viewer
claude
15:20 — 20:57
738개 메시지
프로젝트 읽어봐. 지금 openvid 랜덤 셔플 이후 비디오 가 로딩이 안되는 문제가 있어.
-home-son-prj-dataset-viewer
claude
15:21 — 15:21
12개 메시지
프로젝트 읽어봐. 지금 openvid 랜덤 셔플 이후 비디오 가 로딩이 안되는 문제가 있어.
-home-son-prj-dataset-viewer
claude
15:21 — 15:21
2개 메시지
test
-home-son-prj-dataset-viewer
claude
15:23 — 15:23
5개 메시지
test
-home-son-prj-dataset-viewer
claude
15:23 — 15:23
2개 메시지
TEST
-mnt-4tb-datasets
claude
16:59 — 22:58
922개 메시지
추가적으로 e621 데이터셋과 danbouru 데이터셋 다운받아줘.
-home-son
claude
17:36 — 17:36
16개 메시지
일단 steadydancer 프로젝트에서 모델 샤드들 다 지워주고, llm에서 gpt oss 120b 지워줘. public dataset은 그대로 둬.
-home-son-prj-local-llm
claude
17:55 — 18:51
31개 메시지
192.168.1.116에 요청보내려면 어떻게해야해? loader_laion.py