안녕하세요. Q1: 사전 지식이라 함이 정확히 무엇을 의미하는지는 이해못했으나, VLM을 학습하는데 있어서 결국에는 LLM과 Vision Encoder 부분을 다시 방대한 데이터로…
안녕하세요. 비디오에서 프레임을 정해진 길이만큼 샘플링한 뒤 개별 프레임에 대해 visual token을 추출합니다. 그 뒤로 visual token들을 temporal axis로 평균을…
안녕하세요. 질문에 답을 드리면 1. 왜 실험에서 visual encoder의 token과 LLM의 visual token끼리 유사도 정량적 측정시 cos sim이 아닌 CKNNA를…
안녕하세요. Q1: 사전 지식이라 함이 정확히 무엇을 의미하는지는 이해못했으나, VLM을 학습하는데 있어서 결국에는 LLM과 Vision Encoder 부분을 다시 방대한 데이터로…