[ECCV2022]MultiMAE: Multi-modal Multi-task Masked Autoencoders
이번에 소개드릴 논문은 요새 self-supervised learning에서 핫한 Masked Autoencoder입니다. 근데 이제 Multi-modal과 Multi-task를 곁들인. 혹시 Masked Autoencoder(MAE)에 대해서 아직 잘 모르시는 분들은 저희 연구실의 미래…
[ICML 2021] An Image is Worth 16×16 Words : Transformer for image recognition at scale
Before Review Vision Transformer(ViT) 논문입니다. 요즘 비디오 분야에서도 Transformer 기반의 백본이 활발하게 연구가 되는 추세입니다. 저도 관련해서 계속 follow-up을 하고 있는데 제가 ViT에 대한 detail을…
[NIPS 2022] VideoMAE : Masked Autoencoders are Data-Efficient Learners for Self-Supervised Video Pre-Training
Before Review 사실 제가 지난 리뷰에서 이미지 도메인에서의 MAE를 다뤘는데 그 이유는 바로 VideoMAE를 읽기 위함이었습니다. 그리고 또한 VideoMAE를 읽는 이유는 이번에 비디오 분야에서 개쩌는(?)…
[CVPR 2022] Masked Autoencoders Are Scalable Vision Learners
Before Review 진짜 오랜만에 X-Review 인 것 같습니다. 이번에는 비디오 논문이 아닌 이미지 논문을 읽게 되었습니다. 요즘 Masking Model 들이 많은 연구가 이루어지고 있어서 저도…
<2022년 RCV 연구실 생활을 마무리 하며>
안녕하세요. 이 글에서는 2022년 RCV 생활을 돌아보며 2023년의 목표를 정리하고자 합니다. urp를 마치고 연구실에 들어온 지 4개월이란 시간이 흘렀습니다. 그 동안의 활동을 돌아보니 정말 시간이…
<2022년 RCV 연구실 생활을 마무리 하며>
이제 2023년이 되었습니다. 올해부터 석사생으로 진학하게 되는 만큼, 올 한 해를 더욱 의미 있고 유익하게 보내야겠습니다. 작년을 되돌아보고, 새해를 맞이하는 마음가짐으로 다이어리를 작성해보았습니다. 제가 상반기를…
<2022년 RCV 연구실 생활을 마무리 하며>
12월 한 달은 저의 연구실 생활로 하여금 가장 큰 번뇌의 시간이 아니었나 싶습니다. 이런 저의 12월을 요약하자면… 유아무야 흐지부지 라고나 할 수 있을 것 같습니다….
<2022년 RCV 연구실 생활을 마무리하며>
안녕하세요. 2022년 하반기, 연구실 생활을 시작하여 이제 6개월 차 2022년을 마무리하는 이상인입니다. 2022년에 글을 마무리 지으려 했는데, 2023년이 되었네요. 2022년 후반기에 연구실 생활을 시작하여, 2022년의…
<2022년 RCV 연구실 생활을 마무리 하며>
2023년의 첫 날입니다. URP를 포함하여 연구실에 들어온지 이제 만 1년이 되었네요. 지난 1년의 시간동안 얻은 것들과 이를 바탕으로 내년에는 어떤 마음가짐으로 연구실 생활을 할지 적어보겠습니다….
<2022년 RCV 연구실 생활을 마무리 하며>
부제: 석사 1년을 마무리하며 저는 부끄럽게도 사실 성찰을, 특히 글로 작성하여 공유를 자주 즐기는 타입이 아닙니다. 매년 X-Diary 작성을 하면서도 일기 작성과 같이 주저리주저리 적었던…
안녕하세요 지연님 좋은 리뷰 감사합니다. SGM 설명해주시는 부분에서 저는 문맥상 SGM이 학습시에만 사용되서 visual feature가 context정보를 학습하도록 돕는다고 이해했는데 "SGM은…