persam1 PERSONALIZE SAM review (ICRL2024) SAM의 성능이 매우 좋기 때문에 학습없이 하나의 이미지로 자신이 원하는 물체를 찾아 낼 수 있는 방법을 찾다가, PerSAM 을 찾았다. https://arxiv.org/pdf/2305.03048.pdf 이 논문은 ICLR2024 poster에 accept 된 논문이었다. 이 논문은 강아지의 예를 들면서 자기의 강쥐가 하나 사진이 있으면 어떤 데이터셋에서 그 강쥐를 찾도록 하는 그런 시나리오에서 자신들의 알고리즘이 잘 작동한다고 하고 있다. SAM 자체가 visual prompt 를 가지고 인식을 하는 것 이기 때문에 이를 건드리는것 같은 느낌이 들었다. 작동방식을 간단하게 말하자면, 다음과 같다. SAM의 인코더를 통해서 학습할 퍼스널 이미지의 임베딩을 얻는다. 이 퍼스털 임베딩과 테스트 이미지의 모.. 2024. 3. 26. 이전 1 다음
