728x90 ๋ฐ์ํ self-Supervised-Learning1 DINO: Emerging Properties in Self-Supervised Vision Transformers (2021) Self Supervised learning https://brunch.co.kr/@b047a588c11b462/45 : ๋น์ง๋ ํ์ต ๋ฐฉ์์ ์ผ์ข ์ผ๋ก์ ๋ผ๋ฒจ๋ง๋์ง ์์ ๋ฐ์ดํฐ์ ์ ํ์ฉํ์ฌ ์ธ๊ณต์ง๋ฅ์ด ์ค์ค๋ก ๋ถ๋ฅ์์ ์ ์ํํ๋๋ก ํจ : ์ค์ค๋ก ํ์คํฌ๋ฅผ ์ค์ ํ์ฌ ๋ชจ๋ธ์ ํ์ตํ๋ค๋ ์ ์์ ๊ธฐ์กด์ ๋น์ง๋ ํ์ต ๋ฐฉ์๊ณผ ์ฐจ์ด๊ฐ ์กด์ฌํ๋ฉฐ, ์ธํฐ๋ท์ ํฌ๋กค๋ง์ ํตํด ์์งํ ์ ์๋ ํ ์คํธ, ์ด๋ฏธ์ง, ๋น๋์ค ๋ฑ ๋ค์ํ ์ข ๋ฅ์ ๋ฐ์ดํฐ์ ์ ํ์ฉํ ์๋ ์์ : ๋ชจ๋ธ์ด ํ์ฅ๋๊ธฐ ์ํด์๋ ๋๋์ ๋ฐ์ดํฐ๋ฅผ ํ์๋ก ํ์ง๋ง, ๋ผ๋ฒจ๋ง๋ ๋ฐ์ดํฐ๋ฅผ ์ง์์ ์ผ๋ก ํ๋ณดํ๊ธฐ ์ํด์๋ ๋ง์ ๋น์ฉ์ด ์๊ตฌ๋๋ค๋ ๋จ์ ์ด ์กด์ฌ : ์๊ธฐ ์ง๋ ํ์ต์ ๋ผ๋ฒจ๋ง๋์ง ์์ ํ์ต ๋ฐ์ดํฐ๋ง ํ๋ณดํ๋๋ผ๋ ๋ชจ๋ธ์ ๊ท๋ชจ๋ฅผ ์ฆ๊ฐ์ํฌ ์ ์์ผ๋ฉฐ ์ด์ ๋ฐ๋ผ ์ ํ๋ ์ญ์ ํฅ์์ํฌ.. 2023. 8. 10. ์ด์ 1 ๋ค์ 728x90 ๋ฐ์ํ