![[Olewave's Review] CLIP (3/3): Learning Transferable Visual Models From Natural Language Supervision](/media/video/2023/01/olewaves-review-clip-3-3-learning-transferable-visual-models-from-natural-language/preview.jpg)
[Olewave's Review] CLIP (3/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
์ด CLIP ๊ฒํ ์ ๋ง์ง๋ง ๋ถ๋ถ์ ๊ฒฐ๊ณผ ์น์ ์ ๋๋ฌํ๋ฉฐ, ์ฌ๊ธฐ์ OpenAI์ ๋์กฐ์ ์ด๋ฏธ์ง-ํ ์คํธ ๋ชจ๋ธ์ด ํฅ๋ฏธ๋ก์ด ์์ด๋์ด์์ ์ ์ฒด ๋ฉํฐ๋ชจ๋ฌ ์คํ์ ๊ธฐ์ด ๊ณ์ธต ๊ธฐ๋ณธ ์์๋ก ์ ํ๋์์ต๋๋ค.
![[Olewave's Review] CLIP (2/3): Learning Transferable Visual Models From Natural Language Supervision](/media/video/2023/01/olewaves-review-clip-2-3-learning-transferable-visual-models-from-natural-language/preview.jpg)
[Olewave's Review] CLIP (2/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
OpenAI์ CLIP์ ๊ณ ์ ๋ ์ด๋ธ ์ธํธ๋ฅผ ๋ฒ๋ฆฌ๊ณ ๋์ ์ธํฐ๋ท์์ ์์งํ 4์ต ๊ฐ์ (์ด๋ฏธ์ง, ํ ์คํธ) ์์ผ๋ก ํ๋ จํจ์ผ๋ก์จ ์ปดํจํฐ ๋น์ ์ ์คํฌ๋ฆฝํธ๋ฅผ ๋ค์ง์์ต๋๋ค.
![[Olewave's Review] CLIP (1/3): Learning Transferable Visual Models From Natural Language Supervision](/media/video/2022/12/olewaves-review-clip-1-3-learning-transferable-visual-models-from-natural-language/preview.jpg)
[Olewave's Review] CLIP (1/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
BLIP, LLaVA, ๋๋ ๊ฐ์น ์๋ ์์ฑ-LLM์ด ์๊ธฐ ์ ์ CLIP์ด ์์์ผ๋ฉฐ, ์ด๊ฒ์ด ์ด์ผ๊ธฐ๊ฐ ์์๋๋ ๊ณณ์ ๋๋ค.
![[Long Review] Cascaded Diffusion Models for High Fidelity Image Generation](/media/video/2022/06/long-review-cascaded-diffusion-models-for-high-fidelity-image-generation/preview.jpg)
[์ฅ๋ฌธ ๋ฆฌ๋ทฐ] Cascaded Diffusion Models for High Fidelity Image Generation
Imagen๊ณผ DALL-E 2๊ฐ ์์ฑ ์ด๋ฏธ์ง๋ฅผ ์ํ ํ์ฐ์ ๊ธฐ๋ณธ๊ฐ์ผ๋ก ๋ง๋ค๊ธฐ ์ ์, ์ด Google Brain ๋ ผ๋ฌธ์ ์ดํ ๋ง์ ํ ์คํธ-์ด๋ฏธ์ง ์์คํ ์ด ์กฐ์ฉํ ์ฐจ์ฉํ cascaded diffusion ๋ ์ํผ๋ฅผ ์ ์ํ์ต๋๋ค: ์์
![[Short Review] Cascaded Diffusion Models for High Fidelity Image Generation](/media/video/2022/06/short-review-cascaded-diffusion-models-for-high-fidelity-image-generation/preview.jpg)
[๋จ๋ฌธ ๋ฆฌ๋ทฐ] Cascaded Diffusion Models for High Fidelity Image Generation
Cascaded diffusion์ ๋ง์ ์ต์ ์์ฑ ์์ ์ ๊ธฐ์ ๋ฅผ ์ด๋ฃจ๋ ๋ค๋จ๊ณ ๋ ์ํผ์ ๋๋ค: ํ ๊ฐ์ diffusion ๋ชจ๋ธ๋ก ์์ ์ด๋ฏธ์ง๋ฅผ ์์ฑํ ํ, ๊ณ ์ฃผํ ์ธ๋ถ