[์ปจํผ][CIO] ์ค์ค๋ก ํ๊ตฌํ๋ AGI์ GPU ์ธํ๋ผ ์ด์ผ๊ธฐ
์๋ณธ ๊ฒ์๊ธ: https://velog.io/@euisuk-chung/์ปจํผCIO-์ค์ค๋ก-ํ๊ตฌํ๋-AGI์-GPU-์ธํ๋ผ-์ด์ผ๊ธฐ
๋ณธ ๋ด์ฉ์ CIO SUMMIT 2024์์ ๋ฐํ๋ ๋ด์ฉ์ ๊ธฐ๋ฐ์ผ๋ก ์ ๊ฐ ๋ ์กฐ์ฌ ๋ฐ ์ ๋ฆฌํด์ ์์ฑํ ๊ธ์ ๋๋ค. ๋ณธ ๊ฒ์๊ธ์ ๋ฐํ ๋ด์ฉ์ ์ ๋ฆฌํ ๊ฒ์ด์ง ํน์ ํ์ฌ๋ฅผ ์นํธโขํ๋ณดํ ๋ชฉ์ ์ด ์๋์ ๋ฐํ๋๋ค. ํ๋ฆฐ ๋ด์ฉ์ด ์๋ค๋ฉด ํธํ๊ฒ ๋๊ธ ๋ฌ์์ฃผ์ธ์!! ๐ค
์ ๋ชฉ
์ค์ค๋ก ํ๊ตฌํ๋ AGI์ GPU ์ธํ๋ผ ์ด์ผ๊ธฐ
๋ฐํ์
ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ ๊นํ์ญ ์์ ์ปจ์คํดํธ
๋ฐํ๋ด์ฉ
Source: ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ (www.his21.co.kr)
๋ญํ๋ ํ์ฌ์ง?
ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ ์ 1985๋ ์ ์ค๋ฆฝ๋ ์ ๋ฌธ ๊ธฐ์ ์ผ๋ก, ๊ณ ๊ฐ ๋น์ฆ๋์ค ํ๊ฒฝ์ ์ต์ ํ๋ ICT ํตํฉ ์๋น์ค๋ฅผ ์ ๊ณตํฉ๋๋ค. ๊ธ์ต, ์ ์กฐ, ๊ณต๊ณต, ํต์ ๋ฑ ๊ตญ๋ด ์ ์ฐ์ ๋ถ์ผ์ SI ์ ์ฒด ๋ฑ ์ฝ 1,700์ฌ ๊ณณ์ ๊ณ ๊ฐ์ฌ๋ก ๋ณด์ ํ๊ณ ์์ต๋๋ค.
ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ ์ ๊ณ ๊ฐ์ ์๊ตฌ์ ๋ง์ถฐ ์ต์ ํ๋ ์๋น์ค๋ฅผ ์ ๊ณตํ๋ฉฐ, ๊ณ ๊ฐ์ฌ์ ๋น์ฆ๋์ค ํ๊ฒฝ์ ๋ง๋ ICT ์๋ฃจ์ ์ ์ ๊ณตํ์ฌ ๊ณ ๊ฐ์ ์ฑ๊ณต์ ๋๊ณ ์์ต๋๋ค. ๊ธฐ์ ์ ๋ฐ์ดํฐ์ผํฐ๋ฅผ ์ด๋ฃจ๋ ์ฃผ์ ์ธํ๋ผ์ธ ์คํ ๋ฆฌ์ง, ์๋ฒ๋ถํฐ ํด๋ผ์ฐ๋, ๋น ๋ฐ์ดํฐ, ์ธ๋์คํธ๋ฆฌ4.0 ๋ฑ์ ํ์ ์ ์ธ ๊ธฐ์ ์ ํ์ฉํ ์๋ฃจ์ ๊ณผ ์๋น์ค๋ฅผ ์ ๊ณตํ์ฌ ๊ณ ๊ฐ์ ๋น์ฆ๋์ค ์ฑ์ฅ์ ๋๊ณ ์ ํฉ๋๋ค.
AI๊ธฐ์ ๊ณผ ๊ธฐ์ ํธ๋๋
์ธ๊ณต์ง๋ฅ(AI) ๊ธฐ์ ๊ณผ ๊ด๋ จ ์ธํ๋ผ๋ ๋น ๋ฅด๊ฒ ๋ฐ์ ํ๊ณ ์์ต๋๋ค. ํนํ GPT-3์ ์ถ์์ ๊ฐ์ ํ๊ธฐ์ ์ธ ์ฌ๊ฑด๋ค์ AI ๊ธฐ์ ์ ํ์ ์ ์ธ ์ง๋ณด๋ฅผ ์์งํฉ๋๋ค. ํด๋น ๋ฐํ์์๋ AI ๊ธฐ์ ๊ณผ ๋๋ถ์ด์ ๋ฐ๋๊ฒ ๋๋ ๊ธฐ์ ํธ๋๋์ ๋ํด์ ์ด์ผ๊ธฐํฉ๋๋ค.
Source: AI๊ธฐ์ ํธ๋๋, ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ
์ค์ค๋ก ํ๊ตฌํ๋ AGI
GPT-4์ ๊ธฐ์ ์ผ๋ก ๊ธฐ์ ํ์ ์ด ์ด๋ฃจ์ด์ง๊ณ ์์ต๋๋ค. GPT-4์ด์ ์ LLMs์ ์์ฑํ AI๊ธฐ์ ์ ๊ฐ๊น์ด ๊ธฐ์ ๋ก ํ๋ฅ ๊ณผ ํต๊ณ๋ก ๋ค์ํ ๋ต๋ณ์ ์์ฑํด๋๋ก ํ์ต ๋ฐ ํ์ธํ๋๋ฉ๋๋ค. (์ํ์ ์ฌ๊ณ )
๋ฐ๋ฉด์ GPT-5 ์ดํ์ ๋๋ํ๊ฒ๋ AGI(Artificial General Intelligence)์ ๊ฒฝ์ฐ๋ AI๊ฐ ์ง์ ์ง๋ฌธ์ ๋ํ ํ๊ตฌ์ ๋ ผ๋ฆฌ์ ์ ๊ทผ์ ํตํด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ณ ์ ํฉ๋๋ค.
Source: ์ค์ค๋ก ํ๊ตฌํ๋ AGI, ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ
โ AGI(์ธ๊ณต ์ผ๋ฐ ์ง๋ฅ)์ด๋?
์ธ๊ณต ์ผ๋ฐ ์ง๋ฅ(AGI)์ ์ธ๊ฐ๊ณผ ์ ์ฌํ ์ง๋ฅ๊ณผ ์ค์ค๋ก ํ์ตํ ์ ์๋ ๋ฅ๋ ฅ์ ๊ฐ์ถ ์ํํธ์จ์ด๋ฅผ ๋ง๋ค๋ ค๋ ์ด๋ก ์ AI ์ฐ๊ตฌ ์์ญ์ ๋๋ค. ์ด๋ ์ํํธ์จ์ด๊ฐ ๊ต์ก์ ๋ฐ์ง ์๊ฑฐ๋, ๊ฐ๋ฐ๋์ง ์์ ์์ ์ ์ํํ ์ ์๋๋ก ํ๋ ๊ฒ์ ๋ชฉํ๋ก ํฉ๋๋ค.
๐ ์ง๊ธ์ AGI์ ์ด๋์ ๋์ ์์ค์ผ๊น?
Morris, Meredith Ringel, et al. โLevels of AGI: Operationalizing Progress on the Path to AGI.โ (2023), ๋ค์ ๋ ผ๋ฌธ์ ๋ค์ํ ์ง๋ฅ์ ์ ๋์์ ๋ํ๋๋ AI ์ฐ๊ตฌ์ ํํฉ์ ํ์ ํ๊ณ , ์ด๋ค ๋ชจ๋ธ์ด ์ค์ ์ํฉ์์ ๋ค์ํ ๋ฌธ์ ์ ๋์ํ ์ ์๋ AGI์ ๊ฐ๊น์ด๊ฐ๋ฅผ ์กฐ์ฌํ๊ณ ์ด๋ฅผ ์๋์ ๊ฐ์ด ํ ์ด๋ธ ํํ๋ก ์ ์ํ์ต๋๋ค.
Source: Morris, Meredith Ringel, et al. โLevels of AGI: Operationalizing Progress on the Path to AGI.โ (2023)
์ Matrix๋ AGI๋ฅผ Narrow(ํน์ ๋๋ฉ์ธ์ ๊ตญํ๋์ด ์๊ฑฐ๋), General(๊ตญํ๋์ด ์์ง ์์) ๊ด์ ์ผ๋ก ๋ถ์์ ์ํํ์๊ณ , ๊ฐ AGI์ ๋จ๊ณ๋ฅผ ๋ค์๊ณผ ๊ฐ์ด ์ ์ํ์์ต๋๋ค:
โ Level 0 - No AI: ์ธ๊ณต์ง๋ฅ์ด ์๋
โ Level 1 - Emerging AGI: ์๋ จ๋์ง ์์ ์ธ๊ฐ๊ณผ ๋๋ฑํ๊ฑฐ๋ ์ฝ๊ฐ ๋ ์ฐ์ํจ
โ Level 2 - Competent AGI: ์ธ๊ณต์ง๋ฅ์ ์๋ จ๋ ์ฑ์ธ์ 50๋ฒ์งธ ๋ฐฑ๋ถ์ ์ด์์ ๊ธฐ์ ์ ๊ฐ์ง
โ Level 3 - Expert AGI: ์ธ๊ณต์ง๋ฅ์ ์๋ จ๋ ์ฑ์ธ์ 90๋ฒ์งธ ๋ฐฑ๋ถ์ ์ด์์ ๊ธฐ์ ์ ๊ฐ์ง
โ Level 4 - Virtuoso AGI: ์ธ๊ณต์ง๋ฅ์ ์๋ จ๋ ์ฑ์ธ์ 99๋ฒ์งธ ๋ฐฑ๋ถ์ ์ด์์ ๊ธฐ์ ์ ๊ฐ์ง
โ Level 5 - Artificial Super Intelligence ASI: ์ธ๊ณต์ง๋ฅ์ 100%์ ์ธ๊ฐ์ ๋ฅ๊ฐํจ
*๋ณธ ๋ ผ๋ฌธ์์๋ ํ์ฌ์ ChatGPT๋ฅผ General ๊ด์ ์์ ์์ง Level1 ์์ค์ผ๋ก ์ ์ํ๊ณ ์์ต๋๋ค.
๋ชจ๋ธ์ ๊ณ ๋ํ์ ๋ฐ๋ฅธ GPU/๋ฐ์ดํฐ ์ฒ๋ฆฌ์ ์ค์์ฑ
LLM์ ๋ฑ์ฅ์ผ๋ก ๋์ฑ ํฐ ๋ฐ์ดํฐ์ ๋ณต์กํ AI ๋ชจ๋ธ์ ํ์ตํ๊ณ ์๋นํ๊ธฐ ์ํด์๋ GPU ์์คํ ๋ฐ ๋ฐ์ดํฐ ์ฒ๋ฆฌ์ ํจ์จ์ด ์ค์ํด์ก์ต๋๋ค. ์ค์ ๋ก ์๋ ๊ทธ๋ฆผ์ ๋ณด๋ฉด GPT-4๋ง ํด๋ ํ์ต์ ํ๋ ๋ฐ ์ด๋ง์ด๋งํ ๋ฆฌ์์ค๊ฐ ์ฌ์ฉ๋ ๊ฒ์ ํ์ธํ ์ ์์ต๋๋ค.
Source: AI ๊ณ ๋ํ๋ก ์ธํ ์ฐ์ฐ๋ ์ฆ๊ฐ, ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ
์ด์ ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ ์์๋ ์๋ 3๊ฐ์ง ํฌ์ธํธ์ ์ค์์ฑ์ ๊ฐ์กฐํ๋ฉฐ ์ด๋ฅผ ์ถฉ์กฑ์ํค๊ธฐ ์ํด์ ๋ ธ๋ ฅํ๊ณ ์๋ค๊ณ ํ๋ฉฐ ์ ๊ณตํ๊ณ ์๋ ์๋น์ค๋ฅผ ์๊ฐํด์ฃผ์ จ์ต๋๋ค.
Source: GPU ์ฅ๋น ์ ํ์ ์ค์์ฑ, ํจ์ฑ์ธํฌ๋ฉ์ด์ ์์คํ
์์ง ์ ๊ฐ ๋ฏธ์ํ์ฌ ์ฅ๋น์ ๋ํด์ ์์ธํ๊ฒ ์์ง ๋ชปํ์ฌ ์ค๋ช ๋๋ฆฌ์ง๋ ๋ชปํ ๊ฒ ๊ฐ์ต๋๋ค๐ฟ ํ๋, LLM์ ๋๋๋ก GPU์์์ ์ค์์ฑ๊ณผ ์ต์ ํ๋ ๋ฐ๋์ ํ์ํด์ง ์์ญ์ด๋ผ๊ณ ์๊ฐํฉ๋๋ค. ์ต๊ทผ์๋ ์ด๋ฌํ ๋ฌดํ์ ๋ฆฌ์์ค๊ฐ ํ์ํ๋ค๋ ๋ฌธ์ ์์ ๋ฒ์ด๋๊ธฐ ์ํด sLLM์ด๋ LLM distillation ๊ธฐ์ ๋ค๋ ๋ง์ด ๋์ค๊ณ ์๋๋ฐ ์๊ฐ์ด ๋๋ค๋ฉด ๊ณต๋ถ ํด๋ณด๊ณ ์ถ๋ค์ ๐คฃ