[์ปจํผ][CIO] ์Šค์Šค๋กœ ํƒ๊ตฌํ•˜๋Š” AGI์™€ GPU ์ธํ”„๋ผ ์ด์•ผ๊ธฐ

Posted by Euisuk's Dev Log on February 27, 2024

[์ปจํผ][CIO] ์Šค์Šค๋กœ ํƒ๊ตฌํ•˜๋Š” AGI์™€ GPU ์ธํ”„๋ผ ์ด์•ผ๊ธฐ

์›๋ณธ ๊ฒŒ์‹œ๊ธ€: https://velog.io/@euisuk-chung/์ปจํผCIO-์Šค์Šค๋กœ-ํƒ๊ตฌํ•˜๋Š”-AGI์™€-GPU-์ธํ”„๋ผ-์ด์•ผ๊ธฐ

๋ณธ ๋‚ด์šฉ์€ CIO SUMMIT 2024์—์„œ ๋ฐœํ‘œ๋œ ๋‚ด์šฉ์„ ๊ธฐ๋ฐ˜์œผ๋กœ ์ œ๊ฐ€ ๋” ์กฐ์‚ฌ ๋ฐ ์ •๋ฆฌํ•ด์„œ ์ž‘์„ฑํ•œ ๊ธ€์ž…๋‹ˆ๋‹ค. ๋ณธ ๊ฒŒ์‹œ๊ธ€์€ ๋ฐœํ‘œ ๋‚ด์šฉ์„ ์ •๋ฆฌํ•œ ๊ฒƒ์ด์ง€ ํŠน์ • ํšŒ์‚ฌ๋ฅผ ์˜นํ˜ธโ€ขํ™๋ณดํ•  ๋ชฉ์ ์ด ์•„๋‹˜์„ ๋ฐํž™๋‹ˆ๋‹ค. ํ‹€๋ฆฐ ๋‚ด์šฉ์ด ์žˆ๋‹ค๋ฉด ํŽธํ•˜๊ฒŒ ๋Œ“๊ธ€ ๋‹ฌ์•„์ฃผ์„ธ์š”!! ๐Ÿค—

์ œ๋ชฉ

์Šค์Šค๋กœ ํƒ๊ตฌํ•˜๋Š” AGI์™€ GPU ์ธํ”„๋ผ ์ด์•ผ๊ธฐ

๋ฐœํ‘œ์ž

ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ ๊น€ํ˜•์„ญ ์ˆ˜์„ ์ปจ์„คํ„ดํŠธ

๋ฐœํ‘œ๋‚ด์šฉ

CIO_SUMMIT

Source: ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ (www.his21.co.kr)

๋ญํ•˜๋Š” ํšŒ์‚ฌ์ง€?

ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ์€ 1985๋…„์— ์„ค๋ฆฝ๋œ ์ „๋ฌธ ๊ธฐ์—…์œผ๋กœ, ๊ณ ๊ฐ ๋น„์ฆˆ๋‹ˆ์Šค ํ™˜๊ฒฝ์— ์ตœ์ ํ™”๋œ ICT ํ†ตํ•ฉ ์„œ๋น„์Šค๋ฅผ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค. ๊ธˆ์œต, ์ œ์กฐ, ๊ณต๊ณต, ํ†ต์‹  ๋“ฑ ๊ตญ๋‚ด ์ „ ์‚ฐ์—…๋ถ„์•ผ์™€ SI ์—…์ฒด ๋“ฑ ์•ฝ 1,700์—ฌ ๊ณณ์„ ๊ณ ๊ฐ์‚ฌ๋กœ ๋ณด์œ ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ์€ ๊ณ ๊ฐ์˜ ์š”๊ตฌ์— ๋งž์ถฐ ์ตœ์ ํ™”๋œ ์„œ๋น„์Šค๋ฅผ ์ œ๊ณตํ•˜๋ฉฐ, ๊ณ ๊ฐ์‚ฌ์˜ ๋น„์ฆˆ๋‹ˆ์Šค ํ™˜๊ฒฝ์— ๋งž๋Š” ICT ์†”๋ฃจ์…˜์„ ์ œ๊ณตํ•˜์—ฌ ๊ณ ๊ฐ์˜ ์„ฑ๊ณต์„ ๋•๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ๊ธฐ์—…์˜ ๋ฐ์ดํ„ฐ์„ผํ„ฐ๋ฅผ ์ด๋ฃจ๋Š” ์ฃผ์š” ์ธํ”„๋ผ์ธ ์Šคํ† ๋ฆฌ์ง€, ์„œ๋ฒ„๋ถ€ํ„ฐ ํด๋ผ์šฐ๋“œ, ๋น…๋ฐ์ดํ„ฐ, ์ธ๋”์ŠคํŠธ๋ฆฌ4.0 ๋“ฑ์˜ ํ˜์‹ ์ ์ธ ๊ธฐ์ˆ ์„ ํ™œ์šฉํ•œ ์†”๋ฃจ์…˜๊ณผ ์„œ๋น„์Šค๋ฅผ ์ œ๊ณตํ•˜์—ฌ ๊ณ ๊ฐ์˜ ๋น„์ฆˆ๋‹ˆ์Šค ์„ฑ์žฅ์„ ๋•๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค.

AI๊ธฐ์ˆ ๊ณผ ๊ธฐ์ˆ  ํŠธ๋žœ๋“œ

์ธ๊ณต์ง€๋Šฅ(AI) ๊ธฐ์ˆ ๊ณผ ๊ด€๋ จ ์ธํ”„๋ผ๋Š” ๋น ๋ฅด๊ฒŒ ๋ฐœ์ „ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ GPT-3์˜ ์ถœ์‹œ์™€ ๊ฐ™์€ ํš๊ธฐ์ ์ธ ์‚ฌ๊ฑด๋“ค์€ AI ๊ธฐ์ˆ ์˜ ํ˜์‹ ์ ์ธ ์ง„๋ณด๋ฅผ ์ƒ์ง•ํ•ฉ๋‹ˆ๋‹ค. ํ•ด๋‹น ๋ฐœํ‘œ์—์„œ๋Š” AI ๊ธฐ์ˆ ๊ณผ ๋”๋ถˆ์–ด์„œ ๋ฐ”๋€Œ๊ฒŒ ๋˜๋Š” ๊ธฐ์ˆ  ํŠธ๋žœ๋“œ์— ๋Œ€ํ•ด์„œ ์ด์•ผ๊ธฐํ•ฉ๋‹ˆ๋‹ค.

CIO_SUMMIT

Source: AI๊ธฐ์ˆ ํŠธ๋žœ๋“œ, ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ

์Šค์Šค๋กœ ํƒ๊ตฌํ•˜๋Š” AGI

GPT-4์„ ๊ธฐ์ ์œผ๋กœ ๊ธฐ์ˆ  ํ˜์‹ ์ด ์ด๋ฃจ์–ด์ง€๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. GPT-4์ด์ „์˜ LLMs์€ ์ƒ์„ฑํ˜• AI๊ธฐ์ˆ ์— ๊ฐ€๊นŒ์šด ๊ธฐ์ˆ ๋กœ ํ™•๋ฅ ๊ณผ ํ†ต๊ณ„๋กœ ๋‹ค์–‘ํ•œ ๋‹ต๋ณ€์„ ์ƒ์„ฑํ•ด๋„๋ก ํ•™์Šต ๋ฐ ํŒŒ์ธํŠœ๋‹๋ฉ๋‹ˆ๋‹ค. (์ˆ˜ํ•™์  ์‚ฌ๊ณ )

๋ฐ˜๋ฉด์— GPT-5 ์ดํ›„์— ๋„๋ž˜ํ•˜๊ฒŒ๋  AGI(Artificial General Intelligence)์˜ ๊ฒฝ์šฐ๋Š” AI๊ฐ€ ์ง์ ‘ ์งˆ๋ฌธ์— ๋Œ€ํ•œ ํƒ๊ตฌ์™€ ๋…ผ๋ฆฌ์  ์ ‘๊ทผ์„ ํ†ตํ•ด ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค.

CIO_SUMMIT

Source: ์Šค์Šค๋กœ ํƒ๊ตฌํ•˜๋Š” AGI, ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ

โ“ AGI(์ธ๊ณต ์ผ๋ฐ˜ ์ง€๋Šฅ)์ด๋ž€?

์ธ๊ณต ์ผ๋ฐ˜ ์ง€๋Šฅ(AGI)์€ ์ธ๊ฐ„๊ณผ ์œ ์‚ฌํ•œ ์ง€๋Šฅ๊ณผ ์Šค์Šค๋กœ ํ•™์Šตํ•  ์ˆ˜ ์žˆ๋Š” ๋Šฅ๋ ฅ์„ ๊ฐ–์ถ˜ ์†Œํ”„ํŠธ์›จ์–ด๋ฅผ ๋งŒ๋“ค๋ ค๋Š” ์ด๋ก ์  AI ์—ฐ๊ตฌ ์˜์—ญ์ž…๋‹ˆ๋‹ค. ์ด๋Š” ์†Œํ”„ํŠธ์›จ์–ด๊ฐ€ ๊ต์œก์„ ๋ฐ›์ง€ ์•Š๊ฑฐ๋‚˜, ๊ฐœ๋ฐœ๋˜์ง€ ์•Š์€ ์ž‘์—…์„ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ๋„๋ก ํ•˜๋Š” ๊ฒƒ์„ ๋ชฉํ‘œ๋กœ ํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ“ ์ง€๊ธˆ์€ AGI์— ์–ด๋А์ •๋„์˜ ์ˆ˜์ค€์ผ๊นŒ?

Morris, Meredith Ringel, et al. โ€œLevels of AGI: Operationalizing Progress on the Path to AGI.โ€ (2023), ๋‹ค์Œ ๋…ผ๋ฌธ์€ ๋‹ค์–‘ํ•œ ์ง€๋Šฅ์˜ ์ •๋„์—์„œ ๋‚˜ํƒ€๋‚˜๋Š” AI ์—ฐ๊ตฌ์˜ ํ˜„ํ™ฉ์„ ํŒŒ์•…ํ•˜๊ณ , ์–ด๋–ค ๋ชจ๋ธ์ด ์‹ค์ œ ์ƒํ™ฉ์—์„œ ๋‹ค์–‘ํ•œ ๋ฌธ์ œ์— ๋Œ€์‘ํ•  ์ˆ˜ ์žˆ๋Š” AGI์— ๊ฐ€๊นŒ์šด๊ฐ€๋ฅผ ์กฐ์‚ฌํ•˜๊ณ  ์ด๋ฅผ ์•„๋ž˜์™€ ๊ฐ™์ด ํ…Œ์ด๋ธ” ํ˜•ํƒœ๋กœ ์ •์˜ํ–ˆ์Šต๋‹ˆ๋‹ค.

CIO_SUMMIT

Source: Morris, Meredith Ringel, et al. โ€œLevels of AGI: Operationalizing Progress on the Path to AGI.โ€ (2023)

์œ„ Matrix๋Š” AGI๋ฅผ Narrow(ํŠน์ • ๋„๋ฉ”์ธ์— ๊ตญํ•œ๋˜์–ด ์žˆ๊ฑฐ๋‚˜), General(๊ตญํ•œ๋˜์–ด ์žˆ์ง€ ์•Š์€) ๊ด€์ ์œผ๋กœ ๋ถ„์„์„ ์ˆ˜ํ–‰ํ•˜์˜€๊ณ , ๊ฐ AGI์˜ ๋‹จ๊ณ„๋ฅผ ๋‹ค์Œ๊ณผ ๊ฐ™์ด ์ •์˜ํ•˜์˜€์Šต๋‹ˆ๋‹ค:

โœ… Level 0 - No AI: ์ธ๊ณต์ง€๋Šฅ์ด ์•„๋‹˜

โœ… Level 1 - Emerging AGI: ์ˆ™๋ จ๋˜์ง€ ์•Š์€ ์ธ๊ฐ„๊ณผ ๋™๋“ฑํ•˜๊ฑฐ๋‚˜ ์•ฝ๊ฐ„ ๋” ์šฐ์ˆ˜ํ•จ

โœ… Level 2 - Competent AGI: ์ธ๊ณต์ง€๋Šฅ์€ ์ˆ™๋ จ๋œ ์„ฑ์ธ์˜ 50๋ฒˆ์งธ ๋ฐฑ๋ถ„์œ„ ์ด์ƒ์˜ ๊ธฐ์ˆ ์„ ๊ฐ€์ง

โœ… Level 3 - Expert AGI: ์ธ๊ณต์ง€๋Šฅ์€ ์ˆ™๋ จ๋œ ์„ฑ์ธ์˜ 90๋ฒˆ์งธ ๋ฐฑ๋ถ„์œ„ ์ด์ƒ์˜ ๊ธฐ์ˆ ์„ ๊ฐ€์ง

โœ… Level 4 - Virtuoso AGI: ์ธ๊ณต์ง€๋Šฅ์€ ์ˆ™๋ จ๋œ ์„ฑ์ธ์˜ 99๋ฒˆ์งธ ๋ฐฑ๋ถ„์œ„ ์ด์ƒ์˜ ๊ธฐ์ˆ ์„ ๊ฐ€์ง

โœ… Level 5 - Artificial Super Intelligence ASI: ์ธ๊ณต์ง€๋Šฅ์€ 100%์˜ ์ธ๊ฐ„์„ ๋Šฅ๊ฐ€ํ•จ

*๋ณธ ๋…ผ๋ฌธ์—์„œ๋Š” ํ˜„์žฌ์˜ ChatGPT๋ฅผ General ๊ด€์ ์—์„œ ์•„์ง Level1 ์ˆ˜์ค€์œผ๋กœ ์ •์˜ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

๋ชจ๋ธ์— ๊ณ ๋„ํ™”์— ๋”ฐ๋ฅธ GPU/๋ฐ์ดํ„ฐ ์ฒ˜๋ฆฌ์˜ ์ค‘์š”์„ฑ

LLM์˜ ๋“ฑ์žฅ์œผ๋กœ ๋”์šฑ ํฐ ๋ฐ์ดํ„ฐ์™€ ๋ณต์žกํ•œ AI ๋ชจ๋ธ์„ ํ•™์Šตํ•˜๊ณ  ์„œ๋น™ํ•˜๊ธฐ ์œ„ํ•ด์„œ๋Š” GPU ์‹œ์Šคํ…œ ๋ฐ ๋ฐ์ดํ„ฐ ์ฒ˜๋ฆฌ์˜ ํšจ์œจ์ด ์ค‘์š”ํ•ด์กŒ์Šต๋‹ˆ๋‹ค. ์‹ค์ œ๋กœ ์•„๋ž˜ ๊ทธ๋ฆผ์„ ๋ณด๋ฉด GPT-4๋งŒ ํ•ด๋„ ํ•™์Šต์„ ํ•˜๋Š” ๋ฐ ์–ด๋งˆ์–ด๋งˆํ•œ ๋ฆฌ์†Œ์Šค๊ฐ€ ์‚ฌ์šฉ๋œ ๊ฒƒ์„ ํ™•์ธํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

CIO_SUMMIT

Source: AI ๊ณ ๋„ํ™”๋กœ ์ธํ•œ ์—ฐ์‚ฐ๋Ÿ‰ ์ฆ๊ฐ€, ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ

์ด์— ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ์—์„œ๋Š” ์•„๋ž˜ 3๊ฐ€์ง€ ํฌ์ธํŠธ์˜ ์ค‘์š”์„ฑ์„ ๊ฐ•์กฐํ•˜๋ฉฐ ์ด๋ฅผ ์ถฉ์กฑ์‹œํ‚ค๊ธฐ ์œ„ํ•ด์„œ ๋…ธ๋ ฅํ•˜๊ณ  ์žˆ๋‹ค๊ณ  ํ•˜๋ฉฐ ์ œ๊ณตํ•˜๊ณ  ์žˆ๋Š” ์„œ๋น„์Šค๋ฅผ ์†Œ๊ฐœํ•ด์ฃผ์…จ์Šต๋‹ˆ๋‹ค.

CIO_SUMMIT

Source: GPU ์žฅ๋น„ ์„ ํƒ์˜ ์ค‘์š”์„ฑ, ํšจ์„ฑ์ธํฌ๋ฉ”์ด์…˜์‹œ์Šคํ…œ

์•„์ง ์ œ๊ฐ€ ๋ฏธ์ˆ™ํ•˜์—ฌ ์žฅ๋น„์— ๋Œ€ํ•ด์„œ ์ž์„ธํ•˜๊ฒŒ ์•Œ์ง€ ๋ชปํ•˜์—ฌ ์„ค๋ช…๋“œ๋ฆฌ์ง€๋Š” ๋ชปํ•  ๊ฒƒ ๊ฐ™์Šต๋‹ˆ๋‹ค๐Ÿ˜ฟ ํ—ˆ๋‚˜, LLM์˜ ๋Œ€๋‘๋กœ GPU์ž์›์˜ ์ค‘์š”์„ฑ๊ณผ ์ตœ์ ํ™”๋Š” ๋ฐ˜๋“œ์‹œ ํ•„์š”ํ•ด์ง„ ์˜์—ญ์ด๋ผ๊ณ  ์ƒ๊ฐํ•ฉ๋‹ˆ๋‹ค. ์ตœ๊ทผ์—๋Š” ์ด๋Ÿฌํ•œ ๋ฌดํ•œ์ • ๋ฆฌ์†Œ์Šค๊ฐ€ ํ•„์š”ํ•˜๋‹ค๋Š” ๋ฌธ์ œ์—์„œ ๋ฒ—์–ด๋‚˜๊ธฐ ์œ„ํ•ด sLLM์ด๋‚˜ LLM distillation ๊ธฐ์ˆ ๋“ค๋„ ๋งŽ์ด ๋‚˜์˜ค๊ณ  ์žˆ๋Š”๋ฐ ์‹œ๊ฐ„์ด ๋‚œ๋‹ค๋ฉด ๊ณต๋ถ€ ํ•ด๋ณด๊ณ  ์‹ถ๋„ค์š” ๐Ÿคฃ



-->