Euisuk's Dev Log

ใ€Œ์„œ์ฟ  ๊ฐœ๋ฐœ๋…ธํŠธโญใ€

[Paper Review] Co-Director: ๋‹ค์ค‘ ์—์ด์ „ํŠธ์™€ ๋ฐด๋”ง ํƒ์ƒ‰์œผ๋กœ ์˜์ƒ์˜ ์ฐฝ์ž‘ ๋ฐฉํ–ฅ์„ ์กฐ์œจํ•˜๊ธฐ

YouTube์—์„œ ์˜์ƒ ๋ณด๊ธฐ ๋…ผ๋ฌธ ๊ฐœ์š”์™€ ์ „์ฒด ๊ตฌ์กฐ Co-Director๋Š” ๊ฐ„๋‹จํ•œ ์•„์ด๋””์–ด์™€ ์ œํ’ˆยท๋กœ๊ณ  ์ฐธ์กฐ ์ด๋ฏธ์ง€์—์„œ ์ถœ๋ฐœํ•ด ๋Œ€๋ณธ, ์žฅ๋ฉด ์ด๋ฏธ์ง€, ์˜์ƒ, ์Œํ–ฅ์„ ๋งŒ๋“œ๋Š” ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์ž…๋‹ˆ๋‹ค. ์—ฐ๊ตฌ์˜ ์ดˆ์ ์€ ๊ฐœ๋ณ„ ์ƒ์„ฑ ๋ชจ๋ธ์˜ ๊ฐ€์ค‘์น˜๋ฅผ ํ•™์Šตํ•˜๋Š” ๋ฐ ์žˆ์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์—ฌ๋Ÿฌ ์ƒ์„ฑ ๋‹จ๊ณ„๊ฐ€ ๊ฐ™์€ ์ฐฝ์ž‘ ์˜๋„์— ๋งž์ถฐ ์›€์ง์ด๋„๋ก ์ œ์–ดํ•˜๊ณ , ์™„์„ฑ ...

[Repo Review] OpenDots: ์ง€์† ๋Œ€ํ™”์™€ ๋ฌธ์„œยท๋„๊ตฌ ์‹คํ–‰์„ ์—ฐ๊ฒฐํ•˜๋Š” AI ์ž‘์—… ๊ณต๊ฐ„

๋“ค์–ด๊ฐ€๋ฉฐ AI ์—์ด์ „ํŠธ์— ์ฑ„ํŒ… ํ™”๋ฉด์„ ๋ถ™์ธ ๋’ค์—๋Š” ์ƒˆ๋กœ์šด ๋ฌธ์ œ๊ฐ€ ์ƒ๊น๋‹ˆ๋‹ค. ๋Œ€ํ™”๋ฅผ ๋‹ซ์•„๋„ ์ž‘์—…์ด ์ด์–ด์ ธ์•ผ ํ•˜๊ณ , ๋ฌธ์„œ ํŽธ์ง‘๊ณผ ๋ชจ๋ธ์˜ ์ˆ˜์ •์ด ์ถฉ๋Œํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ๋„๊ตฌ ์‹คํ–‰ ๊ถŒํ•œ์„ ์‹คํ–‰ ๋„์ค‘์— ๊ฑฐ๋‘˜ ์ˆ˜๋„ ์žˆ์–ด์•ผ ํ•ฉ๋‹ˆ๋‹ค. OpenDots๋Š” ์ด๋Ÿฐ ์—ฐ๊ฒฐ๋ถ€๋ฅผ ์‚ดํŽด๋ณด๊ธฐ ์ข‹์€ ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ํ…œํ”Œ๋ฆฟ์ž…๋‹ˆ๋‹ค. ์—ญํ• ์„ ๊ฐ€์ง„ ์—์ด์ „ํŠธ์ธ Dot, ๋ฌธ์„œ๋ฅผ ๋ชจ์œผ๋Š” Space, ์ง€...

[Paper Review] CANVAS: ์ด์•ผ๊ธฐ์˜ ์ธ๋ฌผยท์žฅ์†Œยท์†Œํ’ˆ์„ ๊ธฐ์–ตํ•˜๋Š” ์‹œ๊ฐ ์—์ด์ „ํŠธ

๋…ผ๋ฌธ ๊ฐœ์š”์™€ ์ „์ฒด ๊ตฌ์กฐ CANVAS: Continuity-Aware Narratives via Visual Agentic Storyboarding์€ ์—ฌ๋Ÿฌ ์žฅ์˜ ์ด๋ฏธ์ง€๊ฐ€ ํ•˜๋‚˜์˜ ์ด์•ผ๊ธฐ์ฒ˜๋Ÿผ ์ด์–ด์ง€๋„๋ก ๋งŒ๋“œ๋Š” ์Šคํ† ๋ฆฌ๋ณด๋“œ ์ƒ์„ฑ ์—ฐ๊ตฌ์ž…๋‹ˆ๋‹ค. Ishani Mondal ์™ธ ์—ฐ๊ตฌ์ง„์ด ์ œ์•ˆํ•œ ํ•ต์‹ฌ์€ ์ด์ „ ๊ทธ๋ฆผ์„ ์ฐธ๊ณ ํ•˜๋Š” ๋ฐ์„œ ๋” ๋‚˜์•„๊ฐ€, ์ธ๋ฌผ์˜ ์™ธํ˜• ์ƒํƒœยท์žฅ์†Œยท์†Œํ’ˆ...

[Paper Review] VQQA: ์งˆ๋ฌธ๊ณผ ๋‹ต๋ณ€์œผ๋กœ ์˜์ƒ์„ ํ‰๊ฐ€ํ•˜๊ณ  ํ”„๋กฌํ”„ํŠธ๋ฅผ ๊ฐœ์„ ํ•˜๋Š” ์—์ด์ „ํŠธ

๋…ผ๋ฌธ ๊ฐœ์š”์™€ ์ „์ฒด ๊ตฌ์กฐ ์˜์ƒ ์ƒ์„ฑ ๋ชจ๋ธ์ด ์„ ๋ช…ํ•œ ์˜์ƒ์„ ๋งŒ๋“ค๋”๋ผ๋„, ์‚ฌ์šฉ์ž๊ฐ€ ์š”์ฒญํ•œ ๊ฐ์ฒด ์ˆ˜ยทํ–‰๋™ยท์‹œ๊ฐ„์— ๋”ฐ๋ฅธ ๋ณ€ํ™”๋ฅผ ๋ชจ๋‘ ์ง€ํ‚ค๋Š” ๊ฒƒ์€ ๋ณ„๊ฐœ์˜ ๋ฌธ์ œ์ž…๋‹ˆ๋‹ค. Yiwen Song, Tomas Pfister, Yale Song์˜ VQQA(Video Quality Question Answering)๋Š” ์˜์ƒ ํ‰๊ฐ€๋ฅผ ๋‹ค์Œ ์ƒ์„ฑ์˜ ์ž…๋ ฅ์„ ๊ณ ์น˜๋Š” ์ž‘์—…์œผ๋กœ ์—ฐ๊ฒฐํ•ฉ๋‹ˆ...

[Repo Review] Learn Harness Engineering โ€” ์—์ด์ „ํŠธ์˜ ์ž‘์—… ํ™˜๊ฒฝ์„ ๋งŒ๋“ค๊ณ  ๊ฒ€์ฆํ•˜๋Š” ์ฝ”๋“œ ์ฝ๊ธฐ

๋“ค์–ด๊ฐ€๋ฉฐ ์ฝ”๋”ฉ ์—์ด์ „ํŠธ๊ฐ€ ์„ธ์…˜์„ ๋ฐ”๊ฟ€ ๋•Œ๋งˆ๋‹ค ๋ชฉํ‘œ๋ฅผ ์žŠ๊ฑฐ๋‚˜, ํ…Œ์ŠคํŠธ๋ฅผ ์‹คํ–‰ํ•˜์ง€ ์•Š์€ ์ฑ„ ์™„๋ฃŒ๋ฅผ ์„ ์–ธํ•œ๋‹ค๋ฉด ๋ฌด์—‡์„ ๋ฐ”๊พธ์–ด์•ผ ํ• ๊นŒ์š”? Learn Harness Engineering์€ ์ด ๋ฌธ์ œ๋ฅผ ๋ชจ๋ธ ์ฃผ๋ณ€์˜ ์ž‘์—… ํ™˜๊ฒฝ์—์„œ ๋‹ค๋ฃจ๋Š” ํ”„๋กœ์ ํŠธ ๊ธฐ๋ฐ˜ ๊ต์œก ์ €์žฅ์†Œ์ž…๋‹ˆ๋‹ค. ์—ฌ๊ธฐ์„œ ํ•˜๋„ค์Šค(harness)๋Š” ์—์ด์ „ํŠธ๊ฐ€ ์ฝ๋Š” ์ง€์นจ, ์ง„ํ–‰ ์ƒํƒœ, ๊ฒ€์ฆ ์ ˆ์ฐจ, ์ž‘์—… ๋ฒ”์œ„, ...

[Repo Review] Understand Anything: ์ฝ”๋“œ๋ฅผ ์„ค๋ช… ๊ฐ€๋Šฅํ•œ ์ง€์‹ ๊ทธ๋ž˜ํ”„๋กœ ๋ฐ”๊พธ๋Š” ๋ถ„์„ ํŒŒ์ดํ”„๋ผ์ธ

๋“ค์–ด๊ฐ€๋ฉฐ ์ฒ˜์Œ ๋ณด๋Š” ์ €์žฅ์†Œ์—์„œ ์–ด๋ ค์šด ์ผ์€ ํŒŒ์ผ์„ ์—ฌ๋Š” ๊ฒƒ๋ณด๋‹ค ์–ด๋–ค ํŒŒ์ผ๋ถ€ํ„ฐ ์ฝ๊ณ , ์–ด๋А ๊ด€๊ณ„๋ฅผ ๋”ฐ๋ผ๊ฐ€์•ผ ํ•˜๋Š”์ง€ ์ •ํ•˜๋Š” ์ผ์ž…๋‹ˆ๋‹ค. Understand Anything์€ ์†Œ์Šค์™€ ๋ฌธ์„œ๋ฅผ ๋ถ„์„ํ•ด ํŒŒ์ผยทํ•จ์ˆ˜ยทํด๋ž˜์Šค์˜ ๊ด€๊ณ„๋ฅผ ์ง€์‹ ๊ทธ๋ž˜ํ”„๋กœ ์ €์žฅํ•˜๊ณ , ์„ค๋ช…๊ณผ ํ•™์Šต ์ˆœ์„œ๋ฅผ ๋ถ™์—ฌ ๋Œ€์‹œ๋ณด๋“œ์—์„œ ํƒ์ƒ‰ํ•˜๋„๋ก ๋งŒ๋“œ๋Š” ํ”„๋กœ์ ํŠธ์ž…๋‹ˆ๋‹ค. README๋Š” ์ฝ”๋“œ๋ฒ ์ด์Šค๋ฟ ์•„๋‹ˆ๋ผ ์ง€์‹...

[Paper Review] Agensh: 1,024๊ฐœ ์—์ด์ „ํŠธ์˜ ์ž๊ธฐ ์กฐ์งํ™”์™€ ํ˜‘์—… ํ™•์žฅ

๋…ผ๋ฌธ ๊ฐœ์š”์™€ ์ „์ฒด ๊ตฌ์กฐ Agensh๋Š” ์ค‘์•™ ๊ด€๋ฆฌ์ž๊ฐ€ ์ž‘์—…์„ ๋ฐฐ์ •ํ•˜์ง€ ์•Š์•„๋„ ๋‹ค์ˆ˜์˜ ์–ธ์–ด๋ชจ๋ธ ์—์ด์ „ํŠธ๊ฐ€ ๊ณต๋™ ์†Œํ”„ํŠธ์›จ์–ด๋ฅผ ๊ตฌ์ถ•ํ•  ์ˆ˜ ์žˆ๋Š”์ง€๋ฅผ ์—ฐ๊ตฌํ•œ ์กฐ์ง ์ˆ˜์ค€์˜ ์‹คํ–‰ ํ™˜๊ฒฝ์ž…๋‹ˆ๋‹ค. ์—ฌ๊ธฐ์„œ ํ•˜๋„ค์Šค(harness)๋Š” ๋ชจ๋ธ ํ˜ธ์ถœ, ๋„๊ตฌ ์‹คํ–‰, ์ƒํƒœ ์œ ์ง€์™€ ์ž‘์—… ๋ฐ˜๋ณต์„ ์—ฐ๊ฒฐํ•˜๋Š” ์ฃผ๋ณ€ ์‹œ์Šคํ…œ์„ ๋œปํ•ฉ๋‹ˆ๋‹ค. Agensh๋Š” ๊ฐœ๋ณ„ ์—์ด์ „ํŠธ์˜ ํ•˜๋„ค์Šค ์œ„์— ํ˜‘์—… ์ ˆ์ฐจ์™€ ๊ณต...

[Repo Review] TypeLLM: ํƒ€์ž…๋ณ„ ๋””์ฝ”๋”ฉ๊ณผ ์˜์กด์„ฑ ๊ทธ๋ž˜ํ”„๋กœ ๊ตฌ์„ฑํ•˜๋Š” LLM ์ถœ๋ ฅ

๋“ค์–ด๊ฐ€๋ฉฐ LLM์œผ๋กœ ์˜์ˆ˜์ฆ์„ ์ฝ์„ ๋•Œ ํŒ๋งค์ฒ˜๋Š” ๋ฌธ์ž์—ด, ํ•ฉ๊ณ„๋Š” ์ˆซ์ž, ๋น„์šฉ ์ข…๋ฅ˜๋Š” ์ •ํ•ด์ง„ ํ›„๋ณด ์ค‘ ํ•˜๋‚˜์—ฌ์•ผ ํ•ฉ๋‹ˆ๋‹ค. ์—ฌ๊ธฐ์—๋Š” ์„œ๋กœ ๋‹ค๋ฅธ ๋ฌธ์ œ๊ฐ€ ์„ž์—ฌ ์žˆ์Šต๋‹ˆ๋‹ค. ์ถœ๋ ฅ์ด ํ”„๋กœ๊ทธ๋žจ์—์„œ ์ฝ์„ ์ˆ˜ ์žˆ๋Š” ํ˜•ํƒœ์ธ์ง€, ๊ฐ’์ด ํ—ˆ์šฉ๋œ ํ›„๋ณด์— ์†ํ•˜๋Š”์ง€, ๊ทธ ๊ฐ’์ด ์‹ค์ œ ์˜์ˆ˜์ฆ์˜ ๋‚ด์šฉ๊ณผ ๋งž๋Š”์ง€๋Š” ๊ฐ๊ฐ ๋‹ค๋ฅธ ์งˆ๋ฌธ์ž…๋‹ˆ๋‹ค. TypeLLM์€ ๊ธฐ์กด ์ž๊ธฐํšŒ๊ท€ ์–ธ์–ด ๋ชจ๋ธ์˜ ๊ฐ€์ค‘์น˜๋ฅผ ...

[Paper Review] Memory Attention: ํ† ํฐ ๋ฉ”๋ชจ๋ฆฌ๋กœ value projection์„ ๋Œ€์ฒดํ•˜๋Š” ๋ฐฉ๋ฒ•

๋…ผ๋ฌธ ๊ฐœ์š”์™€ ์ „์ฒด ๊ตฌ์กฐ Transformer์˜ attention์€ query์™€ key๋กœ ์–ด๋А ์œ„์น˜๋ฅผ ์–ผ๋งˆ๋‚˜ ์ฐธ๊ณ ํ• ์ง€ ์ •ํ•˜๊ณ , value๋ฅผ ๊ฐ€์ค‘ํ•ฉํ•˜์—ฌ ๋‹ค์Œ ํ‘œํ˜„์„ ๋งŒ๋“ญ๋‹ˆ๋‹ค. Jiale Kang์˜ Memory Attention(MA)์€ ์ด ๊ฐ€์šด๋ฐ value๋ฅผ ๋งŒ๋“œ๋Š” ๋…๋ฆฝ์ ์ธ ์„ ํ˜• ๋ณ€ํ™˜์„ ์ œ๊ฑฐํ•ฉ๋‹ˆ๋‹ค. ๋Œ€์‹  ํ˜„์žฌ ๋ฌธ๋งฅ์„ ๋ฐ˜์˜ํ•˜๋Š” key์™€ ํ† ํฐ ID๋กœ ์กฐํšŒํ•œ...

[Repo Review] Laya: ํ…์ŠคํŠธ ์ƒ์„ฑ ์—†์ด ์„ ํƒยท์ ์ˆ˜ยทํ™•๋ฅ ์„ ๋ฐ˜ํ™˜ํ•˜๋Š” ์˜์‚ฌ๊ฒฐ์ • ์—”์ง„

๋“ค์–ด๊ฐ€๋ฉฐ: ๋‹ต๋ณ€ ๋ฌธ์žฅ๋ณด๋‹ค ๊ฒฐ์ • ๊ฐ’์ด ํ•„์š”ํ•œ ์ˆœ๊ฐ„ ๊ณ ๊ฐ ๋ฌธ์˜๋ฅผ ๋‹ด๋‹น ๋ถ€์„œ๋กœ ๋ณด๋‚ด๊ฑฐ๋‚˜, ๊ฒ€์ƒ‰ํ•œ ๋ฌธ์„œ๊ฐ€ ์งˆ๋ฌธ๊ณผ ๊ด€๋ จ ์žˆ๋Š”์ง€ ํŒ๋‹จํ•˜๊ฑฐ๋‚˜, ๋ฉ”์‹œ์ง€๊ฐ€ ์œ„ํ—˜ํ•œ์ง€ ๋ถ„๋ฅ˜ํ•˜๋Š” ํ”„๋กœ๊ทธ๋žจ์€ ๊ธด ์„ค๋ช…๋ณด๋‹ค ๋ฏธ๋ฆฌ ์ •ํ•œ ์„ ํƒ์ง€์™€ ๊ทธ ํ™•๋ฅ ์ด ํ•„์š”ํ•œ ๊ฒฝ์šฐ๊ฐ€ ๋งŽ์Šต๋‹ˆ๋‹ค. Laya๋Š” ์ด๋Ÿฐ ์ž‘์—…์„ ์œ„ํ•ด ์ƒํƒœ์™€ ์งˆ๋ฌธ์„ ์ž…๋ ฅ๋ฐ›๊ณ , ์ž์œ ๋กœ์šด ๋ฌธ์žฅ ์ƒ์„ฑ ๋Œ€์‹  ์„ ํƒยท์ˆœ์„œ ์ ์ˆ˜ยท์ฐธ์ผ ํ™•๋ฅ ์„ ๋ฐ˜ํ™˜ํ•˜๋Š”...