#AI์˜์‹ #GoT #CoDeF
ํ•จ๊ป˜ ๊ณต์œ ํ•˜๊ณ  ์„ฑ์žฅํ•˜๋Š” ์—ฐ๊ตฌ ๋ฌธํ™”๋ฅผ ์ „ํŒŒํ•ด์š”
2023๋…„ 8์›” 28์ผ ๋ชจ๋‘๋ ˆํ„ฐ
created with DALLใƒปE2
๋‹˜, ๋ชจ๋‘๋ ˆํ„ฐ๊ฐ€ ์™”์–ด์š”.
์š”์ฆ˜ ํ•˜๋Š˜์€ ๋ฒŒ์จ ๊ฐ€์„์ธ ๊ฒƒ ๊ฐ™์•„์š”.
์•„์ง ๋”์šด ๊ธฐ์šด์ด ์žˆ์ง€๋งŒ, ์ฑ… ์ฝ๊ธฐ ์ข‹๋”๋ผ๊ตฌ์š”.
๋‹˜์€ ์˜ฌ ๊ฐ€์„ ์–ด๋–ป๊ฒŒ ๋ณด๋‚ด๊ณ  ์‹ถ๋‚˜์š”?๐Ÿ
์ด๋ฒˆ์ฃผ AI ์†Œ์‹
  • ๋‹˜, ์ธ๊ณต์ง€๋Šฅ์ด ์˜์‹์„ ๊ฐ€์งˆ ์ˆ˜ ์žˆ์„๊นŒ์š”?
  • ์ƒ๊ฐ์˜ ๊ทธ๋ž˜ํ”„: LLM์˜ ์ถ”๋ก  ๋Šฅ๋ ฅ ํ–ฅ์ƒ์„ ์œ„ํ•œ ํ”„๋กฌํ”„ํŠธ ๊ธฐ์ˆ 
  • CoDeF: ๋น„๋””์˜ค๋ฅผ ํ‘œํ˜„ํ•˜๋Š” ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•
์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜: 9๋ฒˆ์˜ ๊ฐœ๋ฐœํŒ€ ๋ฆฌ๋“œ์™€ ํŒ€ ์„ธํŒ…์„ ๊ฑฐ์นœ ์ธ์‚ฌ์ดํŠธ
๋‹˜, ์ธ๊ณต์ง€๋Šฅ์ด ์˜์‹์„ ๊ฐ€์งˆ ์ˆ˜ ์žˆ์„๊นŒ์š”?

๋”ฅ๋Ÿฌ๋‹์˜ ๋ฐ”ํƒ•์ด ๋˜๋Š” ์‹ ๊ฒฝ๋ง ๋ชจ๋ธ์˜ ๊ตฌ์กฐ๊ฐ€ ์ƒ๋ฌผ์˜ ์‹ ๊ฒฝ ์„ธํฌ(๋‰ด๋Ÿฐ)๋กœ๋ถ€ํ„ฐ ์•„์ด๋””์–ด๋ฅผ ์–ป์—ˆ๋‹ค๋Š” ์‚ฌ์‹ค์€ ์ž˜ ์•Œ๋ ค์ ธ ์žˆ๋Š”๋ฐ์š”. ์‹ค์ œ๋กœ ์˜์‹์„ ๊ฐ€์ง€๊ณ  ์žˆ๋Š” AI ๋ชจ๋ธ์€ ์•„์ง ๊ฐœ๋ฐœ๋˜์ง€ ์•Š์•˜์ฃ . ํ•˜์ง€๋งŒ ์ฑ—GPT๋ฅผ ํ•„๋‘๋กœ AI ๊ธฐ์ˆ ๊ณผ ์„œ๋น„์Šค๊ฐ€ ๊ณ ๋„ํ™”๋˜๋ฉด์„œ, ๋งŽ์€ ์‚ฌ๋žŒ๋“ค์ด ๋งˆ์น˜ AI๊ฐ€ ์‹ค์ œ๋กœ '์ƒ๊ฐ'ํ•˜๊ณ  ๋‹ต๋ณ€ํ•˜๋Š” ๊ฒƒ์ฒ˜๋Ÿผ ๋А๋ผ๊ฒŒ ๋๋Š”๋ฐ์š”. ์ฑ—GPT๊ฐ€ ์˜์‹์„ ๊ฐ€์ง€๊ณ  ์žˆ๋Š”์ง€๋Š” ์–ด๋–ป๊ฒŒ ์•Œ ์ˆ˜ ์žˆ์„๊นŒ์š”?

์•ฝ 90ํŽ˜์ด์ง€ ๋ถ„๋Ÿ‰์˜ ์ด ๋ณด๊ณ ์„œ๋Š” ์ธ๊ณต์ง€๋Šฅ์˜ ์˜์‹์„ ์‹ ๊ฒฝ๊ณผํ•™์  ์˜์‹ ์ด๋ก ์˜ ๊ด€์ ์—์„œ ํ‰๊ฐ€ํ•ด์•ผ ํ•œ๋‹ค๊ณ  ์ฃผ์žฅํ•˜๋ฉด์„œ, ์ด 14๊ฐ€์ง€์˜ ํ‰๊ฐ€ ํ•ญ๋ชฉ์„ ์ œ์•ˆํ•ฉ๋‹ˆ๋‹ค. ํŠน์ • ํƒœ์Šคํฌ์— ์ตœ์ ํ™”๋œ ์—ฌ๋Ÿฌ ๋ชจ๋“ˆ์„ ๋ณ‘๋ ฌ์ ์œผ๋กœ ์‚ฌ์šฉํ•˜๊ณ  ํƒœ์Šคํฌ์˜ ์šฐ์„  ์ˆœ์œ„๋ฅผ ์ •ํ•  ์ˆ˜ ์žˆ๋‹ค๊ฑฐ๋‚˜, ํ”ผ๋“œ๋ฐฑ์œผ๋กœ๋ถ€ํ„ฐ ๋‹ค์‹œ ํ•™์Šต์„ ํ•˜๋Š” ๋“ฑ ๋‹ค์–‘ํ•œ ์ง€ํ‘œ๋“ค์ด ์žˆ์–ด์š”. ์‚ฌ์‹ค ๋…ผ๋ฌธ์—์„œ ์ œ์‹œํ•œ ํ•ญ๋ชฉ๋“ค์ด AI์˜ ์˜์‹ ์œ ๋ฌด๋ฅผ ํ‰๊ฐ€ํ•˜๋Š” ์ ˆ๋Œ€์ ์ธ ์ง€ํ‘œ๋ผ๊ธฐ๋ณด๋‹จ, ํ•ญ๋ชฉ์— ๋ถ€ํ•ฉ๋˜๋Š” ํŠน์ง•์ด ๋งŽ์„์ˆ˜๋ก ์˜์‹์ด ์žˆ์„ ๊ฐ€๋Šฅ์„ฑ์ด ๋†’๋‹ค๊ณ  ์ƒ๊ฐํ•˜๋Š” ์ชฝ์ด ๋งž๋‹ค๊ณ  ํ•ฉ๋‹ˆ๋‹ค. '์˜์‹(Consciousness)' ์ž์ฒด๊ฐ€ ์–ด๋ ค์šด ์ฃผ์ œ์ด๊ณ , ์‹ ๊ฒฝ๊ณผํ•™ ๋ถ„์•ผ์—์„œ๋„ ์‚ฌ๋žŒ์˜ ์˜์‹์ด ์–ด๋–ป๊ฒŒ ์ƒ์„ฑ๋˜๋Š”์ง€ ์ž˜ ๋ชจ๋ฅด๊ธฐ ๋•Œ๋ฌธ์ด๊ฒ ์ฃ . ๋…ผ๋ฌธ์—์„œ๋Š” ์˜์‹์ด ์žˆ๋Š” AI๋ฅผ ๊ฐœ๋ฐœํ•˜๋Š” ๊ฒƒ์ด ๋ถˆ๊ฐ€๋Šฅํ•˜์ง€๋Š” ์•Š๋‹ค๊ณ  ํ•˜๋Š”๋ฐ์š”. ๊ณผ์—ฐ ์˜์‹์„ ๊ฐ€์ง„ AI๊ฐ€ ๊ฐœ๋ฐœ๋  ์ˆ˜ ์žˆ์„๊นŒ์š”? ๋งŒ์•ฝ ๊ฐœ๋ฐœ๋œ๋‹ค๋ฉด ์–ด๋–ค ํ˜•ํƒœ๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ์„๊นŒ์š”?๐Ÿค”

์ƒ๊ฐ์˜ ๊ทธ๋ž˜ํ”„: LLM์˜ ์ถ”๋ก  ๋Šฅ๋ ฅ ํ–ฅ์ƒ์„ ์œ„ํ•œ ํ”„๋กฌํ”„ํŠธ ๊ธฐ์ˆ 
ยฉETH Zurich
LLM(Large Language Model) ํ”„๋กฌํ”„ํŠธ๋ฅผ ์ž‘์„ฑํ•˜๋Š” ๊ธฐ์ˆ  ์ค‘์— '์ƒ๊ฐ์˜ ์‚ฌ์Šฌ(Chain-of-Thought, CoT)*'์ด๋ผ๋Š” ๊ธฐ๋ฒ•์ด ์žˆ์—ˆ์ฃ ? ์ด CoT์—์„œ ์˜๊ฐ์„ ๋ฐ›์•„, ์—ฌ๋Ÿฌ ๊ฐˆ๋ž˜์˜ CoT๋ฅผ ์‚ฌ์šฉํ•˜๋Š” ๋ฐฉ๋ฒ•(Multiple CoTs, CoT-SC)๊ณผ '์ƒ๊ฐ์˜ ํŠธ๋ฆฌ(Tree of Thoughts, ToT)'๋ฅผ ๊ตฌ์„ฑํ•˜๋Š” ๋ฐฉ๋ฒ• ๋“ฑ์ด ๋ฐœํ‘œ๋ผ ์™”์Šต๋‹ˆ๋‹ค.

์œ„ ์‚ฌ์ง„์˜ ๋งจ ์˜ค๋ฅธ์ชฝ ๊ทธ๋ž˜ํ”„๋ฅผ ์ฃผ๋ชฉํ•ด ๋ณผ๊นŒ์š”? ์ด ๋…ผ๋ฌธ์—์„œ ์†Œ๊ฐœํ•˜๋Š” '์ƒ๊ฐ์˜ ๊ทธ๋ž˜ํ”„(Graph of Thoughts, GoT)'๋Š” LLM์˜ ์ƒ๊ฐ๋“ค์„ ๊ทธ๋ž˜ํ”„(Graph) ํ˜•ํƒœ๋กœ ๋‚˜ํƒ€๋ƒ…๋‹ˆ๋‹ค. ์™ผ์ชฝ ์˜†์˜ ํŠธ๋ฆฌ(Tree) ๊ตฌ์กฐ์™€๋Š” ๋‹ค๋ฅด๊ฒŒ ๊ทธ๋ž˜ํ”„๋Š” ํ•˜๋‚˜์˜ ์ƒ๊ฐ์„ ์ƒˆ๋กœ์šด ์ƒ๊ฐ๋“ค๋กœ ์ „๊ฐœํ•˜๋Š” ๊ฒƒ๋ฟ๋งŒ ์•„๋‹ˆ๋ผ, ์—ฌ๋Ÿฌ ์ƒ๊ฐ๋“ค์„ ํ•˜๋‚˜๋กœ ํ•ฉ์น˜๋Š” ๊ฒƒ๋„ ๊ฐ€๋Šฅํ•˜์ฃ . ์ˆซ์ž ์ •๋ ฌ, ๊ต์ง‘ํ•ฉ ๊ณ„์‚ฐ, ๋ฌธ์„œ ๋ณ‘ํ•ฉ ๋“ฑ์˜ ํƒœ์Šคํฌ์—์„œ GoT๋Š” CoT, ToT๋ณด๋‹ค ์„ฑ๋Šฅ์€ ๋†’์œผ๋ฉด์„œ (ToT์— ๋น„ํ•ด) ๋น„์šฉ์€ ์ ๊ฒŒ ๋“ค์—ˆ๋‹ค๊ณ  ํ•˜๋„ค์š”. ๋˜ํ•œ, GoT์™€ ๋‹ค๋ฅธ ๊ธฐ๋ฒ•๋“ค ์‚ฌ์ด์—์„œ ์„ฑ๋Šฅ ์ฐจ์ด๋Š” ํƒœ์Šคํฌ๊ฐ€ ํฌ๊ณ  ๋ณต์žกํ•ด ์งˆ ์ˆ˜๋ก ๋ˆˆ์— ๋„๊ฒŒ ์ฆ๊ฐ€ํ–ˆ๋‹ค๊ณ  ํ•ฉ๋‹ˆ๋‹ค. ๊ทธ๋ž˜ํ”„ ๊ฐœ๋…์„ ์ด์šฉํ•œ ์‹ ๊ฒฝ๋ง(Graph Neural Network)๊ณผ ์—ฌ๋Ÿฌ ์•Œ๊ณ ๋ฆฌ์ฆ˜์ด AI ๋ถ„์•ผ์—์„œ ์ž…์ง€๋ฅผ ๋‹ค์กŒ๋˜ ๊ฒƒ์ฒ˜๋Ÿผ, LLM ๋ถ„์•ผ์—์„œ๋„ ์œ ์šฉํ•˜๊ฒŒ ์‚ฌ์šฉ๋  ์ˆ˜ ์žˆ์„๊นŒ์š”?

*CoT(Chain of Thought, ์ƒ๊ฐ์˜ ์‚ฌ์Šฌ): ๋ณต์žกํ•œ ๋ฌธ์ œ๋ฅผ ํ’€๊ธฐ ์œ„ํ•ด ๋‹จ๊ณ„๋ณ„๋กœ ์ƒ๊ฐํ•˜๋ฉด์„œ ์ฐจ๋ก€๋Œ€๋กœ ์ ‘๊ทผํ•˜๋Š” ๋ฐฉ๋ฒ•.

CoDeF: ๋น„๋””์˜ค๋ฅผ ํ‘œํ˜„ํ•˜๋Š” ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•

์˜์ƒ ์ฒ˜๋ฆฌ์— ์ธ๊ณต์ง€๋Šฅ ๋ชจ๋ธ์„ ์‚ฌ์šฉํ•  ๋•Œ๋Š” ์˜์ƒ์˜ ๊ฐœ๋ณ„ ํ”„๋ ˆ์ž„์— ๋ชจ๋ธ์„ ์ ์šฉํ•œ ๋‹ค์Œ, ๊ฒฐ๊ณผ๋ฌผ์„ ํ•ฉ์น˜๋Š” ๋ฐฉ๋ฒ•์ด ๋งŽ์ด ์‚ฌ์šฉ๋˜๋Š”๋ฐ์š”. ์•„๋ฌด๋ž˜๋„ ํ”„๋ ˆ์ž„ ์‚ฌ์ด์˜ ์ผ๊ด€์„ฑ์ด ๋ถ€์กฑํ•ด์ง„๋‹ค๋Š” ๋ฌธ์ œ๊ฐ€ ์žˆ์Šต๋‹ˆ๋‹ค. ์ด ๋…ผ๋ฌธ์—์„œ๋Š” ๋น„๋””์˜ค๋ฅผ ํ‘œํ˜„ํ•˜๋Š” ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•์ธ 'CoDeF(Content Deformation Fields)'๋ฅผ ์†Œ๊ฐœํ•ฉ๋‹ˆ๋‹ค. CoDeF๋Š” ๋น„๋””์˜ค๋ฅผ ๋‘ ๊ฐ€์ง€ ์š”์†Œ๋กœ ํ‘œํ˜„ํ•˜๋Š”๋ฐ์š”. ๋น„๋””์˜ค ์ „์ฒด์˜ ๋‚ด์šฉ์„ ๋Œ€ํ‘œํ•˜๋Š” ํ•˜๋‚˜์˜ ์ด๋ฏธ์ง€์ธ 'ํ‘œ์ค€ ์ฝ˜ํ…์ธ  ํ•„๋“œ(Canonical content field)'์™€ ๊ฐ๊ฐ์˜ ํ”„๋ ˆ์ž„์ด ํ‘œ์ค€ ์ฝ˜ํ…์ธ  ํ•„๋“œ์—์„œ ์–ด๋–ป๊ฒŒ ๋ณ€ํ˜•๋๋Š”์ง€ ํ‘œํ˜„ํ•˜๋Š” '์‹œ๊ฐ„ ๋ณ€ํ˜• ํ•„๋“œ(Temporal deformation field)'๋กœ ๊ตฌ์„ฑ๋ผ ์žˆ์–ด์š”. 

์ด ๋‘ ๊ฐ€์ง€ ์š”์†Œ๋“ค์€ ๋‹ค์ธต ํผ์…‰ํŠธ๋ก (Multi-layer Perceptron, MLP) ๋ชจ๋ธ์„ ํ•™์Šต์‹œ์ผœ์„œ ์–ป์„ ์ˆ˜ ์žˆ์—ˆ๋‹ค๊ณ  ํ•˜๋„ค์š”. CoDeF์˜ ์žฅ์  ์ค‘ ํ•˜๋‚˜๋Š” ์ด๋ฏธ์ง€ ์ฒ˜๋ฆฌ ๋ชจ๋ธ์„ ๋น„๋””์˜ค์—๋„ ์‰ฝ๊ฒŒ ์ ์šฉํ•  ์ˆ˜ ์žˆ๋‹ค๋Š” ๊ฒƒ์ž…๋‹ˆ๋‹ค. ์•„๋ž˜ ํŽ˜์ด์ง€์—์„œ ์ปจํŠธ๋กค๋„ท(ControlNet)๊ณผ ๊ฐ™์€ ์ด๋ฏธ์ง€ ์ƒ์„ฑ ๋ชจ๋ธ์„ ๋น„๋””์˜ค์— ์ ์šฉํ•˜๊ฑฐ๋‚˜, ์ด๋ฏธ์ง€ ์„ธ๊ทธ๋ฉ˜ํ…Œ์ด์…˜(Segmentation) ๋“ฑ์˜ ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ์ ์šฉํ•œ ์˜ˆ์‹œ๋ฅผ ํ™•์ธํ•  ์ˆ˜ ์žˆ๊ณ ์š”. ๊นƒํ—ˆ๋ธŒ์— ์ฝ”๋“œ๋„ ๊ณต๊ฐœ๋์Šต๋‹ˆ๋‹ค.

๋ชจ๋‘์—ฐ ์ปค๋ฎค๋‹ˆํ‹ฐ ์†Œ์‹
LAB ์—ฐ๊ตฌ์› ์ฐพ์•„์š”
์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜
(๊ฐ•๋‚จ)9๋ฒˆ์˜ ๊ฐœ๋ฐœํŒ€ ๋ฆฌ๋“œ์™€ ํŒ€ ์„ธํŒ…์„ ๊ฑฐ์นœ ์ธ์‚ฌ์ดํŠธ
  • ์ผ์‹œ: 9์›” 1์ผ ๊ธˆ์š”์ผ I 7:30PM - 9:10PM
  • ์žฅ์†Œ: ๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ๊ฐ•๋‚จ์บ ํผ์Šค ๋ผ์šด์ง€
  • ์—ฐ์‚ฌ:ํ•œ๊ธฐ์šฉ(๊ทธ๋ฆฝ US, CTO)
  • ๋‚ด์šฉ: ์ฒซ ์—”์ง€๋‹ˆ์–ด๋ง ๋งค๋‹ˆ์ € ์‹œ์ ˆ๋ถ€ํ„ฐ ์ง€๊ธˆ๊นŒ์ง€์˜ ๊ฒฝํ—˜, ์‹œํ–‰์ฐฉ์˜ค, ์ธ์‚ฌ์ดํŠธ I ์—”์ง€๋‹ˆ์–ด๋ง ๋งค๋‹ˆ์ €๋ฅผ ์ฒ˜์Œ ํ•˜๋Š” ์‚ฌ๋žŒ์ด ์‹ ๊ฒฝ ์จ์•ผ ํ•˜๋Š” ์š”์†Œ๋“ค I ์—”์ง€๋‹ˆ์–ด๋ง ํŒ€์„ ์ž˜ ๊ตฌ์„ฑํ•˜๊ธฐ ์œ„ํ•œ ์ฑ„์šฉ Tip
์˜ค๋Š˜๋„ ๋‹˜์˜ ์„ฑ์žฅ์„ ์‘์›ํ• ๊ฒŒ์š”.
์•—, ๋ ˆํ„ฐ๊ฐ€ ๋ฉ”์ผํ•จ์—์„œ ์•ˆ ๋ณด์ด๋‚˜์š”?
  • ์ŠคํŒธ๋ฉ”์ผํ•จ์—์„œ ์šธ๊ณ  ์žˆ์„์ง€๋„ ๋ชฐ๋ผ์š”. ์ฐพ์•„๊ฐ€ ํ™•์ธํ•ด ๋ณด์„ธ์š”!
  • ์ฃผ์†Œ๋ก์— ๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ์ด๋ฉ”์ผ ์ฃผ์†Œ(modulabs01@gmail.com)๋ฅผ ์ถ”๊ฐ€ํ•ด ์ฃผ์„ธ์š”.
(์ฃผ)๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ
์„œ์šธ์‹œ ๊ฐ•๋‚จ๊ตฌ ๊ฐ•๋‚จ๋Œ€๋กœ 324(์—ญ์‚ผ๋””์˜ค์ŠˆํŽ˜๋ฆฌ์›€) 2F