#Text2Room #ChatGPT-Plugins
ํ•จ๊ป˜ ๊ณต์œ ํ•˜๊ณ  ์„ฑ์žฅํ•˜๋Š” ์—ฐ๊ตฌ ๋ฌธํ™”๋ฅผ ์ „ํŒŒํ•ด์š”
2023๋…„ 4์›” 3์ผ ๋ชจ๋‘๋ ˆํ„ฐ
๋‹˜, ๋ชจ๋‘๋ ˆํ„ฐ๊ฐ€ ์™”์–ด์š”!
ํฌ๊ทผํ•œ ๋‚ ์”จ, ์™„์—ฐํ•œ ๋ด„์ด๋„ค์š”๐ŸŒธ๐ŸŒผ.
๋ฏธ์„ธ๋จผ์ง€ ์–ดํ”Œ์ด ๋ฐฉ๊ธ‹ ์›ƒ์–ด์ค€๋‹ค๋ฉด ์ฐธ ์ข‹์„ํ…๋ฐ!๐Ÿฅบ
๋‹˜์€ ์š”์ฆ˜ ์–ด๋–ป๊ฒŒ ์ง€๋‚ด๋‚˜์š”? ๊ถ๊ธˆํ•˜๋„ค์š” :)
์ด๋ฒˆ์ฃผ AI ์†Œ์‹
  • ํ…์ŠคํŠธ๋กœ ๋งŒ๋“œ๋Š” 3D ์ธํ…Œ๋ฆฌ์–ด [Text2Room]
  • ์˜คํ”ˆAI, ์ฑ—GPT์— ์ตœ์‹  ์ •๋ณด ๋ฐ˜์˜ [์ฑ—GPT ํ”Œ๋Ÿฌ๊ทธ์ธ]
  • ํ—ˆ๊น…ํŽ˜์ด์Šค, ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ๋ Œ๋”๋ง ์ง€์›
  • 'JAX' ๊ณต์‹ ๋ฌธ์„œ ๋ฒˆ์—ญ ํ”„๋กœ์ ํŠธ
๐Ÿฟ์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜ I ML+QC
ํ…์ŠคํŠธ๋กœ ๋งŒ๋“œ๋Š” 3D ์ธํ…Œ๋ฆฌ์–ด [Text2Room]

์ธํ…Œ๋ฆฌ์–ด๋ฅผ ๋ฌ˜์‚ฌํ•œ ํ…์ŠคํŠธ ํ”„๋กฌํ”„ํŠธ๋กœ๋ถ€ํ„ฐ 3์ฐจ์› ๋ฉ”์‹œ(Mesh) ๋ฐ์ดํ„ฐ๋ฅผ ์ƒ์„ฑํ•˜๋Š” ๋ชจ๋ธ โ€˜Text2Roomโ€™์ด ๋ฐœํ‘œ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. โ€˜Text2Roomโ€™์€ Text-to-Image ๋ชจ๋ธ์ด ์ƒ์„ฑํ•œ 2์ฐจ์› ์ด๋ฏธ์ง€์™€ ๊ทธ ์ด๋ฏธ์ง€๋กœ๋ถ€ํ„ฐ ์˜ˆ์ธก๋œ ๊นŠ์ด(Depth) ์ •๋ณด๋ฅผ ๊ฒฐํ•ฉํ•ด 3์ฐจ์›์˜ ์ด๋ฏธ์ง€๋ฅผ ์ƒ์„ฑํ•ฉ๋‹ˆ๋‹ค. โ€œA living room with a lit furnace, couch, and cozy curtains, bright lamps that make the room look well-lit.โ€๋ผ๋Š” ํ”„๋กฌํ”„ํŠธ๋กœ ์–ด๋–ค 3D ์ธํ…Œ๋ฆฌ์–ด๊ฐ€ ์ƒ์„ฑ๋˜๋Š”์ง€ ์•„๋ž˜ ๋งํฌ์—์„œ ํ™•์ธํ•ด ๋ณด์„ธ์š”!

Text2Room: Extracting Textured 3D Meshes from 2D Text-to-Image Models

์˜คํ”ˆAI, ์ฑ—GPT์— ์ตœ์‹  ์ •๋ณด ๋ฐ˜์˜ [์ฑ—GPT ํ”Œ๋Ÿฌ๊ทธ์ธ]

'์ฑ—GPT ํ”Œ๋Ÿฌ๊ทธ์ธ'์ด ๊ณต๊ฐœ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ์ฒซ ํ”Œ๋Ÿฌ๊ทธ์ธ์€ ์Šฌ๋ž™(Slack), ์ต์Šคํ”ผ๋””์•„(Expedia), ์Šคํ”ฝ(Speak) ๋“ฑ์˜ 12๊ฐœ ๊ธฐ์—…์—์„œ ๊ฐœ๋ฐœ๋˜์—ˆ๋Š”๋ฐ์š”. ์ด ๊ฐ™์€ ์™ธ๋ถ€ ํ”Œ๋Ÿฌ๊ทธ์ธ์€ ์ฑ—GPT์— ์ตœ์‹  ์ •๋ณด๋ฅผ ์ œ๊ณตํ•˜์—ฌ, ๋” ์ •ํ™•ํ•˜๊ณ  ์•ˆ์ „ํ•œ ๋‹ต๋ณ€์„ ๋งŒ๋“ค๋„๋ก ๋•์Šต๋‹ˆ๋‹ค. ์‡ผํ•‘ ๋ฐ ๊ฒฐ์ œ ์—…์ฒด์ธ ํด๋ผ๋‚˜(Klarna)์˜ ํ”Œ๋Ÿฌ๊ทธ์ธ์—์„œ๋Š” โ€˜์‡ผํ•‘ GPTโ€™ ๊ธฐ๋Šฅ์„ ์ด์šฉํ•  ์ˆ˜ ์žˆ๋Š” ๊ฑฐ์ฃ . ๋˜ํ•œ, ์˜คํ”ˆAI๋Š” ์ฑ—GPT์— ์ธํ„ฐ๋„ท ๊ฒ€์ƒ‰ ๊ธฐ๋Šฅ์„ ์ถ”๊ฐ€ํ•˜๊ณ  ์žˆ๋‹ค๊ณ  ํ•˜๋Š”๋ฐ์š”. ํ˜„์žฌ ์ง๋ฉดํ•œ ์˜ค๋‹ต์„ ์ •๋‹ต์ฒ˜๋Ÿผ ์ œ์‹œํ•˜๋Š” ํ• ๋ฃจ์‹œ๋„ค์ด์…˜(Hallucination, ํ™˜๊ฐ) ๋ฌธ์ œ๊ฐ€ ํ•ด๊ฒฐ๋  ์ง€ ๊ธฐ๋Œ€๊ฐ€ ๋ฉ๋‹ˆ๋‹ค!

ChatGPT Plugins

ํ—ˆ๊น…ํŽ˜์ด์Šค, ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ๋ Œ๋”๋ง ์ง€์›

์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ(Jupyter notebook)์€ ์ฝ”๋“œ๋ฅผ ์ˆœ์ฐจ์ ์œผ๋กœ ์‹คํ–‰ํ•˜๋ฉด์„œ ๊ฒฐ๊ณผ๋ฅผ ์ฆ‰์‹œ ํ™•์ธํ•  ์ˆ˜ ์žˆ๊ธฐ ๋•Œ๋ฌธ์—, ๋จธ์‹  ๋Ÿฌ๋‹ ๋ถ„์•ผ์˜ ๋งŽ์€ ์‚ฌ๋žŒ๋“ค์ด ์• ์šฉํ•˜๊ณ  ์žˆ์ฃ . ๊ธฐ์กด ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ ํŒŒ์ผ(ipynb)์€ ์ œ์ด์Šจ(JSON) ํ˜•์‹์œผ๋กœ ๊ฐ€๋…์„ฑ์ด ๋–จ์–ด์กŒ์—ˆ๋Š”๋ฐ์š”. ์ด์ œ๋Š” ํ—ˆ๊น…ํŽ˜์ด์Šค ํ—ˆ๋ธŒ(Hugging Face Hub)์—์„œ๋„ ์ฃผํ”ผํ„ฐ ๋…ธํŠธ๋ถ๊ณผ ๊ตฌ๊ธ€ ์ฝ”๋žฉ ํ™˜๊ฒฝ์ฒ˜๋Ÿผ ๊น”๋”ํ•˜๊ฒŒ ๋ Œ๋”๋ง(Rendering)๋œ ipynb ํŒŒ์ผ์„ ํ™•์ธํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

Jupyter X Hugging Face

JAX/Flax LAB, 'JAX' ๊ณต์‹ ๋ฌธ์„œ ๋ฒˆ์—ญ ํ”„๋กœ์ ํŠธ

๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ JAX/Flax LAB์—์„œ ๊ตฌ๊ธ€์˜ ๋จธ์‹ ๋Ÿฌ๋‹ ๋ผ์ด๋ธŒ๋Ÿฌ๋ฆฌ์ธ โ€˜JAXโ€™์˜ ๊ณต์‹ ๋ฌธ์„œ๋ฅผ ํ•œ๊ตญ์–ด๋กœ ๋ฒˆ์—ญํ•˜๋Š” ํ”„๋กœ์ ํŠธ๋ฅผ ์ง„ํ–‰ ์ค‘์ž…๋‹ˆ๋‹ค. โ€˜JAXโ€™๋Š” ํ˜„์žฌ ๋”ฅ๋Ÿฌ๋‹ ํ”„๋ ˆ์ž„์›Œํฌ์—์„œ ๋งŽ์ด ์‚ฌ์šฉ๋˜๋Š” ๊ธฐ๋Šฅ์ธ ์ž๋™ ๋ฏธ๋ถ„(Autograd)๊ณผ ๊ฐ€์† ์„ ํ˜• ๋Œ€์ˆ˜(XLA)๋ฅผ ๊ฒฐํ•ฉํ•ด ๊ณ ์„ฑ๋Šฅ ์—ฐ์‚ฐ ์ž‘์—…์„ ์ง€์›ํ•˜๋Š”๋ฐ์š”. JAX/Flax LAB์—์„œ๋Š” ๊ฐ€์žฅ ์‰ฌ์šด ํŠœํ† ๋ฆฌ์–ผ์ธ 'Tutorial: JAX 101'์„ ๋ฒˆ์—ญํ–ˆ์Šต๋‹ˆ๋‹ค.

JAX KR ๋ฌธ์„œ ๋ฒˆ์—ญ ํ”„๋กœ์ ํŠธ

๋ชจ๋‘์—ฐ ์ปค๋ฎค๋‹ˆํ‹ฐ ์†Œ์‹
๐ŸŒปLAB ์†Œ์‹
by ์‹ ํƒœ์–‘ ์ •์›์‚ฌ
LAB ์—ฐ๊ตฌ์› ์ฐพ์•„์š”
๐ŸŒฑํ’€์žŽ์Šค์ฟจ ์†Œ์‹
by ํ•œํ•ด์—ฐ ์ •์›์‚ฌ
ํ’€์žŽ์Šค์ฟจ 4์›” ๋ชจ์ž„ ์˜คํ”ˆ! ํ’€์žŽ ์—ฐ๊ตฌ์› ์ฐพ์•„์š”
  • Medical AI Research ๊ธฐ์ดˆ ๊ณผ์ •
  • ROS2 ์ฒซ ์ˆ  ๋œจ๊ธฐ
  • ๊ธฐํ›„ ๋ฐ ์ธ๊ตฌ ๋ฌธ์ œ๋ฅผ ๊ณ ๋ คํ•œ ๋‚ด์ง‘ ๋งˆ๋ จ๊ณผ ์ž์‚ฐ ๊ณ„ํš
  • ํŒ๋‹ค์Šค์™€ ๋”ฅ๋Ÿฌ๋‹ ์ž…๋ฌธ
  • ๋น„์ „๊ณต์ž๋ฅผ ์œ„ํ•œ AI ์ฒซ๊ฑธ์Œ
  • ์ฃผ๋‹ˆ์–ด ๋ฐ์ดํ„ฐ ์—”์ง€๋‹ˆ์–ด๊ฐ€ ๋ผ๋ณด์ž!
_์ •์›์‚ฌ: ๋ฒš๊ฝƒ์ด ๋งŒ๊ฐœํ•œ ์š”์ฆ˜, ๋”ฐ์‚ฌ๋กœ์šด ํ–‡์‚ด๊ณผ ํ•จ๊ป˜ ๊ณต๋ถ€ ์‹œ์ž‘ํ•ด ๋ณผ๊นŒ์š”?๐ŸŒธ
์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜
ML+QC 
  • ์ผ์‹œ: 4์›” 4์ผ ํ™”์š”์ผ I 7:30PM - 8:30PM
  • ์žฅ์†Œ: ๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ๊ฐ•๋‚จ์บ ํผ์Šค I ์œ ํŠœ๋ธŒ
  • ์—ฐ์‚ฌ: ์ œ์ •์šฐ(์‚ผ์„ฑSDS)
  • ์ฝ˜ํ…์ธ : ๊ณ ์ „ ๋จธ์‹  ๋Ÿฌ๋‹ I ์–‘์ž ์ปดํ“จํŒ… I ์–‘์ž ๋จธ์‹  ๋Ÿฌ๋‹ ๋“ฑ
๐Ÿฟ์ตœ๊ทผ ์„ธ๋ฏธ๋‚˜ ๋‹ค์‹œ๋ณด๊ธฐ: <๊ธ‰๋ณ€ํ•˜๋Š” ์„ธ์ƒ์—์„œ ์ปค๋ฆฌ์–ด๋ž€? - ํ•œ๊ธฐ์šฉ ๊ทธ๋ ™ US CTO>
๋‹˜ ์˜ค๋Š˜๋„ ๊ณ ๋งˆ์›Œ์š”. ๋‹ค์Œ์ฃผ์— ๋˜ ๋งŒ๋‚˜์š”! ๐Ÿค—
์•—, ๋ ˆํ„ฐ๊ฐ€ ๋ฉ”์ผํ•จ์—์„œ ์•ˆ ๋ณด์ด๋‚˜์š”?
  • ์ŠคํŒธ๋ฉ”์ผํ•จ์—์„œ ์šธ๊ณ  ์žˆ์„์ง€๋„ ๋ชฐ๋ผ์š”. ์ฐพ์•„๊ฐ€ ํ™•์ธํ•ด ๋ณด์„ธ์š”!
  • ์ฃผ์†Œ๋ก์— ๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ์ด๋ฉ”์ผ ์ฃผ์†Œ(modulabs01@gmail.com)๋ฅผ ์ถ”๊ฐ€ํ•ด ์ฃผ์„ธ์š”.
(์ฃผ)๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ
์„œ์šธ์‹œ ๊ฐ•๋‚จ๊ตฌ ๊ฐ•๋‚จ๋Œ€๋กœ 324(์—ญ์‚ผ๋””์˜ค์ŠˆํŽ˜๋ฆฌ์›€) 2F