#GPT-4o mini #MistralNeMo
ํ•จ๊ป˜ ๊ณต์œ ํ•˜๊ณ  ์„ฑ์žฅํ•˜๋Š” ์—ฐ๊ตฌ ๋ฌธํ™”๋ฅผ ์ „ํŒŒํ•ด์š”
2024๋…„ 7์›” 22์ผ ๋ชจ๋‘๋ ˆํ„ฐ
created with ChatGPT-4o
๋‹˜, ๋ชจ๋‘๋ ˆํ„ฐ๊ฐ€ ์™”์–ด์š”!
๋‹˜์€ ์—ฌ๋ฆ„ ํœด๊ฐ€ ๊ณ„ํš์ด ์žˆ๋‚˜์š”?
์ „ ์นœ๊ตฌ์™€ ๊ตญ๋‚ด ์—ฌํ–‰์„ ์ค€๋น„ ์ค‘์ด์—์š”!๐Ÿซง
์ž ์‹œ๋‚˜๋งˆ ์ผ๊ณผ ์ผ์ƒ์—์„œ ์ž์œ ๋กœ์›Œ์ ธ ๋ณด๋ ค๊ณ ์š”.
์ด๋ฒˆ์ฃผ๋„ ๋น„, ๋”์œ„ ์กฐ์‹ฌํ•˜๊ณ  ํž˜๋‚ด์„ธ์š”๐Ÿซถ
์ด๋ฒˆ์ฃผ SW/AI ์†Œ์‹ 
  • '์‹ธ๊ณ  ๊ฐ€๋ฒผ์šด AI' GPT-4o ๋ฏธ๋‹ˆ ์ถœ์‹œ
  • ์—”๋น„๋””์•„-๋ฏธ์ŠคํŠธ๋ž„AI, ์ƒˆ๋กœ์šด AI ๋ชจ๋ธ ๊ณต๊ฐœ
์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜: ์ƒ๊ณ„ํ˜• ๋””์ž์ด๋„ˆ์—๊ฒŒ ์ฑ—GPT ์ถ•๋ณต์ด ๋์ด์—†๋„ค
'์‹ธ๊ณ  ๊ฐ€๋ฒผ์šด AI' GPT-4o ๋ฏธ๋‹ˆ ์ถœ์‹œ
ยฉOpenAI
์˜คํ”ˆAI๊ฐ€ ๊ฐœ๋ฐœํ•œ ์ตœ์‹  ๋ชจ๋ธ GPT-4o์˜ ๋ฏธ๋‹ˆ(mini) ๋ฒ„์ „์ด ์ถœ์‹œ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. '๋ฏธ๋‹ˆ'๋ผ๋Š” ์ด๋ฆ„๋งŒํผ ๊ฐ€๋ณ์ง€๋งŒ ๋›ฐ์–ด๋‚œ ์„ฑ๋Šฅ์„ ๊ฐ•์กฐํ•˜๊ณ  ์žˆ๋Š”๋ฐ์š”. ๊ธฐ์กด GPT-3.5 ํ„ฐ๋ณด(Turbo) ๋ชจ๋ธ๋ณด๋‹ค ํ† ํฐ ๋‹น ๋น„์šฉ์ด 60% ์ด์ƒ ์ €๋ ดํ•˜๋ฉด์„œ๋„(100๋งŒ ํ† ํฐ ๋‹น 15์„ผํŠธ(input), 60์„ผํŠธ(output)) ๋ฒค์น˜๋งˆํฌ ํ…Œ์ŠคํŠธ ์„ฑ๋Šฅ์€ GPT-4o์— ์กฐ๊ธˆ ๋ชป ๋ฏธ์น˜๋Š” ์ˆ˜์ค€์ด๊ณ ์š”. ํด๋กœ๋“œ ํ•˜์ด์ฟ (Claude Haiku)๋‚˜ ์ œ๋ฏธ๋‚˜์ด ํ”Œ๋ž˜์‹œ(Gemini Flash) ๋“ฑ ๋‹ค๋ฅธ ๊ธฐ์—…์˜ ํ”Œ๋ž˜๊ทธ์‹ญ ๋ชจ๋ธ ์‹œ๋ฆฌ์ฆˆ์™€ ๋น„๊ตํ–ˆ์„ ๋•Œ๋„ ์ข‹์€ ์„ฑ๋Šฅ์„ ๋ณด์˜€๋‹ค๊ณ  ํ•ฉ๋‹ˆ๋‹ค. 

GPT-4o ๋ฏธ๋‹ˆ๋Š” ํ˜„์žฌ ์ฑ—GPT๋ฅผ ํ†ตํ•ด์„œ๋„ ์‚ฌ์šฉํ•ด ๋ณผ ์ˆ˜ ์žˆ์–ด์š”. ์˜คํ”ˆAI API๋กœ๋Š” ํ…์ŠคํŠธใƒป์ด๋ฏธ์ง€ ์ฒ˜๋ฆฌ ๊ธฐ๋Šฅ๋งŒ ์ง€์›ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ๋™์˜์ƒใƒป์˜ค๋””์˜ค ์ฒ˜๋ฆฌ ๊ธฐ๋Šฅ๊ณผ ํŒŒ์ธํŠœ๋‹(fine-tuning) ๋“ฑ ๋” ๋งŽ์€ ๊ธฐ๋Šฅ์€ ์ถ”ํ›„์— ์ถ”๊ฐ€๋  ์˜ˆ์ •์ด๋ผ๊ณ  ํ•˜๋„ค์š”!

์—”๋น„๋””์•„-๋ฏธ์ŠคํŠธ๋ž„AI, ์ƒˆ๋กœ์šด AI ๋ชจ๋ธ ๊ณต๊ฐœ
ยฉMistral AI
๋ฏธ์ŠคํŠธ๋ž„ AI(Mistral AI)๊ฐ€ ์—”๋น„๋””์•„(NVIDIA)์™€ ํ˜‘๋ ฅํ•˜์—ฌ ์–ธ์–ด ๋ชจ๋ธ '๋ฏธ์ŠคํŠธ๋ž„ ๋„ค๋ชจ(Mistral NeMo)'๋ฅผ ์ถœ์‹œํ–ˆ์Šต๋‹ˆ๋‹ค. ๋ฏธ์ŠคํŠธ๋ž„ ๋„ค๋ชจ๋Š” ํฌ๊ธฐ๊ฐ€ 12B์ธ๋ฐ, ์ฝ˜ํ…์ŠคํŠธ ์œˆ๋„์šฐ ํฌ๊ธฐ๋Š” ์ ฌ๋งˆ(Gemma) 2 9B, ๋ผ๋งˆ(Llama) 3 8B ๋“ฑ ๋น„์Šทํ•œ ๊ทœ๋ชจ์˜ ๋ชจ๋ธ๋ณด๋‹ค ํฐ 128k์ž…๋‹ˆ๋‹ค. ๋ฒค์น˜๋งˆํฌ ์ ์ˆ˜๋Š” ๋ฏธ์ŠคํŠธ๋ž„ ๋„ค๋ชจ ๋ฒ ์ด์Šค ๋ชจ๋ธ์ด ์‚ฌ์ „ ํ•™์Šต๋œ(pre-trained) ์ ฌ๋งˆ 2, ๋ผ๋งˆ 3๋ณด๋‹ค ์กฐ๊ธˆ ๋” ๋†’๊ฒŒ ์ธก์ •๋˜์—ˆ์Šต๋‹ˆ๋‹ค. 

๋ฏธ์ŠคํŠธ๋ž„ ๋„ค๋ชจ์˜ ์žฅ์ ์€ ๋‹ค๊ตญ์–ด ์ฒ˜๋ฆฌ ๋Šฅ๋ ฅ์— ์žˆ๋Š”๋ฐ์š”. ์˜์–ด๋ฟ๋งŒ ์•„๋‹ˆ๋ผ ํ•œ๊ตญ์–ด, ํ”„๋ž‘์Šค์–ด, ๋…์ผ์–ด ๋“ฑ ๋‹ค์–‘ํ•œ ์–ธ์–ด ๋ฐ์ดํ„ฐ์—์„œ ๋ผ๋งˆ 3 8B ๋ชจ๋ธ์„ ํฌ๊ฒŒ ์›ƒ๋„๋Š” ์ ์ˆ˜๋ฅผ ๊ธฐ๋กํ–ˆ์Šต๋‹ˆ๋‹ค. 'Tiktoken ํ† ํฌ๋‚˜์ด์ €(tokenizer)'๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•œ 'Tekken ํ† ํฌ๋‚˜์ด์ €'๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ํ•œ๊ตญ์–ด์™€ ์•„๋ž์–ด์˜ ๊ฒฝ์šฐ ํšจ์œจ์ด 2~3๋ฐฐ, ๋‹ค๋ฅธ ์ฃผ์š” ์–ธ์–ด๋“ค์˜ ๊ฒฝ์šฐ ์•ฝ 30% ๋” ํšจ์œจ์ ์ด์—ˆ๋‹ค๊ณ  ํ•ฉ๋‹ˆ๋‹ค.

๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ์†Œ์‹
LAB ์—ฐ๊ตฌ์› ์ฐพ์•„์š”
๐Ÿ”ฅ์ง€๊ธˆ 64๊ฐœ์˜ LAB์ด '์—ฐ๊ตฌ ์ค‘'์ด์—์š”
์—ด๋ฆฐ ์„ธ๋ฏธ๋‚˜
์ƒ๊ณ„ํ˜• ๋””์ž์ด๋„ˆ์—๊ฒŒ ์ฑ—GPT ์ถ•๋ณต์ด ๋์ด์—†๋„ค
๐Ÿ“ฃ์šธ์ง€๋งˆ ๋ฐ”๋ณด์•ผ, ํšŒ์‚ฌ ๋‚ด N์žก๋Ÿฌ ์ƒ์กดํ˜• ๋””์ž์ด๋„ˆ ๋ชจ์—ฌ๋ผ
  • ์ผ์‹œ: 7์›” 31์ผ ์ˆ˜์š”์ผ 7PM - 9PM
  • ์žฅ์†Œ: ๋ชจ๋‘์˜์—ฐ๊ตฌ์†Œ ๋Œ€์ „์บ ํผ์Šค
  • ์—ฐ์‚ฌ: ๊น€์†Œ์œค(ํ”„๋ฆฌ๋žœ์„œ ํ”„๋กœ๋•ํŠธ ๋””์ž์ด๋„ˆ)
  • ๋‚ด์šฉ: ์ฑ—GPT์˜ ๊ธฐ๋ณธ ์ดํ•ด ยท ์ฑ—GPT์™€ ๋‹ค๋ฅธ LLM ํˆด ๋น„๊ต ๋ถ„์„ ยท ํ”„๋กฌํ”„ํŒ… ํŒ ยท ์‹ค๋ฌด ํ™œ์šฉ ์˜ˆ์‹œ ๋“ฑ
์˜ค๋Š˜๋„ ๋‹˜์˜ ์„ฑ์žฅ์„ ์‘์›ํ• ๊ฒŒ์š”!
์„œ์šธ์‹œ ๊ฐ•๋‚จ๊ตฌ ๊ฐ•๋‚จ๋Œ€๋กœ 324(์—ญ์‚ผ๋””์˜ค์ŠˆํŽ˜๋ฆฌ์›€) 2F