2023๋…„ 12์›” 16์ผยท1๋ถ„ ์ฝ๊ธฐ

OpenAI, 1,000๋งŒ ๋‹ฌ๋Ÿฌ์˜ Superalignment ๋ณด์กฐ๊ธˆ ๊ณต๊ฐœ

OpenAI๋Š” ์ดˆ์ง€๋Šฅ ์‹œ์Šคํ…œ์„ ํ™œ์šฉํ•œ ์•ˆ์ „ํ•œ ๊ด€ํ–‰์— ๋Œ€ํ•œ ์—ฐ๊ตฌ๋ฅผ ์žฅ๋ คํ•˜๊ธฐ ์œ„ํ•ด ์ž๊ธˆ ์ง€์› ๊ณ„ํš์„ ์‹œ์ž‘ํ•˜๊ณ  ์žˆ์œผ๋ฉฐ, ์ด๋Š” ์ธ๊ฐ„์˜ ์ดํ•ด๋ฅผ ๋›ฐ์–ด๋„˜๋Š” AI์˜ ๋ฏธ๋ž˜ ๋„๋ž˜๋ฅผ ์•”์‹œํ•˜๊ณ  ํ‰๊ฐ€ ๋ฉ”์ปค๋‹ˆ์ฆ˜์˜ ํ•„์š”์„ฑ์„ ๊ฐ•์กฐํ•ฉ๋‹ˆ๋‹ค.

OpenAI, 1,000๋งŒ ๋‹ฌ๋Ÿฌ์˜ Superalignment ๋ณด์กฐ๊ธˆ ๊ณต๊ฐœ

๊ฑฐ๋Œ€ ๊ธฐ์ˆ  ๊ธฐ์—…์ธ OpenAI ์ดˆ์ง€๋Šฅ ์‹œ์Šคํ…œ์˜ ์•ˆ์ „ํ•œ ์ž‘๋™์„ ๋ณด์žฅํ•˜๋Š” ๋ฐ ์ฐธ์—ฌํ•˜๋Š” ๊ธฐ์—…์„ ์ค‘์‹ฌ์œผ๋กœ ๊ตฌ์„ฑ๋œ ์ƒˆ๋กœ์šด ๋ณด์กฐ๊ธˆ ํ”„๋กœ๊ทธ๋žจ์„ ์‹œ์ž‘ํ–ˆ์Šต๋‹ˆ๋‹ค. ์ด๋Ÿฌํ•œ ๋ฐœ์ „์€ ํšŒ์‚ฌ๊ฐ€ ์šฐ๋ฆฌ ์ƒ์•  ๋‚ด์— ์ดˆ์ง€๋Šฅ์˜ ์ถœํ˜„์„ ์˜ˆ์ƒํ•˜๊ณ  ๊ทธ๋Ÿฌํ•œ ๋ฏธ๋ž˜ ๋ฐœ์ „์— ๋„์›€์ด ๋˜๋Š” ๊ฐ•ํ™”๋œ ์•ˆ์ „ ํ”„๋กœํ† ์ฝœ์— ๋Œ€ํ•œ ๊ธด๊ธ‰ํ•œ ํ•„์š”์„ฑ์„ ์ด‰๋ฐœํ•จ์— ๋”ฐ๋ผ ์ด๋ฃจ์–ด์กŒ์Šต๋‹ˆ๋‹ค.

์ด๋Ÿฌํ•œ ํ˜์‹ ์ ์ธ AI ์‹œ๋Œ€๊ฐ€ ๋‹ค๊ฐ€์˜ด์— ๋”ฐ๋ผ OpenAI ์ธ๊ฐ„์˜ ์ดํ•ด๋ฅผ ํ”ผํ•  ์ˆ˜ ์žˆ๋Š” ๋ณต์žกํ•˜๊ณ  ์ฐฝ์˜์ ์ธ ์ž‘์—…์„ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ๋Š” ๋Šฅ๋ ฅ์„ ๊ฐ–์ถ˜ ์ด๋Ÿฌํ•œ ์„ ๊ตฌ์ ์ธ ๋ฏธ๋ž˜ ์‹œ์Šคํ…œ์„ ๊ตฌ์ƒํ•ฉ๋‹ˆ๋‹ค.

ํ˜„์žฌ AI ์‹œ์Šคํ…œ์— ์‚ฌ์šฉ๋˜๋Š” ์•ˆ์ „ ์กฐ์น˜๋Š” ์ฃผ๋กœ ์ธ๊ฐ„ ํ”ผ๋“œ๋ฐฑ ์˜ˆ์ธก ๊ฐ•ํ™” ํ•™์Šต(RLHF)์„ ๊ฐ•์กฐํ•˜๋Š” ํ”„๋กœ์„ธ์Šค์ธ ์ •๋ ฌ์„ ์ค‘์‹ฌ์œผ๋กœ ์ด๋ฃจ์–ด์ง‘๋‹ˆ๋‹ค. ์ด ๋ฐฉ๋ฒ•์€ ์ค‘์š”ํ•œ ์ธ๊ฐ„ ๊ฐ๋… ์—ญํ• ์— ๋‹ฌ๋ ค ์žˆ์œผ๋ฉฐ ์ดˆ์ง€๋Šฅ AI๊ฐ€ ๊ณ ๋„๋กœ ๋ฐœ์ „๋œ ์ž‘์—…์˜ ๊ฐœ๋ฐœ ๋ฐ ์‹คํ–‰์„ ์ถ”์ง„ํ•˜๋Š” ์‹œ๋‚˜๋ฆฌ์˜ค์—์„œ๋Š” ์ž ์žฌ์ ์œผ๋กœ ํ”๋“ค๋ฆด ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ˆ˜๋ฐฑ๋งŒ ๊ฐœ์˜ ์ฝ”๋“œ ๋ผ์ธ์„ ์ƒ์„ฑํ•˜๋Š” AI ํ”„๋กœํ† ํƒ€์ž…์„ ์ƒ๊ฐํ•ด ๋ณด์„ธ์š”. ์ธ๊ฐ„์ด ์ „์ฒด๋ฅผ ์ฒด๊ณ„์ ์œผ๋กœ ํ‰๊ฐ€ํ•œ๋‹ค๋Š” ๊ฒƒ์€ ๋งค์šฐ ์–ด๋ ค์šด ์ผ์ด ๋  ๊ฒƒ์ž…๋‹ˆ๋‹ค.

ํšŒ์‚ฌ๋Š” ์ฆ‰๊ฐ์ ์ธ ์ฃผ์˜๊ฐ€ ํ•„์š”ํ•œ ๋ช…ํ™•ํ•œ ๋‚œ์ œ๋ฅผ ๊ฐ•์กฐํ–ˆ์Šต๋‹ˆ๋‹ค. ์ธ๊ฐ„์ด ์–ด๋–ป๊ฒŒ ์ž์‹ ๋ณด๋‹ค ํ›จ์”ฌ ๋” ์ง€๋Šฅ์ ์ธ AI ์‹œ์Šคํ…œ์„ ์ง€์‹œํ•˜๊ณ  ์‹ ๋ขฐ๋ฅผ ๊ตฌ์ถ•ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๊นŒ? OpenAI ์ด๋ฅผ ์„ธ๊ณ„์—์„œ ๊ฐ€์žฅ ์‹œ๊ธ‰ํ•˜๊ณ  ํ•ด๊ฒฐ๋˜์ง€ ์•Š์€ ๊ธฐ์ˆ ์  ๋‚œ์ œ ์ค‘ ํ•˜๋‚˜๋กœ ์‹๋ณ„ํ•˜๋ฉด์„œ ๊ธ์ •์ ์ธ ์ „๋ง์„ ์œ ์ง€ํ•˜๋ฉฐ ์†”๋ฃจ์…˜ ๋ฐœ๊ฒฌ์„ ํ–ฅํ•œ ๊ธธ์€ ์„ ํƒํ•˜๊ธฐ์— ์ ํ•ฉํ•œ ์ˆ˜๋งŽ์€ ์œ ๋งํ•œ ์ ‘๊ทผ ๋ฐฉ์‹์œผ๋กœ ํฉ์–ด์ ธ ์žˆ๋‹ค๋Š” ์ ์„ ๊ฐ•์กฐํ•ฉ๋‹ˆ๋‹ค.

๊ธฐ์ˆ  ํšŒ์‚ฌ์˜ ๋น„ํŒ์€ ๊ธฐ๊ณ„ ํ•™์Šต ์—ฐ๊ตฌ ์ปค๋ฎค๋‹ˆํ‹ฐ์™€ ๊ฐœ๋ณ„ ์—ฐ๊ตฌ์ž ์•ž์— ์ค‘์š”ํ•œ ๊ธฐํšŒ๋ฅผ ์ฆํญ์‹œํ‚ฌ ๋ฟ๋งŒ ์•„๋‹ˆ๋ผ ์ด ๋ถ„์•ผ์˜ ์ฆ‰๊ฐ์ ์ธ ํƒ๊ตฌ์™€ ๊ฐ€๋Šฅํ•œ ์„ฑ๊ณผ ๋ŒํŒŒ๊ตฌ์— ๋Œ€ํ•œ ๊ด€์‹ฌ์„ ๋ถˆ๋Ÿฌ์ผ์œผํ‚ต๋‹ˆ๋‹ค.

์ด๋Ÿฌํ•œ ์—ฐ๊ตฌ ์‚ฌ์—…์„ ๋”์šฑ ๊ฐ•ํ™”ํ•˜๊ธฐ ์œ„ํ•ด OpenAI ๋น„์ „์ด ์žˆ๋Š” Superalignment ๋ณด์กฐ๊ธˆ ํ”„๋กœ๊ทธ๋žจ์„ ์ˆ˜๋ฆฝํ•˜๋Š” ๋ฐ ์ ๊ทน์ ์ธ ์กฐ์น˜๋ฅผ ์ทจํ•˜์—ฌ ๊ธˆ๊ณ ์— 1,000๋งŒ ๋‹ฌ๋Ÿฌ๋ฅผ ํˆฌ์ž…ํ–ˆ์Šต๋‹ˆ๋‹ค. ํ•™์ˆ  ์—ฐ๊ตฌ์‹ค, ๋น„์˜๋ฆฌ ๋‹จ์ฒด, ๊ฐœ์ธ ์—ฐ๊ตฌ์ž์—๊ฒŒ๋Š” 10๋งŒ ๋‹ฌ๋Ÿฌ์—์„œ 200๋งŒ ๋‹ฌ๋Ÿฌ๊นŒ์ง€ ํ• ๋‹น๋  ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋ฉ๋‹ˆ๋‹ค. ์ด ์™ธ์—๋„ ํšŒ์‚ฌ๋Š” ๋Œ€ํ•™์› ์žฅํ•™์ƒ์„ ์œ„ํ•ด 1๋…„ ๋™์•ˆ 150,000๋‹ฌ๋Ÿฌ์˜ ์žฅํ•™๊ธˆ์„ ํ• ๋‹นํ•˜์—ฌ ์—ฐ๊ตฌ ์ž๊ธˆ๊ณผ ๊ธ‰์—ฌ๋ฅผ ์ œ๊ณตํ•˜๊ธฐ ์œ„ํ•ด ์ž๊ธˆ์„ ๋‘ ๋ถ€๋ถ„์œผ๋กœ ๋‚˜๋ˆด์Šต๋‹ˆ๋‹ค.

๊ณ ๋ฌด์ ์ธ ๊ณ„์‹œ์—์„œ OpenAI ๊ฐœ๋ฐฉ์ ์ธ ์ •์ฑ…์„ ๋ณด์—ฌ์ฃผ๊ณ , ์ •๋ ฌ์— ๋Œ€ํ•œ ์‚ฌ์ „ ๊ฒฝํ—˜์ด ์—†๋Š” ์—ฐ๊ตฌ์›์˜ ์ง€์›์„ ํ™˜์˜ํ•ฉ๋‹ˆ๋‹ค. ์ด๋Š” ํšŒ์‚ฌ์˜ ํฌ์šฉ์„ฑ ์ •์‹ ๊ณผ ์ƒˆ๋กœ์šด ๊ด€์  ์žฅ๋ ค์— ๋Œ€ํ•œ ์ฆ๊ฑฐ์ž…๋‹ˆ๋‹ค.

OpenAI ์—ด์„ฑ์ ์ธ ์ง€์›์ž๋ฅผ ์œ„ํ•œ ๊ธธ์„ ์—ด์–ด 2์›” 18์ผ๊นŒ์ง€ ์ง€์›์„œ๋ฅผ ๊ณ„์† ์—ด์–ด๋‘˜ ์˜ˆ์ •์ด๋ฉฐ, ์ง€์› ๋งˆ๊ฐ ๋งˆ๊ฐ์ผ๋กœ๋ถ€ํ„ฐ ํ•œ ๋‹ฌ ์ด๋‚ด์— ์ง€์›์ž์—๊ฒŒ ๋ณต๊ท€ํ•˜๋Š” ๊ฒƒ์„ ๋ชฉํ‘œ๋กœ ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

์ƒˆ๋กœ์šด ๋ณด์กฐ๊ธˆ ์ด๋‹ˆ์…”ํ‹ฐ๋ธŒ๋Š” ์ง€๋‚œ 7์›” ๊ณต๊ฐœ๋œ OpenAI ์˜ ๊ด‘๋ฒ”์œ„ํ•œ Superalignment ํ”„๋กœ์ ํŠธ์˜ ๋’ค๋ฅผ ์ด์–ด ๋‚˜์˜จ ๊ฒƒ์ž…๋‹ˆ๋‹ค. ์ด ์•ผ์‹ฌ์ฐฌ ํ”„๋กœ์ ํŠธ์˜ ์ผํ™˜์œผ๋กœ ํšŒ์‚ฌ๋Š” ์ƒˆ๋กœ์šด ๋‚ด๋ถ€ ํŒ€์„ ๊ตฌ์„ฑํ•˜์—ฌ ์ด ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด ํ–ฅํ›„ 4๋…„ ๋™์•ˆ ์ฒ˜๋ฆฌ ์šฉ๋Ÿ‰์˜ 20%๋ฅผ ์•ฝ์†ํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ฐ€์žฅ ์ค‘์š”ํ•œ ๋ชฉํ‘œ๋Š” ์ธ๊ฐ„์˜ ์ •๋ ฌ ์—ฐ๊ตฌ ๋Šฅ๋ ฅ์„ ํ˜„์‹ค์ ์œผ๋กœ ๋ณต์ œํ•˜๋Š” ์ดˆ์ง€๋Šฅ ์‹œ์Šคํ…œ์„ ๊ฐœ๋ฐœํ•˜๋Š” ๊ฒƒ์ž…๋‹ˆ๋‹ค.

Easy to start
Create something amazing

Experiment with AppMaster with free plan.
When you will be ready you can choose the proper subscription.

Get Started
OpenAI, 1,000๋งŒ ๋‹ฌ๋Ÿฌ์˜ Superalignment ๋ณด์กฐ๊ธˆ ๊ณต๊ฐœ | AppMaster