๋จธ์‹ ๋Ÿฌ๋‹ 2

๋จธ์‹ ๋Ÿฌ๋‹ ๋ถ„๋ฅ˜ 2

๊ธฐ์ค€ : ์ž…๋ ฅ ๋ฐ์ดํ„ฐ์˜ ์ŠคํŠธ๋ฆผ์œผ๋กœ๋ถ€ํ„ฐ ์ ์ง„์ ์œผ๋กœ ํ•™์Šตํ•  ์ˆ˜ ์žˆ๋Š”๊ฐ€? NO! ๋ฐฐ์น˜ํ•™์Šต (์˜คํ”„๋ผ์ธ ํ•™์Šต) ์‹œ์Šคํ…œ ํ›ˆ๋ จ ํ›„ ์ œํ’ˆ ์‹œ์Šคํ…œ์— ์ ์šฉํ•˜๋ฉด ๋” ์ด์ƒ ํ•™์Šต์—†์ด ์‹คํ–‰๋œ๋‹ค.(ํ•™์Šตํ•œ ๊ฒƒ์„ ์ ์šฉ๋งŒ ํ•จ) ์‹œ๊ฐ„๊ณผ ์ž์›์„ ๋งŽ์ด ์†Œ๋น„ํ•˜๋ฏ€๋กœ ์˜คํ”„๋ผ์ธ์—์„œ ์ˆ˜ํ–‰๋œ๋‹ค. ๋ณดํ†ต 24์‹œ๊ฐ„๋งˆ๋‹ค ๋˜๋Š” ๋งค์ฃผ ํ›ˆ๋ จ์‹œํ‚ด(์žฆ์€ ํ›ˆ๋ จ ํ•„์š”) ์ „์ฒด ๋ฐ์ดํ„ฐ์…‹ ์‚ฌ์šฉํ•˜๋Š” ํ›ˆ๋ จ - ๋งŽ์€ ์ปดํ“จํŒ… ์ž์›(CPU ๋ฉ”๋ชจ๋ฆฌ๊ณต๊ฐ„, ๋””์Šคํฌ๊ณต๊ฐ„ ๋“ฑ)ํ•„์š” ์ƒˆ๋กœ์šด ๋ฐ์ดํ„ฐ์— ๋Œ€ํ•ด ํ•™์Šตํ•  ๋• ์ „์ฒด ๋ฐ์ดํ„ฐ์…‹์„ ์‚ฌ์šฉํ•˜์—ฌ ์‹œ์Šคํ…œ์˜ ์ƒˆ๋กœ์šด ๋ฒ„์ „์„ ์ฒ˜์Œ๋ถ€ํ„ฐ ๋‹ค์‹œ ํ›ˆ๋ จ YES! ์˜จ๋ผ์ธ ํ•™์Šต ๋ฐ์ดํ„ฐ๋ฅผ ์ˆœ์ฐจ์ ์œผ๋กœ ํ•œ ๊ฐœ์”ฉ ๋˜๋Š” ๋ฏธ๋‹ˆ๋ฐฐ์น˜(mini-batch)๋ผ ๋ถ€๋ฅด๋Š” ์ž‘์€ ๋ฌถ์Œ ๋‹จ์œ„๋กœ ์ฃผ์ž…ํ•˜์—ฌ ํ›ˆ๋ จ์‹œํ‚ด ๋งค ํ•™์Šต ๋‹จ๊ณ„๊ฐ€ ๋น ๋ฅด๊ณ  ์ ์€ ๋น„์šฉ์ด ๋“ฆ -- ์ œํ’ˆ ๋ก ์นญ ํ›„์—๋„ ์ƒˆ๋กœ์šด ๋ฐ์ดํ„ฐ ๋„์ฐฉํ•˜๋Š” ๋Œ€..

๋จธ์‹ ๋Ÿฌ๋‹ ์ •์˜์™€ ๋ถ„๋ฅ˜

โ–ท ๋จธ์‹ ๋Ÿฌ๋‹์€ ๋ช…์‹œ์ ์ธ ํ”„๋กœ๊ทธ๋ž˜๋ฐ ์—†์ด ์ปดํ“จํ„ฐ๊ฐ€ ํ•™์Šตํ•˜๋Š” ๋Šฅ๋ ฅ์„ ๊ฐ–์ถ”๊ฒŒ ํ•˜๋Š” ์—ฐ๊ตฌ ๋ถ„์•ผ๋‹ค. โ–ท ์–ด๋–ค ์ž‘์—… T์— ๋Œ€ํ•œ ํ”„๋กœ๊ทธ๋žจ์˜ ์„ฑ๋Šฅ์„ P๋กœ ์ธก์ •ํ–ˆ์„ ๋•Œ ๊ฒฝํ—˜ E๋กœ ์ธํ•ด ์„ฑ๋Šฅ์ด ํ–ฅ์ƒ๋๋‹ค๋ฉด, ์ด ํ”„๋กœ๊ทธ๋žจ์€ T์™€ P์— ๋Œ€ํ•ด E๋กœ ํ•™์Šตํ•œ ๊ฒƒ์ด๋‹ค. ์ŠคํŒธ ํ•„ํ„ฐ - ์ŠคํŒธ๋ฉ”์ผ ๊ตฌ๋ถ„ ๋จธ์‹ ๋Ÿฌ๋‹ ํ”„๋กœ๊ทธ๋žจ ์‹œ์Šคํ…œ์ด ํ•™์Šตํ•˜๋Š”๋ฐ ์‚ฌ์šฉํ•˜๋Š” ์ƒ˜ํ”Œ = ํ›ˆ๋ จ์„ธํŠธ training set ๊ฐ ํ›ˆ๋ จ ๋ฐ์ดํ„ฐ = training instance | ์ƒ˜ํ”Œ ์ด ๊ฒฝ์šฐ ์ž‘์—…T = ์ƒˆ ๋ฉ”์ผ์ด ์ŠคํŒฌ์ธ์ง€ ๊ตฌ๋ถ„ํ•˜๋Š” ๊ฒƒ ๊ฒฝํ—˜ E = ํ›ˆ๋ จ๋ฐ์ดํ„ฐ ์„ฑ๋Šฅ ์ธก์ •P๋Š” ์ง์ ‘ ์ •์˜ํ•ด์•ผ ํ•œ๋‹ค. (ex - ์ •ํ™•ํžˆ ๋ถ„๋ฅ˜๋œ ๋ฉ”์ผ์˜ ๋น„์œจ) = ์ •ํ™•๋„ accuracy , ๋ถ„๋ฅ˜ ์ž‘์—…์— ์‚ฌ์šฉ๋œ๋‹ค. ๋จธ์‹ ๋Ÿฌ๋‹์€ ๋‹ค์Œ ๋ถ„์•ผ์— ๋›ฐ์–ด๋‚˜๋‹ค : ๊ธฐ์กด ์†”๋ฃจ์…˜์œผ๋กœ๋Š” ๋งŽ์€ ์ˆ˜๋™ ์กฐ์ •๊ณผ ๊ทœ์น™์ด ํ•„์š”ํ•œ ๋ฌธ์ œ ..