๋คํญ์ ๋ํจ์ ๊ณ์ฐ๊ธฐ
๋คํญ์์ ๋ํจ์๋ฅผ ๊ณ์ฐํ๊ณ ๋จ๊ณ๋ณ ํ์ด๋ฅผ ์ ๊ณตํฉ๋๋ค.
์ ๋ ฅ ํ์ ์๋ด
- โข x^2๋ x์ 2์ ๊ณฑ์ ์๋ฏธํฉ๋๋ค
- โข ๊ณ์๊ฐ 1์ธ ๊ฒฝ์ฐ ์๋ต ๊ฐ๋ฅ (x^2 = 1x^2)
- โข ๋ง์ ๊ณผ ๋บ์ ์ + ๋๋ - ๊ธฐํธ ์ฌ์ฉ
- โข ๊ณต๋ฐฑ์ ๋ฌด์๋ฉ๋๋ค
๊ธฐ๋ณธ ๊ณต์
(c)' = 0
(x^n)' = nx^(n-1)
(cf(x))' = cยทf'(x)
(f ยฑ g)' = f' ยฑ g'
์์
f(x) = 3xยณ + 2xยฒ - 5x + 1
f'(x) = 9xยฒ + 4x - 5
๊ฐ ํญ์ ๊ฑฐ๋ญ์ ๊ณฑ ๊ณต์์ ์ ์ฉ
๋ฏธ๋ถํ์ ์ญ์ฌ์ ๋ฐ์
๋ฏธ๋ถํ์ 17์ธ๊ธฐ ๋ดํด๊ณผ ๋ผ์ดํ๋์ธ ์ ์ํด ๋ ๋ฆฝ์ ์ผ๋ก ๊ฐ๋ฐ๋์์ต๋๋ค. ๋ดํด์ ๋ฌผ๋ฆฌํ์ ๋ฌธ์ (์ด๋๊ณผ ๋ณํ์จ)๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด, ๋ผ์ดํ๋์ธ ๋ ์์ ์ํ์ ๊ด์ ์์ ๋ฏธ๋ถ์ ์ฐ๊ตฌํ์ต๋๋ค. ํ์ฌ ์ฐ๋ฆฌ๊ฐ ์ฌ์ฉํ๋ dy/dx ํ๊ธฐ๋ฒ์ ๋ผ์ดํ๋์ธ ๊ฐ ๊ณ ์ํ ๊ฒ์ ๋๋ค.
๋ดํด์ ์ ๊ทผ
๋ฌผ๋ฆฌํ์ ๋ณํ์จ๊ณผ ์๊ฐ์๋ ๊ฐ๋ ์์ ์ถ๋ฐ
๋ผ์ดํ๋์ธ ์ ์ ๊ทผ
๊ธฐํํ์ ์ ์ ์ ๊ธฐ์ธ๊ธฐ ๊ฐ๋ ์์ ์ถ๋ฐ
ํ๋ ๊ณผํ๊ธฐ์ ์์์ ์์ฉ
์ธ๊ณต์ง๋ฅ๊ณผ ๋จธ์ ๋ฌ๋
- โข ๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent)์ ํต์ฌ ์๋ฆฌ
- โข ์ ๊ฒฝ๋ง์ ์ญ์ ํ(Backpropagation) ์๊ณ ๋ฆฌ์ฆ
- โข ์์คํจ์ ์ต์ ํ์ ๊ฐ์ค์น ์ ๋ฐ์ดํธ
- โข ๋ฅ๋ฌ๋ ๋ชจ๋ธ์ ํ์ต ๊ณผ์
๊ณตํ๊ณผ ๋ฌผ๋ฆฌํ
- โข ์ ์ํ๋ก์ ์ ํธ ๋ถ์
- โข ์ ์ด์์คํ ์ ์์ ์ฑ ํด์
- โข ์ ์ฒด์ญํ์ ์๋์ฅ ๊ณ์ฐ
- โข ์ด์ ๋ฌ๊ณผ ํ์ฐ ๋ฐฉ์ ์
๊ฒฝ์ ํ๊ณผ ๊ธ์ต๊ณตํ
๋ฏธ๋ถ์ ๊ฒฝ์ ํ์์ ํ๊ณํจ์ฉ, ํ๊ณ๋น์ฉ, ํ๋ ฅ์ฑ ๋ฑ์ ๊ณ์ฐํ๋ ๋ฐ ํ์์ ์ ๋๋ค. ๊ธ์ต๊ณตํ์์๋ ์ต์ ๊ฐ๊ฒฉ ๊ฒฐ์ ๋ชจ๋ธ(๋ธ๋-์์ฆ ๋ชจ๋ธ)์ ํต์ฌ ๋๊ตฌ๋ก ์ฌ์ฉ๋ฉ๋๋ค.
ํ๊ณ๋ถ์
๋น์ฉ๊ณผ ์์ต์ ๋ณํ์จ ๋ถ์
์ต์ ํ
์ด์ค ๊ทน๋ํ, ๋น์ฉ ์ต์ํ
๋ฆฌ์คํฌ ๊ด๋ฆฌ
ํฌํธํด๋ฆฌ์ค ๋ฏผ๊ฐ๋ ๋ถ์
ํ์ต ๊ฐ์ด๋์ ํ
์ด๋ณด์๋ฅผ ์ํ ํ์ต ์์
- 1. ๊ทนํ์ ๊ฐ๋ ๊ณผ ์ฐ์์ฑ ์ดํด
- 2. ๊ธฐ๋ณธ ๋ฏธ๋ถ ๊ณต์ ์๊ธฐ (๊ฑฐ๋ญ์ ๊ณฑ, ์ง์, ๋ก๊ทธ, ์ผ๊ฐํจ์)
- 3. ์ฐ์๋ฒ์น๊ณผ ๊ณฑ์ ๋ฒ์น ์ฐ์ต
- 4. ์ค์ํ ๋ฌธ์ ์ ์ ์ฉํด๋ณด๊ธฐ
ํํ ์ค์
- โข ์ฐ์๋ฒ์น ์ ์ฉ ๋๋ฝ
- โข ์์ํญ ๋ฏธ๋ถ ์ 0์ด ๋๋ ๊ฒ ๋ง๊ฐ
- โข ๊ณฑ์ ๋ฒ์น๊ณผ ๋ชซ์ ๋ฒ์น ํผ๋
ํ์ต ๋๊ตฌ
- โข ๊ทธ๋ํ ๊ทธ๋ฆฌ๊ธฐ๋ก ์๊ฐ์ ์ดํด
- โข ๋ฌผ๋ฆฌ์ ์๋ฏธ ์ฐ๊ฒฐํ๊ธฐ
- โข ๋จ๊ณ๋ณ ๊ณ์ฐ ์ฐ์ต