
USC์์ ์ฒซ ๋ฒ์งธ๋ก ๋ค์ ๊ฐ์์ ์ฃผ์ ๋
Data Science์๋ค.
์์ ์ ๋ฃ๊ธฐ ์ ์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ์กฐ๊ธ ๋จ์ํ๊ฒ ์๊ฐํ๋ค.
๋ฐ์ดํฐ๋ฅผ ๋ชจ์๋ค.
โ
๋ถ์ํ๋ค.
โ
๊ทธ๋ํ๋ฅผ ๊ทธ๋ฆฐ๋ค.
๋์ถฉ ์ด๋ฐ ๋๋์ด์๋ค.
ํ์ง๋ง ๊ฐ์๋ฅผ ๋ฃ๊ณ ๋ณด๋
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ๋ ๊ธฐ์ ํ๋๋ฅผ ์๋ฏธํ์ง ์์๋ค.
ํต๊ณํ, ์ปดํจํฐ ๊ณผํ, ๋๋ฉ์ธ ์ง์์ด ํจ๊ป ๊ฒฐํฉ๋ ๋ถ์ผ์๊ณ ,
๋ฐ์ดํฐ๋ฅผ ์์งํ๋ ์๊ฐ๋ถํฐ ์ค์ ์์ฌ๊ฒฐ์ ์ ํ์ฉํ๋ ์๊ฐ๊น์ง์
์ ์ฒด ๊ณผ์ ์ ๋ค๋ฃจ๋ ๋ถ์ผ์ ๊ฐ๊น์ ๋ค.
์ด๋ฒ ๊ธ์์๋ USC์์ ๋ค์ ์ฒซ ๋ฒ์งธ ๊ฐ์๋ฅผ ๋ฐํ์ผ๋ก
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๊ฐ ๋ฌด์์ธ์ง ์ ๋ฆฌํด๋ณด๊ณ ์ ํ๋ค.
๊ฐ์ ์๋ฃ์์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ๋ค์๊ณผ ๊ฐ์ด ์ค๋ช ํ๋ค.
ํต๊ณํ, ๊ณผํ์ ์ปดํจํ , ๊ณผํ์ ๋ฐฉ๋ฒ๋ก , ์๊ณ ๋ฆฌ์ฆ๊ณผ ์์คํ ์ ์ด์ฉํด
์ ํยท๋น์ ํ ๋ฐ์ดํฐ๋ก๋ถํฐ ์ง์๊ณผ ์ธ์ฌ์ดํธ๋ฅผ ์ถ์ถํ๋ ํ๋ฌธ ๋ถ์ผ
๋ง์ด ์กฐ๊ธ ์ด๋ ต๋ค.
์กฐ๊ธ ์ฝ๊ฒ ํ์ด๋ณด๋ฉด ๋ค์๊ณผ ๊ฐ๋ค.
๋ค์ํ ํํ์ ๋ฐ์ดํฐ๋ฅผ ์์งํ๊ณ ,
ํ์ํ ํํ๋ก ์ ๋ฆฌํ๊ณ ,
ํต๊ณ์ ์๊ณ ๋ฆฌ์ฆ์ผ๋ก ๋ถ์ํ ๋ค,
ํ์ค์ ๋ฌธ์ ๋ฅผ ์ดํดํ๊ฑฐ๋ ํด๊ฒฐํ๋ ๋ฐ ์ฌ์ฉํ๋ ๊ฒ
์ด๋ผ๊ณ ๋ณผ ์ ์๋ค.
์ฌ๊ธฐ์ ์ค์ํ ์ ์
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๊ฐ ๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ๊ณ์ฐํ๋ ๋ถ์ผ๊ฐ ์๋๋ผ๋ ๊ฒ์ด๋ค.
๊ทธ ๋ฐ์ดํฐ๊ฐ ๋ฐ์ํ ๋ถ์ผ์ ๋ํ
๋๋ฉ์ธ ์ง์๋ ํจ๊ป ํ์ํ๋ค.
์๋ฅผ ๋ค์ด ์๋ฃ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ๋ค๊ณ ํด๋ณด์.
ํ์์ ๋์ด
ํ์
ํ๋น
๋ณต์ฉ ์ฝ๋ฌผ
์ง๋จ ๊ฒฐ๊ณผ
์ด๋ฐ ๋ฐ์ดํฐ๊ฐ ์๋ค๊ณ ํด์
์ปดํจํฐ์ ํต๊ณ๋ง ์๋ฉด ๋ชจ๋ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ์ ์๋ ๊ฒ์ ์๋๋ค.
๊ฐ ์์น๊ฐ ์๋ฃ์ ์ผ๋ก ์ด๋ค ์๋ฏธ๋ฅผ ๊ฐ์ง๋์ง ์ดํดํด์ผ ํ๊ณ ,
์ด๋ค ๊ด๊ณ๊ฐ ์ค์ ๋ก ์ค์ํ์ง ํ๋จํ ์ ์์ด์ผ ํ๋ค.
์ฆ, ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๋ค์ ์ธ ๋ถ์ผ๊ฐ ๋ง๋๋ ์ง์ ์ ์๋ค.
Computer Science / IT
Math / Statistics
Domain / Business Knowledge
๊ฐ์ ์๋ฃ์ ๋ฒค ๋ค์ด์ด๊ทธ๋จ์์๋
์ด ์ธ ์์ญ์ด ๊ฒน์น๋ ๋ถ๋ถ์ Data Science๋ก ํํํ๊ณ ์์๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ์ปดํจํฐ ๊ณผํ๊ณผ ๋ฐ์ ํ๊ฒ ์ฐ๊ฒฐ๋์ด ์์ง๋ง
์์ ํ ๊ฐ์ ๋ถ์ผ๋ ์๋๋ค.
์ปดํจํฐ ๊ณผํ์ ์ฃผ๋ก ๋ค์๊ณผ ๊ฐ์ ๋ฌธ์ ๋ฅผ ๋ค๋ฃฌ๋ค.
- ์ปดํจํฐ๋ ์ด๋ป๊ฒ ๋์ํ๋๊ฐ?
- ์ํํธ์จ์ด๋ฅผ ์ด๋ป๊ฒ ์ค๊ณํ ๊ฒ์ธ๊ฐ?
- ๋ฐ์ดํฐ๋ฅผ ์ด๋ป๊ฒ ํจ์จ์ ์ผ๋ก ์ ์ฅํ๊ณ ์ฒ๋ฆฌํ ๊ฒ์ธ๊ฐ?
- ์์คํ
์ ์ฑ๋ฅ๊ณผ ์์ ์ฑ์ ์ด๋ป๊ฒ ํ๋ณดํ ๊ฒ์ธ๊ฐ?
๋ฐ๋ฉด ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๋ค์ ์ง๋ฌธ์ ๋ ๊ฐ๊น๋ค.
- ์ด ๋ฐ์ดํฐ์๋ ์ด๋ค ํจํด์ด ์๋๊ฐ?
- ์ด ํ์์ด ์ ๋ฐ์ํ๋๊ฐ?
- ์์ผ๋ก ์ด๋ค ์ผ์ด ๋ฐ์ํ ๊ฒ์ธ๊ฐ?
- ์ด ๊ฒฐ๊ณผ๋ฅผ ์ด๋ค ์์ฌ๊ฒฐ์ ์ ํ์ฉํ ์ ์๋๊ฐ?
์ปดํจํฐ ๊ณผํ์ด ๊ณ์ฐ์ ๊ฐ๋ฅํ๊ฒ ํ๋ ๊ธฐ์ ๊ณผ ์์คํ
์ ๋ง๋ ๋ค๋ฉด,
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๊ทธ ์์คํ
์์ ๋ฐ์ดํฐ๋ฅผ ์ด์ฉํด
์๋ฏธ์ ์ธ์ฌ์ดํธ๋ฅผ ์ฐพ์๋ธ๋ค๊ณ ๋ณผ ์ ์๋ค.
๋ฌผ๋ก ํ์ค์์๋ ๋์ ์์ ํ ๋ถ๋ฆฌํ๊ธฐ ์ด๋ ต๋ค.
๋ฐ์ดํฐ๋ฅผ ์์งํ๋ ค๋ฉด ์๋ฒ๊ฐ ํ์ํ๊ณ ,
๋๊ท๋ชจ ๋ฐ์ดํฐ๋ฅผ ์ ์ฅํ๋ ค๋ฉด ๋ฐ์ดํฐ๋ฒ ์ด์ค๊ฐ ํ์ํ๋ฉฐ,
๋ถ์ ๊ฒฐ๊ณผ๋ฅผ ์๋น์ค์ ์ ์ฉํ๋ ค๋ฉด ์ํํธ์จ์ด ๊ฐ๋ฐ์ด ํ์ํ๋ค.
๊ฒฐ๊ตญ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
์ปดํจํฐ ๊ณผํ๊ณผ ํ๋ ฅํด์ผ ์ค์ ์๋น์ค๋ก ์ด์ด์ง ์ ์๋ค.
์์ ์ ๋ค์ผ๋ฉฐ ์ด๋ฐ ์๊ฐ์ด ๋ค์๋ค.
๋๋ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๊ฐ ๋๋ ค๋ ๊ฒ์ผ๊น?
์ง๊ธ๊น์ง ๋๋ ๋ฐฑ์๋ ๊ฐ๋ฐ์๋ฅผ ๋ชฉํ๋ก ๊ณต๋ถํด์๋ค.
์๋ฒ๋ฅผ ๋ง๋ค๊ณ ,
๋ฐ์ดํฐ๋ฒ ์ด์ค๋ฅผ ์ค๊ณํ๊ณ ,
API๋ฅผ ๊ตฌํํ๊ณ ,
์์คํ
์ด ์์ ์ ์ผ๋ก ๋์ํ๋๋ก ๋ง๋๋ ๊ฒ์ ๋ ๊ด์ฌ์ด ์์๋ค.
๊ทธ๋ ๋ค๋ฉด ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ
๋ด ์ง๋ก์ ์ ํ ๋ค๋ฅธ ๋ถ์ผ๋ผ๊ณ ์๊ฐํด์ผ ํ ๊น?
๋ด๊ฐ ๋ด๋ฆฐ ๊ฒฐ๋ก ์ ์๋๋ค.
๋์๊ฒ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
์๋ก์ด ์ง์
์ ์ ํํ๋ผ๋ ์๋ฏธ๋ผ๊ธฐ๋ณด๋ค
๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ๋ ํ์ฉํ ์ ์๋ ๊ฐ๋ ฅํ ๋๊ตฌ์ ๊ฐ๊น๋ค.
์๋ฅผ ๋ค์ด ๋ด๊ฐ ์๋๋งค๋งค ํ๋ก๊ทธ๋จ์ ๋ง๋ ๋ค๊ณ ํด๋ณด์.
๋ฐฑ์๋ ๊ฐ๋ฐ ๋ฅ๋ ฅ๋ง ์๋ค๋ฉด ๋ค์์ ๋ง๋ค ์ ์๋ค.
- ์ฆ๊ถ์ฌ API ์ฐ๊ฒฐ
- ์ฃผ๋ฌธ ์๋ฒ
- ๊ณ์ข ๋ฐ์ดํฐ ์ ์ฅ
- ์ค์๊ฐ ์์ธ WebSocket ์ฐ๊ฒฐ
- ์ฃผ๋ฌธ ๋ด์ญ ๊ด๋ฆฌ
ํ์ง๋ง ์ฌ๊ธฐ์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ํ์ฉํ๋ฉด
ํ ๋จ๊ณ ๋ ๋์๊ฐ ์ ์๋ค.
- ํน์ ์์ฅ ์ํฉ์์ ์ฃผ๋ฌธ ์คํจ์จ ๋ถ์
- ๊ฑฐ๋ ํจํด ๊ธฐ๋ฐ ์ด์ ์ฃผ๋ฌธ ํ์ง
- ์ฌ์ฉ์๋ณ ํฌ์ ์ฑํฅ ๋ถ์
- ์๊ณ์ด ๋ฐ์ดํฐ๋ฅผ ์ด์ฉํ ์ํ๋ ์์ธก
- ์ ๋ต๋ณ ์์ต๋ฅ ๋น๊ต
์ฆ, ๋ฐฑ์๋๊ฐ ์์คํ
์ ๋ง๋ ๋ค๋ฉด
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๊ทธ ์์คํ
์์ ๋ฐ์ํ๋ ๋ฐ์ดํฐ๋ฅผ ํตํด
๋ ๋์ ํ๋จ์ ํ ์ ์๋๋ก ๋์์ค๋ค.
๊ทธ๋์ ๋ ๊ฐ์ ๊ฐ๋ฐ์๋
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ํ๋์ ๋
๋ฆฝ๋ ์ง๋ก๋ก๋ง ๋ณผ ํ์๋ ์๋ค๊ณ ์๊ฐํ๋ค.
์์ ์ ๋๋ฉ์ธ์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ๊ฒฐํฉํ๋ ๊ฒ์ด ์ค์ํ๋ค.
๋ฐ์ดํฐ๋ฒ ์ด์ค ๊ณผ๋ชฉ์์๋ ๋ฐ์ดํฐ๋ฅผ
ํ์ค ์ธ๊ณ๋ฅผ ํํํ๋ ๊ฐ์ด๋ผ๊ณ ๋ฐฐ์ ๋ค.
์๋ฅผ ๋ค์ด ์นดํ ์ฃผ๋ฌธ ์์คํ ์ด ์๋ค๊ณ ํด๋ณด์.
์ฃผ๋ฌธ ๋ฒํธ: 1024
๋ฉ๋ด: ์์ด์ค ์๋ฉ๋ฆฌ์นด๋
ธ
๊ฐ๊ฒฉ: 3000
์ฃผ๋ฌธ ์๊ฐ: 08:42
๊ฒฐ์ ์๋จ: ์นด๋
์ด ๊ฐ๋ค์ ํ์ค์์ ๋ฐ์ํ ์ฃผ๋ฌธ์
์ปดํจํฐ๊ฐ ์ ์ฅํ ์ ์๋ ํํ๋ก ํํํ ๊ฒ์ด๋ค.
๋ฐ์ดํฐ๋ ์ซ์๋ง์ ์๋ฏธํ์ง ์๋๋ค.
- ์ซ์
- ๋ฌธ์์ด
- ์ด๋ฏธ์ง
- ์์
- ์์ฑ
- ๋ก๊ทธ
- ์์น
- ํด๋ฆญ ๊ธฐ๋ก
- ๊ฒฐ์ ๊ธฐ๋ก
ํ์ค์์ ๊ด์ฐฐํ๊ณ ํํํ ์ ์๋ ๊ฒ์ด๋ผ๋ฉด
๋๋ถ๋ถ ๋ฐ์ดํฐ๊ฐ ๋ ์ ์๋ค.
์ด๋ฐ ๋ฐ์ดํฐ๋ ํ์ค ์ธ๊ณ๋ฅผ ์ดํดํ๋ ๋ฐ ๋์์ ์ค๋ค.
์ฌ๋์ ๊ธฐ์ต์ด๋ ๊ฐ๊ฐ๋ง์ผ๋ก๋
์๋ฐฑ๋ง ๋ช
์ ํ๋์ ๋์์ ์ดํดํ ์ ์๋ค.
ํ์ง๋ง ๋ฐ์ดํฐ๋ฅผ ์์งํ๋ฉด
์๋ง์ ์ฌ๋์ ํ๋์ ํ๋์ ํจํด์ผ๋ก ๋ฐ๋ผ๋ณผ ์ ์๋ค.
๊ฐ์์์๋ ๋ฐ์ดํฐ๊ฐ ์งํ๋ก ๋ฐ์ ํ๋ ๊ณผ์ ์
๋ค ๋จ๊ณ๋ก ์ค๋ช
ํ๋ค.
Data
โ
Information
โ
Knowledge
โ
Wisdom
์ด๋ฅผ DIKW ๊ตฌ์กฐ๋ผ๊ณ ๋ณผ ์ ์๋ค.
Data๋ ์์ง ํด์๋์ง ์์ ๊ฐ์ด๋ค.
08:00
3500
์๋ฉ๋ฆฌ์นด๋
ธ
์์ธ
์ด ๊ฐ๋ค๋ง ๋ณด๋ฉด
๊ฐ๊ฐ ๋ฌด์์ ์๋ฏธํ๋์ง ๋ช
ํํ์ง ์๋ค.
์ฆ, Data๋ ์ฌ์ค์ด๋ ํ์์ ํํํ๋
๊ฐ๊ณต๋์ง ์์ ๊ธฐํธ์ ๊ฐ์ ๊ฐ๊น๋ค.
Information์ ๋ฐ์ดํฐ๋ฅผ ์ ๋ฆฌํ๊ณ ํด์ํ์ฌ
์๋ฏธ๋ฅผ ๋ถ์ฌํ ๊ฒ์ด๋ค.
์ค๋ ์ค์ 8์์
์์ธ์ ํ ๋งค์ฅ์์
3500์์ง๋ฆฌ ์๋ฉ๋ฆฌ์นด๋
ธ๊ฐ ํ๋งค๋์๋ค.
์ด์ ๊ฐ๊ฐ์ ๊ฐ์ด ์ฐ๊ฒฐ๋๋ฉด์
๋๊ฐ, ๋ฌด์์, ์ด๋์, ์ธ์ ํ๋์ง ์ ์ ์๊ฒ ๋์๋ค.
์ฆ,
Data + Context = Information
์ด๋ผ๊ณ ๋ณผ ์ ์๋ค.
Knowledge๋ ์ฌ๋ฌ ์ ๋ณด ์ฌ์ด์ ๊ด๊ณ์ ํจํด์ ์ดํดํ ๊ฒ์ด๋ค.
์๋ฅผ ๋ค์ด ํ ๋ฌ ๋์์ ์ฃผ๋ฌธ ์ ๋ณด๋ฅผ ๋ถ์ํ๋๋
๋ค์๊ณผ ๊ฐ์ ํจํด์ ๋ฐ๊ฒฌํ๋ค๊ณ ํด๋ณด์.
ํ์ผ ์ค์ 8์๋ถํฐ 9์ ์ฌ์ด์๋
์๋ฉ๋ฆฌ์นด๋
ธ ํ๋งค๋์ด ํฌ๊ฒ ์ฆ๊ฐํ๋ค.
๋จ์ํ ์ฃผ๋ฌธ์ด ๋ฐ์ํ๋ค๋ ์ฌ์ค์ ๋์ด์
์๊ฐ๊ณผ ํ๋งค๋ ์ฌ์ด์ ๊ด๊ณ๋ฅผ ํ์
ํ ๊ฒ์ด๋ค.
Wisdom์ ๋ฐ๊ฒฌํ ์ง์์
์ฌ๋ฐ๋ฅธ ์์ฌ๊ฒฐ์ ๊ณผ ํ๋์ ํ์ฉํ๋ ๊ฒ์ด๋ค.
์์ ํจํด์ ๋ฐํ์ผ๋ก ๋ค์๊ณผ ๊ฐ์ด ๊ฒฐ์ ํ ์ ์๋ค.
ํ์ผ ์ค์ 8์ ์ด์ ์
์๋ฉ๋ฆฌ์นด๋
ธ ์๋์ ์ปต์ ๋ฏธ๋ฆฌ ์ค๋นํ๋ค.
ํด๋น ์๊ฐ๋์๋
์ถ๊ฐ ์ง์์ ๋ฐฐ์นํ๋ค.
์ด์ ๋ฐ์ดํฐ๊ฐ ์ค์ ํ๋์ผ๋ก ์ฐ๊ฒฐ๋์๋ค.
์ ๋ฆฌํ๋ฉด ๋ค์๊ณผ ๊ฐ๋ค.
Data
โ ๊ฐ๊ณต๋์ง ์์ ๊ฐ
Information
โ ์๋ฏธ๊ฐ ๋ถ์ฌ๋ ๋ฐ์ดํฐ
Knowledge
โ ์ ๋ณด ์ฌ์ด์ ๊ด๊ณ์ ํจํด
Wisdom
โ ์ง์์ ์ด์ฉํ ์ ์ ํ ํ๋จ๊ณผ ํ๋
๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ๋ง์ด ๋ชจ์ผ๋ ๊ฒ๋ง์ผ๋ก๋ ๋ถ์กฑํ๋ค.
๊ฒฐ๊ตญ ๋ฐ์ดํฐ์์ ์๋ฏธ๋ฅผ ์ฐพ์๋ด๊ณ ,
๊ทธ ์๋ฏธ๋ฅผ ์์ฌ๊ฒฐ์ ์ ํ์ฉํด์ผ ๊ฐ์น๊ฐ ์๊ธด๋ค.
์ฒ์์๋ Big Data์ Data Science๋ฅผ
๋น์ทํ ๊ฐ๋
์ด๋ผ๊ณ ์๊ฐํ๊ธฐ ์ฝ๋ค.
ํ์ง๋ง ๊ฐ์์์๋ ๋์ ๊ตฌ๋ถํ๋ค.
๊ฐ์ ์๋ฃ์ ๋น์ ๊ฐ ๊ต์ฅํ ์ง๊ด์ ์ด์๋ค.
Big Data = ์์
Data Science = ์์ ๋ฅผ ์ ์ ํ๋ ๊ณผ์
Big Data๋ ๋๋์ ๋ฐ์ดํฐ๋ฅผ
์์งํ๊ณ , ์ ์กํ๊ณ , ์ ์ฅํ๋ ๊ฒ์ ๊ฐ๊น๋ค.
- ๋ฐ์ดํฐ ์์ง
- ๋๊ท๋ชจ ์ ์ฅ
- ๋ถ์ฐ ์ฒ๋ฆฌ
- ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ
๋ฐ๋ฉด Data Science๋
๊ทธ ๋ฐ์ดํฐ๋ฅผ ์ด์ฉํด ์ ์ฉํ ๊ฒฐ๊ณผ๋ฅผ ๋ง๋๋ ๊ณผ์ ์ด๋ค.
- ํจํด ๋ฐ๊ฒฌ
- ๋ถ์
- ์์ธก
- ์๊ฐํ
- ์์ฌ๊ฒฐ์
์์ ๋ฅผ ๋ง์ด ๊ฐ์ง๊ณ ์๋ค๊ณ ํด์
๊ณง๋ฐ๋ก ์๋์ฐจ๋ฅผ ์์ง์ผ ์ ์๋ ๊ฒ์ ์๋๋ค.
์ ์ ๊ณผ์ ์ ๊ฑฐ์ณ์ผ ์ฐ๋ฃ๋ก ์ฌ์ฉํ ์ ์๋ค.
๋ฐ์ดํฐ๋ ๋ง์ฐฌ๊ฐ์ง๋ค.
๋ฐ์ดํฐ๋ฅผ ๋ง์ด ๋ณด์ ํ๋ ๊ฒ๊ณผ
๋ฐ์ดํฐ๋ฅผ ์ ํ์ฉํ๋ ๊ฒ์ ๋ค๋ฅธ ๋ฌธ์ ๋ค.
ํฐ ๋ฐ์ดํฐ๋ ๋ ๋ง์ ํ์์ ํํํ ๊ฐ๋ฅ์ฑ์ด ์๋ค.
์์ ๋ฐ์ดํฐ์์๋ ๋ฐ๊ฒฌํ ์ ์๋ ํจํด์
ํฐ ๋ฐ์ดํฐ์์๋ ๋ฐ๊ฒฌํ ์ ์๋ค.
์๋ฅผ ๋ค์ด ๊ณ ๊ฐ์ด 10๋ช
๋ฟ์ด๋ผ๋ฉด
๋ค์ํ ์ฐ๋ น๊ณผ ์ง์
, ์๋น ํจํด์ ์ถฉ๋ถํ ํํํ๊ธฐ ์ด๋ ต๋ค.
ํ์ง๋ง ๊ณ ๊ฐ์ด 100๋ง ๋ช
์ด๋ผ๋ฉด
๋ ๋ค์ํ ํ๋๊ณผ ์์ธ ์ํฉ์ ๊ด์ฐฐํ ์ ์๋ค.
์ด๋ฐ ์๋ฏธ์์ ๋ฐ์ดํฐ๊ฐ ๋ง์์ง์๋ก
ํํํ ์ ์๋ ํ์ค์ ๋ฒ์๋ ๋์ด์ง๋ค.
ํ์ง๋ง ๋ฐ์ดํฐ๊ฐ ๋ง๋ค๊ณ
๋ฌด์กฐ๊ฑด ์ข์ ๊ฒฐ๊ณผ๋ฅผ ์ป๋ ๊ฒ์ ์๋๋ค.
์๋ชป๋ ๋ฐ์ดํฐ 100๋ง ๊ฐ
๋ณด๋ค
๋ฌธ์ ์ ๊ด๋ จ๋ ์ ํํ ๋ฐ์ดํฐ 1๋ง ๊ฐ
๊ฐ ๋ ์ ์ฉํ ์๋ ์๋ค.
๋ฐ์ดํฐ์ ์๋ฟ ์๋๋ผ ๋ค์ ์์๋ ์ค์ํ๋ค.
- ์ ํ์ฑ
- ์์ ์ฑ
- ์ผ๊ด์ฑ
- ์ต์ ์ฑ
- ๋ฌธ์ ์์ ๊ด๋ จ์ฑ
- ํธํฅ ์ฌ๋ถ
์ฆ, ๋ฐ์ดํฐ์ ํฌ๊ธฐ์ ํจ๊ป
๋ฐ์ดํฐ์ ํ์ง์ ํ๊ฐํด์ผ ํ๋ค.
๋ฐ์ดํฐ๋ฅผ ๋ง์ด ๋ชจ์๋ค๊ณ ํด์
์๋์ผ๋ก ์ข์ ๋ถ์ ๊ฒฐ๊ณผ๊ฐ ๋์ค๋ ๊ฒ์ ์๋๋ค.
์๋ฅผ ๋ค์ด ์๋๋งค๋งค ํ๋ก๊ทธ๋จ์
๋ค์๊ณผ ๊ฐ์ ๋ฐ์ดํฐ๊ฐ ์๋ค๊ณ ํด๋ณด์.
์ฃผ๊ฐ
๊ฑฐ๋๋
์ฒด๊ฒฐ ์๊ฐ
๋งค์ยท๋งค๋ ๊ตฌ๋ถ
์ด ๊ฐ์ ๊ทธ๋๋ก ๋ชจ๋ธ์ ๋ฃ์ ์๋ ์๋ค.
ํ์ง๋ง ์๋ก์ด Feature๋ฅผ ๋ง๋ค๋ฉด
๋ ์๋ฏธ ์๋ ํจํด์ ๋ฐ๊ฒฌํ ์ ์๋ค.
- ์ต๊ทผ 5๋ถ ํ๊ท ๊ฑฐ๋๋
- ์ง์ ๊ฐ๊ฒฉ ๋๋น ์์น๋ฅ
- ๋งค์ยท๋งค๋ ๋น์จ
- ๋ณ๋์ฑ
- ์ฅ ์์ ์ดํ ๊ฒฝ๊ณผ ์๊ฐ
์ด์ฒ๋ผ ๊ธฐ์กด ๋ฐ์ดํฐ๋ก๋ถํฐ
๋ฌธ์ ํด๊ฒฐ์ ๋ ์ ์ฉํ ๊ฐ์ ๋ง๋๋ ๊ณผ์ ์
Feature Engineering์ด๋ผ๊ณ ํ๋ค.
๊ฒฐ๊ตญ ์ค์ํ ๊ฒ์
๋ฐ์ดํฐ์ ๊ฐ์๊ฐ ์๋๋ผ
๋ฌธ์ ๋ฅผ ํํํ ์ ์๋ ์ข์ Feature๋ฅผ ๋ง๋๋ ๊ฒ์ด๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค์ AI๋ ๋ฐ์ ํ๊ฒ ์ฐ๊ฒฐ๋์ด ์์ง๋ง
์์ ํ ๊ฐ์ ๊ฐ๋
์ ์๋๋ค.
๊ฐ์ ์๋ฃ์์๋ ๋์ ๊ด๊ณ๋ฅผ ๋ค์๊ณผ ๊ฐ์ด ํํํ๋ค.
Data Science
โ Insight๋ฅผ ๋ง๋ ๋ค.
Machine Learning
โ Prediction์ ๋ง๋ ๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ๋ฐ์ดํฐ๋ฅผ ํตํด
ํ์์ ์ดํดํ๊ณ ์ธ์ฌ์ดํธ๋ฅผ ๋ฐ๊ฒฌํ๋ ๋์ ๊ณผ์ ์ด๋ค.
๋จธ์ ๋ฌ๋์ ๊ทธ ๊ณผ์ ์์ ์ฌ์ฉํ ์ ์๋
ํ๋์ ๋ฐฉ๋ฒ์ด๋ผ๊ณ ๋ณผ ์ ์๋ค.
์๋ฅผ ๋ค์ด ๊ณ ๊ฐ ์ดํ ๋ฌธ์ ๋ฅผ ์๊ฐํด๋ณด์.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค์ ๊ด์ ์์๋ ๋ค์์ ๋ถ์ํ ์ ์๋ค.
- ์ด๋ค ๊ณ ๊ฐ์ด ์ฃผ๋ก ์ดํํ๋๊ฐ?
- ์ดํ์ ์ด๋ ์์ ์ ์ฆ๊ฐํ๋๊ฐ?
- ๊ฐ๊ฒฉ ์ ์ฑ
๊ณผ ์ดํ๋ฅ ์ ์ด๋ค ๊ด๊ณ๊ฐ ์๋๊ฐ?
๋จธ์ ๋ฌ๋์ ์ฌ์ฉํ๋ฉด ๋ค์ ์ง๋ฌธ์ ํ ์ ์๋ค.
- ์ด ๊ณ ๊ฐ์ด ๋ค์ ๋ฌ์ ์ดํํ ๊ฒ์ธ๊ฐ?
์ฆ, AI์ ๋จธ์ ๋ฌ๋์
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค ์์์ ์์ธก๊ณผ ์๋ํ๋ฅผ ๋ด๋นํ๋
์ค์ํ ๋๊ตฌ๋ผ๊ณ ๋ณผ ์ ์๋ค.
๊ทธ๋ฆฌ๊ณ AI ๋ชจ๋ธ์ ์ฑ๋ฅ ์ญ์
๊ฒฐ๊ตญ ๋ฐ์ดํฐ์ ํ์ง๊ณผ ์์ ํฌ๊ฒ ์์กดํ๋ค.
์๋ฌด๋ฆฌ ์ข์ ์๊ณ ๋ฆฌ์ฆ์ ์ฌ์ฉํด๋
ํ์ตํ ๋ฐ์ดํฐ๊ฐ ๋ถ์กฑํ๊ฑฐ๋ ์๋ชป๋์ด ์๋ค๋ฉด
์ข์ ๊ฒฐ๊ณผ๋ฅผ ๋ด๊ธฐ ์ด๋ ต๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๊ฐ ๊ฐ์๊ธฐ ์๊ธด ๋ถ์ผ๋ ์๋๋ค.
ํ์ง๋ง ์ต๊ทผ ์ค์์ฑ์ด ํฌ๊ฒ ๋์์ง ์ด์ ๋
๋ ๊ฐ์ง๋ผ๊ณ ๋ณผ ์ ์๋ค.
1. ๋ฐ์ดํฐ๋ฅผ ์์งํ ์ ์๋ ํ๊ฒฝ์ด ์ข์์ก๋ค.
2. ๋ฐ์ดํฐ๋ฅผ ์ฒ๋ฆฌํ ์ ์๋ ์ปดํจํ
ํ์๊ฐ ์ฆ๊ฐํ๋ค.
๊ณผ๊ฑฐ์๋ ๋ฐ์ดํฐ๋ฅผ ์์งํ๋ ๊ฒ ์์ฒด๊ฐ ์ด๋ ค์ ๋ค.
์ง๊ธ์ ๊ฑฐ์ ๋ชจ๋ ์๋น์ค๊ฐ
์ฌ์ฉ์์ ํ๋์ ๋์งํธ ํํ๋ก ๊ธฐ๋กํ ์ ์๋ค.
- ํ์ด์ง ๋ฐฉ๋ฌธ
- ๋ฒํผ ํด๋ฆญ
- ๊ฒ์ ๊ธฐ๋ก
- ๊ตฌ๋งค ๊ธฐ๋ก
- ์์ ์์ฒญ ์๊ฐ
- ์คํฌ๋กค ์์น
- ์ฑ ์ฒด๋ฅ ์๊ฐ
ํด๋ผ์ฐ๋ ํ๊ฒฝ๋ ๋ฐ์ ํ๋ฉด์
์๋ฒ์ ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ฅผ ์ง์ ๊ตฌ์ถํ์ง ์์๋
ํ์ํ ๋งํผ ์์์ ์ฌ์ฉํ ์ ์๊ฒ ๋์๋ค.
๊ฐ์์์๋ AWS SageMaker, GCP Vertex AI, Databricks ๊ฐ์
Cloud-native Platform์ ํ์ฉ๋ ์ค์ํด์ง๊ณ ์๋ค๊ณ ์ค๋ช
ํ๋ค.
์ฆ, ๋ฐ์ดํฐ ์์ง๊ณผ ์ ์ฅ, ๋ถ์์ ํ์ํ ๋น์ฉ์ด ๋ฎ์์ง๋ฉด์
๋ ๋ง์ ์กฐ์ง์ด ๋ฐ์ดํฐ๋ฅผ ํ์ฉํ ์ ์๊ฒ ๋์๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค์ ํ์ฉ ์ฌ๋ก๋ฅผ ๋ ์ฌ๋ฆฌ๋ฉด
Amazon๊ณผ Netflix๋ฅผ ์๊ฐํ ์ ์๋ค.
Amazon์ ๋จ์ํ
์ฌ์ฉ์๊ฐ ๋ฌด์์ ๊ตฌ๋งคํ๋์ง๋ง ๋ณด๋ ๊ฒ์ด ์๋๋ค.
- ์ด๋ค ์ํ ํ์ด์ง๋ฅผ ๋ฐฉ๋ฌธํ๋๊ฐ?
- ๋ช ์ด ๋์ ๋จธ๋ฌผ๋ ๋๊ฐ?
- ์ฅ๋ฐ๊ตฌ๋์ ๋ฃ์๋ค๊ฐ ์ ๊ฑฐํ๋๊ฐ?
- ์ด๋ค ์ํ๊ณผ ๋น๊ตํ๋๊ฐ?
- ์ด๋ ์์๋ก ํ์ด์ง๋ฅผ ์ด๋ํ๋๊ฐ?
์ด๋ฐ ํ๋์ ์ข
ํฉํด
์ํ ์ถ์ฒ๊ณผ ๋ง์ผํ
, ์ฌ๊ณ ๊ด๋ฆฌ์ ํ์ฉํ ์ ์๋ค.
Netflix๋ ๋ง์ฐฌ๊ฐ์ง๋ค.
- ์ด๋ค ์ฝํ
์ธ ๋ฅผ ํด๋ฆญํ๋๊ฐ?
- ๋ช ๋ถ๊น์ง ์์ฒญํ๋๊ฐ?
- ์ค๊ฐ์ ์ดํํ๋๊ฐ?
- ๋ค์ ์์ฒญํ๋๊ฐ?
- ์ด๋ค ์ธ๋ค์ผ์ ๋ ๋ฐ์ํ๋๊ฐ?
์ด๋ฐ ๋ฐ์ดํฐ๋
๋จ์ ์ถ์ฒ์ ๋์ด ์ฝํ
์ธ ์ ์๊ณผ ํฌ์ ๊ฒฐ์ ์๋ ํ์ฉ๋ ์ ์๋ค.
๊ฐ์ ์๋ฃ์์๋ ๊ธ์ต, ์ ํต, ์ ์์๊ฑฐ๋, ํฌ์ค์ผ์ด, ์๋์ง, ๊ฒ์ ๋ฑ
๋ค์ํ ๋ถ์ผ์์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๊ฐ ์ฌ์ฉ๋๋ค๊ณ ์ค๋ช
ํ๋ค.
๋ฐ์ดํฐ๋ ๋จ์ํ ๋ถ์ ๋ณด๊ณ ์๋ฅผ ๋ง๋ค๊ธฐ ์ํ ๊ฒ์ด ์๋๋ค.
์ ํ
์๋น์ค
๋ง์ผํ
์ด์
๊ณต๊ธ๋ง
์ํ ๊ด๋ฆฌ
์ ์ฒด ๋น์ฆ๋์ค ๊ณผ์ ์ ํ์ฉ๋ ์ ์๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
๋ชจ๋ธ์ ํ ๋ฒ ํ์ตํ๊ณ ๋๋๋ ์์
์ด ์๋๋ค.
๊ฐ์ ์๋ฃ์์๋ ๋ฐ์ดํฐ์ ์ ์ฒด ์๋ช
์ฃผ๊ธฐ๋ฅผ
๋ค์๊ณผ ๊ฐ์ด ์ค๋ช
ํ๋ค.
Plan
โ
Acquire
โ
Process
โ
Analyze
โ
Preserve
โ
Publish / Share
์ด๋ค ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ์ง ๊ณํํ๋ค.
๋ฌด์์ ์๊ณ ์ถ์๊ฐ?
์ด๋ค ๋ฐ์ดํฐ๊ฐ ํ์ํ๊ฐ?
๊ฒฐ๊ณผ๋ฅผ ์ด๋์ ์ฌ์ฉํ ๊ฒ์ธ๊ฐ?
๋ชฉํ๊ฐ ๋ช
ํํ์ง ์์ผ๋ฉด
ํ์ ์๋ ๋ฐ์ดํฐ๋ง ๋ง์ด ์์งํ ์ ์๋ค.
ํ์ํ ๋ฐ์ดํฐ๋ฅผ ์์งํ๋ค.
- ์๋น์ค ๋ก๊ทธ
- ๋ฐ์ดํฐ๋ฒ ์ด์ค
- ์ธ๋ถ API
- ์ผ์
- ์ค๋ฌธ์กฐ์ฌ
- ๊ณต๊ฐ ๋ฐ์ดํฐ
์ด ๊ณผ์ ์์ ๋ฐ์ดํฐ์ ์ถ์ฒ์
์์ง ๋ฐฉ๋ฒ๋ ํจ๊ป ๊ธฐ๋กํด์ผ ํ๋ค.
์์งํ ๋ฐ์ดํฐ๋ฅผ ์ฌ์ฉํ ์ ์๋๋ก ์ ๋ฆฌํ๋ค.
- ๊ฒฐ์ธก์น ์ฒ๋ฆฌ
- ์ค๋ณต ์ ๊ฑฐ
- ํ์ ํต์ผ
- ์ด์์น ํ์ธ
- ๋ฐ์ดํฐ ๊ฒฐํฉ
- Feature ์์ฑ
์ค์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค ํ๋ก์ ํธ์์
๋ง์ ์๊ฐ์ด ์์๋๋ ๋จ๊ณ๋ค.
์ ๋ฆฌํ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ๋ค.
- ํต๊ณ ๋ถ์
- ์๊ฐํ
- ๊ณต๊ฐ ๋ถ์
- ์ด๋ฏธ์ง ๋ถ์
- ๋จธ์ ๋ฌ๋ ๋ชจ๋ธ๋ง
- ๊ฒฐ๊ณผ ํด์
๋จ์ํ ๋ชจ๋ธ ์ ์๋ฅผ ๋์ด๋ ๊ฒ๋ฟ ์๋๋ผ
๊ทธ ๊ฒฐ๊ณผ๊ฐ ๋ฌด์์ ์๋ฏธํ๋์ง๋ ์ดํดํด์ผ ํ๋ค.
๋ฐ์ดํฐ์ ๋ถ์ ๊ฒฐ๊ณผ๋ฅผ ์์ ํ๊ฒ ๋ณด์กดํ๋ค.
- ๋ฐฑ์
- ์ ๊ทผ ๊ถํ ๊ด๋ฆฌ
- ๋ฐ์ดํฐ ํ์ง ๊ธฐ๋ก
- ๋ฉํ๋ฐ์ดํฐ ๊ด๋ฆฌ
- ๋ฒ์ ๊ด๋ฆฌ
๋ฐ์ดํฐ๊ฐ ์ ์ค๋๊ฑฐ๋ ๋ณ์กฐ๋๋ฉด
๋ถ์ ๊ฒฐ๊ณผ๋ ์ ๋ขฐํ ์ ์๊ฒ ๋๋ค.
๋ง์ง๋ง์ผ๋ก ๋ถ์ ๊ฒฐ๊ณผ๋ฅผ ๊ณต์ ํ๋ค.
- ๋ณด๊ณ ์
- ๋์๋ณด๋
- API
- ์๋น์ค ๊ธฐ๋ฅ
- ๋
ผ๋ฌธ
- ๋ฐ์ดํฐ์
์ข์ ๋ถ์๋ ๋ค๋ฅธ ์ฌ๋์ด ์ดํดํ๊ฑฐ๋ ํ์ฉํ์ง ๋ชปํ๋ฉด
๊ฐ์น๋ฅผ ๋ง๋ค๊ธฐ ์ด๋ ต๋ค.
๊ฐ์ ์๋ฃ์์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๋ฅผ
๋จ์ํ ๋ชจ๋ธ์ ๋ง๋๋ ์ฌ๋์ผ๋ก ์ค๋ช
ํ์ง ์์๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๋ ๋ค์๊ณผ ๊ฐ์ ์ญํ ์ ์ํํ๋ค.
- ๋ฌธ์ ์ ํต์ฌ ์ง๋ฌธ ๋ฐ๊ฒฌ
- ๋ฐ์ดํฐ ์์ง๊ณผ ํ์ง ๊ฒ์ฆ
- ๋ถ์ ๊ฐ์ค ์ค์
- ํต๊ณ์ ๊ฒ์ฆ
- ๋ชจ๋ธ๋ง
- ๊ฒฐ๊ณผ ํด์
- ์์ฌ๊ฒฐ์ ์์์ ์ปค๋ฎค๋์ผ์ด์
ํนํ ๊ธฐ์ต์ ๋จ์๋ ๋ด์ฉ์
๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ์๊ฒ ํ์ํ ๊ฐ์ฅ ์ค์ํ ํ๋๊ฐ
Curiosity, ์ฆ ํธ๊ธฐ์ฌ์ด๋ผ๋ ์ ์ด์๋ค.
๋จ์ํ ์ฃผ์ด์ง ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ๋ ๋ฐ์ ๋๋์ง ์๊ณ
๋ค์ ์ง๋ฌธ์ ๊ณ์ ๋์ ธ์ผ ํ๋ค.
์ ์ด๋ฐ ๊ฒฐ๊ณผ๊ฐ ๋์์๊น?
์ด Feature๋ ์ ๋ง ํ์ํ๊ฐ?
๋ฐ์ดํฐ์ ํธํฅ์ ์์๊น?
๋ค๋ฅธ ์์ธ์ด ์จ์ด ์์ง๋ ์์๊น?
์ด ๊ฒฐ๊ณผ๋ฅผ ์ค์ ๋ก ์ฌ์ฉํ ์ ์์๊น?
๊ฐ์์์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ์
๊ฐ์ฅ ๊ธฐ๋ณธ์ ์ธ ๋ฅ๋ ฅ ์ค ํ๋๋ก ์ฝ๋ฉ์ ์ธ๊ธํ๋ค.
Python๊ณผ SQL์ ์ฌ์ ํ ์ค์ํ๋ค.
ํ์ง๋ง ์ต๊ทผ์๋ ๋ชจ๋ ์๊ณ ๋ฆฌ์ฆ์
์ฒ์๋ถํฐ ์ง์ ๊ตฌํํ๋ ๋ฅ๋ ฅ๋ง์ ์๊ตฌํ์ง๋ ์๋๋ค.
์ข์ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ ๋๊ตฌ๊ฐ ๋ง์์ก๊ธฐ ๋๋ฌธ์ด๋ค.
- Pandas
- NumPy
- scikit-learn
- PyTorch
- XGBoost
- AutoML
- AI Copilot
์ค์ํ ๊ฒ์ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ฅผ ์ฌ์ฉํ๋ ๊ฒ ์์ฒด๊ฐ ์๋๋ค.
์ด๋ค ๋ฌธ์ ์ ์ด๋ค ๋๊ตฌ๋ฅผ ์จ์ผ ํ๋์ง,
๊ทธ ๊ฒฐ๊ณผ๋ฅผ ๋ฏฟ์ด๋ ๋๋์ง,
์๋ชป๋ ๊ฒฐ๊ณผ๋ฅผ ๊ตฌ๋ถํ ์ ์๋์ง
ํ๋จํ ์ ์์ด์ผ ํ๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ์ ์ฝ๋ฉ์
๋จ์ํ ์ฝ๋๋ฅผ ๋ง์ด ์์ฑํ๋ ๊ฒ์ด ์๋๋ผ
์ ์ ํ ๋๊ตฌ๋ฅผ ์กฐํฉํด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๋ ๊ฒ์ ๊ฐ๊น๋ค.
๊ฐ์์์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ์๊ฒ ์๊ตฌ๋๋ ๋ฅ๋ ฅ์ด
๊ณผ๊ฑฐ์ ํ์ฌ ์ฌ์ด์์ ์ด๋ป๊ฒ ๋ฌ๋ผ์ก๋์ง๋ ์ค๋ช
ํ๋ค.
- Python, R, SQL ์ค์ฌ์ ๊ฐํ ๊ตฌํ ๋ฅ๋ ฅ
- ์๊ณ ๋ฆฌ์ฆ์ ์ง์ ๊ตฌํํ๋ ๋ฅ๋ ฅ
- Hadoop, Spark์ ๊ฐ์ ๋ถ์ฐ ์์คํ
์ง์
- ํต๊ณ์ ์ํ์ ๋ํ ๊น์ ์ด๋ก ์ ์ดํด
- ๋ฐ์ดํฐ ์์ง๋ถํฐ ๋ฐฐํฌ๊น์ง ํผ์ ์ํํ๋ ๋ฅ๋ ฅ
- AI ๋๊ตฌ์ AutoML ํ์ฉ
- ๋ชจ๋ธ ๊ฒฐ๊ณผ ๊ฒ์ฆ
- Prompt Engineering
- Cloud-native Platform ํ์ฉ
- ํจ์จ์ ์ธ Pipeline ์ค๊ณ
- ๋ฐ์ดํฐ ๊ฑฐ๋ฒ๋์ค์ ๊ฐ์ธ์ ๋ณด ๋ณดํธ
- ์ปค๋ฎค๋์ผ์ด์
๊ณผ ์คํ ๋ฆฌํ
๋ง
- ํน์ ์ฐ์
์ ๋ํ ๋๋ฉ์ธ ์ง์
AI๊ฐ ์ฝ๋ ์์ฑ๊ณผ ๋ฐ๋ณต ์์
์ ๋์์ฃผ๊ธฐ ์์ํ๋ฉด์
๋จ์ ๊ตฌํ ๋ฅ๋ ฅ๋ง์ผ๋ก ์ฐจ๋ณํํ๊ธฐ ์ด๋ ค์์ก๋ค.
๋์ ๋ค์ ๋ฅ๋ ฅ์ด ๋์ฑ ์ค์ํด์ก๋ค.
AI์ ๊ฒฐ๊ณผ๊ฐ ๋ง๋์ง ํ๋จํ๋ ๋ฅ๋ ฅ
๋ฐ์ดํฐ์ ํธํฅ๊ณผ ์ค๋ฅ๋ฅผ ์ฐพ๋ ๋ฅ๋ ฅ
ํ์ค์์ ๊ฒ์ฆ ๊ฐ๋ฅํ ์คํ์ ์ค๊ณํ๋ ๋ฅ๋ ฅ
๋ณต์กํ ๊ฒฐ๊ณผ๋ฅผ ๋น์ ๋ฌธ๊ฐ์๊ฒ ์ค๋ช
ํ๋ ๋ฅ๋ ฅ
๋ฐ์ดํฐ ๋ถ์ ๊ฒฐ๊ณผ๋
๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๋ง ์ดํดํด์๋ ์๋ฏธ๊ฐ ์๋ค.
๋น์ฆ๋์ค ๋ด๋น์๋ ์์ฌ๊ฒฐ์ ์๊ฐ
๋ถ์ ๊ฒฐ๊ณผ๋ฅผ ์ดํดํ๊ณ ํ๋ํ ์ ์์ด์ผ ํ๋ค.
์๋ฅผ ๋ค์ด ๋ค์์ฒ๋ผ ๋งํ๋ ๊ฒ๋ณด๋ค
๋ชจ๋ธ์ F1 Score๊ฐ 0.84์
๋๋ค.
๋ค์์ฒ๋ผ ์ค๋ช ํ๋ ๊ฒ์ด ๋ ์ค์ํ ์ ์๋ค.
ํ์ฌ ๋ชจ๋ธ์ ์ฌ์ฉํ๋ฉด
์ดํ ๊ฐ๋ฅ์ฑ์ด ๋์ ๊ณ ๊ฐ 100๋ช
์ค ์ฝ 84๋ช
์ ์ฐพ์๋ผ ์ ์์ต๋๋ค.
์ด ๊ณ ๊ฐ๋ค์๊ฒ ์ฌ์ ์ ํํ์ ์ ๊ณตํ๋ฉด
์์ ์ดํ๋ฅ ์ ์ค์ผ ๊ฐ๋ฅ์ฑ์ด ์์ต๋๋ค.
๊ฐ์ ๊ฒฐ๊ณผ๋ผ๋
ํ์ค์ ํ๋๊ณผ ์ฐ๊ฒฐํด ์ค๋ช
ํด์ผ ํ๋ค.
๊ทธ๋์ Data Storytelling์ด ์ค์ํด์ง๋ค.
๊ฐ์์์ ํนํ ๊ฐ์กฐ๋ ๋ถ๋ถ ์ค ํ๋๊ฐ
๋๋ฉ์ธ ์ง์์ด์๋ค.
AI๊ฐ ์ผ๋ฐ์ ์ธ ์ฝ๋ ์์ฑ๊ณผ ๋ถ์์ ๋์์ค์๋ก
์ฌ๋์ด ์ ๊ณตํด์ผ ํ๋ ์ฐจ๋ณ์ ์
๋ฌธ์ ๋ถ์ผ์ ๋ํ ๊น์ ์ดํด๊ฐ ๋๋ค.
๊ธ์ต
ํฌ์ค์ผ์ด
๊ธฐํ
๋ฌผ๋ฅ
์ ์กฐ
๊ด๊ณ
์ถ์ฒ ์์คํ
๊ฐ ๋ถ์ผ์์ ์ค์ํ ๋ฌธ์ ์ ๋ฐ์ดํฐ๋ ๋ค๋ฅด๋ค.
์ข์ ์ง๋ฌธ์ด ์ข์ ์ธ์ฌ์ดํธ๋ฅผ ๋ง๋ ๋ค.
๊ทธ๋ฆฌ๊ณ ์ข์ ์ง๋ฌธ์
๊ทธ ๋ถ์ผ๋ฅผ ์ดํดํ๋ ์ฌ๋๋ง ๋ง๋ค ์ ์๋ค.
Quality Questions determine Quality Insights.
๊ฒฐ๊ตญ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๋
์ํํธ์จ์ด ์์ง๋์ด์ ๋ง์ฐฌ๊ฐ์ง๋ก
๋๋ฉ์ธ ์ง์์ด ์ค์ํ๋ค.
๋ฐ์ดํฐ์ ์ํฅ๋ ฅ์ด ์ปค์ง๋ฉด์
์ค๋ฆฌ์ ๊ฐ์ธ์ ๋ณด ๋ณดํธ๋ ์ค์ํด์ก๋ค.
- ๋ฐ์ดํฐ๋ ์ ๋ฒํ๊ฒ ์์ง๋์๋๊ฐ?
- ํน์ ์ง๋จ์ ๋ถ๋ฆฌํ ํธํฅ์ ์๋๊ฐ?
- ๋ชจ๋ธ์ ํ๋จ์ ์ค๋ช
ํ ์ ์๋๊ฐ?
- ๋ฏผ๊ฐํ ๊ฐ์ธ์ ๋ณด๊ฐ ๋
ธ์ถ๋์ง๋ ์๋๊ฐ?
- ๋ฐ์ดํฐ์ ์ ๊ทผํ ๊ถํ์ ์ ์ ํ ๊ด๋ฆฌ๋๊ณ ์๋๊ฐ?
ํนํ ์๋ฃ์ ๊ธ์ต ๋ฐ์ดํฐ๋
์๋ชป ์ฌ์ฉ๋ ๊ฒฝ์ฐ ํฐ ํผํด๋ฅผ ๋ง๋ค ์ ์๋ค.
๋ฐ๋ผ์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
์ฑ๋ฅ๋ง ๋์ ๋ชจ๋ธ์ ๋ง๋๋ ๋ถ์ผ๊ฐ ์๋๋ค.
์ ํ์ฑ, ๊ณต์ ์ฑ, ๋ณด์, ๊ฐ์ธ์ ๋ณด ๋ณดํธ๋ฅผ
ํจ๊ป ๊ณ ๋ คํด์ผ ํ๋ค.
๊ฐ์ ์๋ฃ์์๋ ๋ฐ์ดํฐ๋ฅผ
๊ฐ์น๋ฅผ ๊ฐ์ง ์์ฐ์ผ๋ก ๋ฐ๋ผ๋ดค๋ค.
์ข์ ๋ฐ์ดํฐ ๊ด๋ฆฌ๋ ๋ค์์ ๊ฐ๋ฅํ๊ฒ ํ๋ค.
- ํ์ํ ๋ฐ์ดํฐ๋ฅผ ๋น ๋ฅด๊ฒ ์ฐพ๋๋ค.
- ์ฌ๋ฌ ์กฐ์ง์ด ๋ฐ์ดํฐ๋ฅผ ๊ณต์ ํ๋ค.
- ๊ธฐ์กด ๋ฐ์ดํฐ๋ฅผ ๋ค์ ์ฌ์ฉํ๋ค.
- ์ค๋ณต ์์ง์ ์ค์ธ๋ค.
- ์๊ฐ๊ณผ ๋น์ฉ์ ์ ๊ฐํ๋ค.
ํ์ง๋ง ๋ชจ๋ ๋ฐ์ดํฐ๋ฅผ ๋ฌด์กฐ๊ฑด ์ ์ฅํ๋ ๊ฒ์ด ์ข์ ๊ฒ์ ์๋๋ค.
๋ณด๊ด ๋น์ฉ์ด ๋ฐ์ํ๊ณ ,
๊ฐ์ธ์ ๋ณด ์ ์ถ ์ํ๋ ์ปค์ง๊ธฐ ๋๋ฌธ์ด๋ค.
๋ฐ๋ผ์ ๋ค์ ์ง๋ฌธ์ด ํ์ํ๋ค.
์ด ๋ฐ์ดํฐ๋ ์ ํ์ํ๊ฐ?
์ผ๋ง ๋์ ๋ณด๊ดํด์ผ ํ๋๊ฐ?
๋๊ฐ ์ ๊ทผํ ์ ์๋๊ฐ?
๋ค์ ์ฌ์ฉํ ๊ฐ๋ฅ์ฑ์ด ์๋๊ฐ?
์๋ชป๋ ๋ฐ์ดํฐ๋ ์ด๋ป๊ฒ ์์ ํ ๊ฒ์ธ๊ฐ?
๋ฐ์ดํฐ๋ฅผ ์์ฐ์ผ๋ก ๋ณธ๋ค๋ ๊ฒ์
๋ฌด์กฐ๊ฑด ๋ง์ด ๋ชจ์๋ค๋ ๋ป์ด ์๋๋ค.
๊ฐ์น ์๋ ๋ฐ์ดํฐ๋ฅผ
์ ๊ด๋ฆฌํ๊ณ ์์ ํ๊ฒ ํ์ฉํ๋ค๋ ๋ป์ ๊ฐ๊น๋ค.
๊ฐ์์์ ํ๋ก์ ํธ ์ฃผ์ ๋ฅผ ์ ํ ๋
์์ ์ด ์์ผ๋ก ๋์๊ฐ ์ง๋ก์ ๊ด๋ จ๋ ๋ถ์ผ๋ฅผ ์ ํํ๋ผ๋ ์ด์ผ๊ธฐ๊ฐ ์์๋ค.
์ด ๋ถ๋ถ์๋ ๋๋ ๊ณต๊ฐํ๋ค.
๋จ์ํ ์ ์๋ฅผ ๋ฐ๊ธฐ ์ํ ํ๋ก์ ํธ๋ณด๋ค
๋ด๊ฐ ์ค์ ๋ก ๊ด์ฌ ์๋ ๋ฌธ์ ๋ฅผ ๋ค๋ฃจ๋ ๊ฒ์ด ๋ ์๋ฏธ ์๋ค.
์๋ฅผ ๋ค์ด ๋ด๊ฐ ์งํํ๊ณ ์๋
์ฆ๊ถ์ฌ API ๊ธฐ๋ฐ ์๋๋งค๋งค ํ๋ก์ ํธ์
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ๊ฒฐํฉํ ์ ์๋ค.
- ์ฃผ๋ฌธ ์คํจ ๋ฐ์ดํฐ ๋ถ์
- ์์ฅ ์ํฉ๋ณ API ์๋ต ์ง์ฐ ๋ถ์
- ๊ฑฐ๋ ํจํด ์ด์ ํ์ง
- ์ข
๋ชฉ๋ณ ๋ณ๋์ฑ ๋ถ์
- ํฌ์ ์ ๋ต ์ฑ๋ฅ ๋น๊ต
์ด๋ ๊ฒ ํ๋ฉด ํ๋ก์ ํธ๋
๋จ์ํ ์๋ฒ ๊ตฌํ์์ ๋๋์ง ์๋๋ค.
Software Engineering
+
Financial Domain Knowledge
+
Data Science
๊ฐ ๊ฒฐํฉ๋ ํ๋ก์ ํธ๊ฐ ๋๋ค.
์ด๋ฒ USC ํ๋์์๋
๋จ์ํ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค ๊ธฐ์ ์ ๋ฐฐ์ฐ๋ ๊ฒ๋ณด๋ค
๋ด๊ฐ ์ด๋ค ๋ฌธ์ ์ ์ด ๊ธฐ์ ์ ์ฌ์ฉํ ์ง ๊ณ ๋ฏผํด๋ณด๋ ๊ฒ์ด ์ค์ํ ๊ฒ ๊ฐ๋ค.
์ฒ์์๋ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ
๋ฐ์ดํฐ ๋ถ์๊ฐ๊ฐ ์ฌ์ฉํ๋ ๊ธฐ์ ์ด๋ผ๊ณ ๋ง ์๊ฐํ๋ค.
ํ์ง๋ง ๊ฐ์๋ฅผ ๋ฃ๊ณ ๋ณด๋
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ ํน์ ์ง์
๋ง์ ์ํ ๊ธฐ์ ์ด ์๋์๋ค.
๋ฐ์ดํฐ๊ฐ ๋ฐ์ํ๋ ๋ชจ๋ ๋ถ์ผ์์
๋ฌธ์ ๋ฅผ ๋ ์ ํํ๊ฒ ์ดํดํ๊ณ
๋ ๋์ ๊ฒฐ์ ์ ๋ด๋ฆฌ๋ ๋ฐ ์ฌ์ฉํ ์ ์๋ ๋ฐฉ๋ฒ๋ก ์ด์๋ค.
๊ทธ๋ฆฌ๊ณ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ง์ผ๋ก
๋ชจ๋ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ์ ์๋ ๊ฒ๋ ์๋์๋ค.
๋ฐ์ดํฐ๋ฅผ ์์งํ๋ ์์คํ
๋ฐ์ดํฐ๋ฅผ ์ ์ฅํ๋ ๋ฐ์ดํฐ๋ฒ ์ด์ค
๋ถ์์ ์ํํ๋ ๋ชจ๋ธ
๊ฒฐ๊ณผ๋ฅผ ์ ๊ณตํ๋ ์๋น์ค
๋ฌธ์ ๋ฅผ ์ดํดํ๋ ๋๋ฉ์ธ ์ง์
์ด ๋ชจ๋ ์์๊ฐ ํจ๊ป ํ์ํ๋ค.
๊ทธ๋์ ๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
ํผ์ ์กด์ฌํ๋ ๋ถ์ผ๋ผ๊ธฐ๋ณด๋ค
์ฌ๋ฌ ๋ถ์ผ๋ฅผ ์ฐ๊ฒฐํ๋ ์์ญ์ ๊ฐ๊น๋ค๋ ์๊ฐ์ด ๋ค์๋ค.
๊ฒฐ๋ก ์ ๊ฐ๋จํ๋ค.
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋
๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ๋ถ์ํ๊ฑฐ๋ ๊ทธ๋ํ๋ฅผ ๊ทธ๋ฆฌ๋ ๋ถ์ผ๊ฐ ์๋๋ค.
๋ฐ์ดํฐ๋ฅผ ์์งํ๊ณ ,
์ ์ฅํ๊ณ ,
์ ๋ฆฌํ๊ณ ,
๋ถ์ํ๊ณ ,
์ง์์ผ๋ก ๋ณํํ๊ณ ,
ํ์ค์ ์์ฌ๊ฒฐ์ ์ ์ ์ฉํ๋ ์ ์ฒด ๊ณผ์
์ ๋ค๋ฃจ๋ ๋ถ์ผ๋ค.
๊ทธ๋ฆฌ๊ณ ์ด ๊ณผ์ ์๋ ๋ค์ ์์๊ฐ ํจ๊ป ํ์ํ๋ค.
Computer Science / IT
Math / Statistics
Domain / Business Knowledge
๋ฐ์ดํฐ๋ ํ์ค์ ํํํ๋ค.
ํ์ง๋ง ๋ฐ์ดํฐ ์์ฒด๋ง์ผ๋ก๋ ์๋ฌด๊ฒ๋ ๋งํด์ฃผ์ง ์๋๋ค.
๋ฐ์ดํฐ์ ์๋ฏธ๋ฅผ ๋ถ์ฌํ๋ฉด Information์ด ๋๊ณ ,
๊ด๊ณ๋ฅผ ์ดํดํ๋ฉด Knowledge๊ฐ ๋๋ฉฐ,
์ด๋ฅผ ์ฌ๋ฐ๋ฅธ ํ๋จ์ ์ฌ์ฉํ๋ฉด Wisdom์ด ๋๋ค.
๊ฒฐ๊ตญ ์ด๋ฒ ๊ฐ์์ ํต์ฌ์ ์ด๊ฒ์ด๋ผ๊ณ ์๊ฐํ๋ค.
๋ฐ์ดํฐ๋ฅผ ๋ง์ด ๋ชจ์ผ๋ ๊ฒ์ด ์ค์ํ ๊ฒ์ด ์๋๋ผ,
๊ทธ ๋ฐ์ดํฐ๋ก ์ด๋ค ์ง๋ฌธ์ ํ๊ณ ์ด๋ค ๊ฐ์น๋ฅผ ๋ง๋ค์ด๋ผ ๊ฒ์ธ๊ฐ๊ฐ ์ค์ํ๋ค.
๋ ์ญ์ ๋ฐฑ์๋ ๊ฐ๋ฐ์๋ก์
๋ฐ์ดํฐ ์ฌ์ด์ธ์ค๋ฅผ ๋ณ๊ฐ์ ๋ถ์ผ๋ก๋ง ๋ฐ๋ผ๋ณด๊ธฐ๋ณด๋ค
๋ด๊ฐ ๋ง๋๋ ์์คํ
์ ๋ ๋๋ํ๊ฒ ๋ง๋๋ ๋๊ตฌ๋ก ํ์ฉํด๋ณด๊ณ ์ ํ๋ค.