ADsP

ADsP ๐Ÿค– [์˜ˆ์‹œ๋ฌธ์ œ] (2026-08-15)

1. [์˜ˆ์‹œ๋ฌธ์ œ] ๋ฐ์ดํ„ฐ๊ฐ€ ๊ฐ€๊ณต๋˜๊ณ  ์˜๋ฏธ ์žˆ๋Š” ํ˜•ํƒœ๋กœ ์ „ํ™˜๋˜์–ด ํ™œ์šฉ๋˜๋Š” ๊ณผ์ •์„ ์„ค๋ช…ํ•˜๋Š” DIKW ํ”ผ๋ผ๋ฏธ๋“œ(DIKW Pyramid)์—์„œ, ๋‹จ์ˆœํ•œ ์‚ฌ์‹ค์ด๋‚˜ ๊ฐœ๋ณ„์ ์ธ ์ธก์ •๊ฐ’์„ ๋„˜์–ด์„œ ํŒจํ„ด๊ณผ ๊ด€๊ณ„๋ฅผ ํŒŒ์•…ํ•˜๊ณ  ๋งฅ๋ฝ์„ ๋ถ€์—ฌํ•˜์—ฌ ์–ปโ€ฆ

  1. ๋ฐ์ดํ„ฐ(Data)
  2. ์ •๋ณด(Information)
  3. ์ง€์‹(Knowledge)
  4. ์ง€ํ˜œ(Wisdom)

2. [์˜ˆ์‹œ๋ฌธ์ œ] ๋น…๋ฐ์ดํ„ฐ์˜ ์ฃผ์š” ํŠน์ง•์„ ๋‚˜ํƒ€๋‚ด๋Š” 3V๋Š” ์ผ๋ฐ˜์ ์œผ๋กœ ๋ฐ์ดํ„ฐ์˜ ํฌ๊ธฐ(Volume), ๋‹ค์–‘์„ฑ(Variety), ์†๋„(Velocity)๋ฅผ ์˜๋ฏธํ•œ๋‹ค. ์ด ์ค‘, ๋งค์šฐ ์งง์€ ์‹œ๊ฐ„ ์•ˆ์— ์ƒ์„ฑ๋˜๊ณ  ์†Œ๋น„๋˜๋Š” ์‹ค์‹œ๊ฐ„ ์ŠคํŠธโ€ฆ

  1. Volume (ํฌ๊ธฐ)
  2. Variety (๋‹ค์–‘์„ฑ)
  3. Velocity (์†๋„)
  4. Veracity (์ •ํ™•์„ฑ)

3. [์˜ˆ์‹œ๋ฌธ์ œ] ๋ฐ์ดํ„ฐ ๋ถ„์„ ๊ณผ์ œ๋ฅผ ๋ฐœ๊ตดํ•˜๋Š” ๋ฐฉ๋ฒ• ์ค‘, ํ˜„์žฌ ํšŒ์‚ฌ๊ฐ€ ๋‹น๋ฉดํ•œ ๋ฌธ์ œ์ ์ด๋‚˜ ๊ฐœ์„ ์ด ํ•„์š”ํ•œ ์˜์—ญ์„ ๋ช…ํ™•ํžˆ ์ •์˜ํ•˜๊ณ , ์ด ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด ์–ด๋–ค ๋ฐ์ดํ„ฐ ๋ถ„์„์ด ํ•„์š”ํ•œ์ง€ ๊ตฌ์ฒดํ™”ํ•˜๋Š” ์ ‘๊ทผ ๋ฐฉ์‹์€ ๋ฌด์—‡์ธ๊ฐ€?

  1. ํ•˜ํ–ฅ์‹(Top-down) ์ ‘๊ทผ
  2. ์ƒํ–ฅ์‹(Bottom-up) ์ ‘๊ทผ
  3. ํƒ์ƒ‰์ (Exploratory) ์ ‘๊ทผ
  4. ์˜ˆ์ธก์ (Predictive) ์ ‘๊ทผ

4. [์˜ˆ์‹œ๋ฌธ์ œ] ๋ฐ์ดํ„ฐ ๋ถ„์„์˜ ์ดˆ๊ธฐ ๋‹จ๊ณ„์—์„œ ๋ฐ์ดํ„ฐ์˜ ํ’ˆ์งˆ์„ ํ™•๋ณดํ•˜๋Š” ๊ฒƒ์€ ๋งค์šฐ ์ค‘์š”ํ•˜๋‹ค. ๋‹ค์Œ ์ค‘ ๋ฐ์ดํ„ฐ ์ •์ œ(Data Cleansing) ๊ณผ์ •์—์„œ ์ฒ˜๋ฆฌํ•ด์•ผ ํ•  ์ฃผ์š” ๋ฐ์ดํ„ฐ ํ’ˆ์งˆ ๋ฌธ์ œ์— ํ•ด๋‹นํ•˜์ง€ ์•Š๋Š” ๊ฒƒ์€ ๋ฌด์—‡์ธ๊ฐ€?

  1. ๊ฒฐ์ธก๊ฐ’(Missing Value) ์ฒ˜๋ฆฌ
  2. ์ด์ƒ์น˜(Outlier) ์ œ๊ฑฐ ๋˜๋Š” ๋ณด์ •
  3. ์ค‘๋ณต ๋ฐ์ดํ„ฐ(Duplicate Data) ์‹๋ณ„ ๋ฐ ์ œ๊ฑฐ
  4. ๋ฐ์ดํ„ฐ ๋ถ„์„ ๋ชจ๋ธ ์„ ํƒ

5. [์˜ˆ์‹œ๋ฌธ์ œ] ํ†ต๊ณ„์  ๊ฐ€์„ค ๊ฒ€์ •์—์„œ ์—ฐ๊ตฌ์ž๊ฐ€ ์ฐธ์ด๋ผ๊ณ  ์ฃผ์žฅํ•˜๊ณ  ์‹ถ์€ ๊ฐ€์„ค์ด๋ฉฐ, ๊ท€๋ฌด๊ฐ€์„ค์ด ๊ธฐ๊ฐ๋  ๋•Œ ์ฑ„ํƒ๋˜๋Š” ๊ฐ€์„ค์€ ๋ฌด์—‡์ธ๊ฐ€?

  1. ๊ท€๋ฌด๊ฐ€์„ค(Null Hypothesis)
  2. ๋Œ€๋ฆฝ๊ฐ€์„ค(Alternative Hypothesis)
  3. ์œ ์˜์ˆ˜์ค€(Significance Level)
  4. ๊ฒ€์ •ํ†ต๊ณ„๋Ÿ‰(Test Statistic)

6. [์˜ˆ์‹œ๋ฌธ์ œ] ๋ฐ์ดํ„ฐ ๋งˆ์ด๋‹ ๊ธฐ๋ฒ• ์ค‘, ๋ฐ์ดํ„ฐ๋ฅผ ํŠน์ • ๊ทœ์น™์— ๋”ฐ๋ผ ๋ถ„๋ฅ˜ํ•˜์—ฌ ์˜ˆ์ธก ๋ชจ๋ธ์„ ์ƒ์„ฑํ•˜๋Š” '์˜์‚ฌ๊ฒฐ์ •๋‚˜๋ฌด(Decision Tree)' ์•Œ๊ณ ๋ฆฌ์ฆ˜์˜ ์ฃผ์š” ํŠน์ง•์œผ๋กœ ๊ฐ€์žฅ ์ ์ ˆํ•œ ๊ฒƒ์€ ๋ฌด์—‡์ธ๊ฐ€?

  1. ๊ณผ์ ํ•ฉ(Overfitting) ๋ฐœ์ƒ ๊ฐ€๋Šฅ์„ฑ์ด ๋งค์šฐ ๋‚ฎ์•„ ๊ฐ€์ง€์น˜๊ธฐ๊ฐ€ ๋ถˆํ•„์š”ํ•˜๋‹ค.
  2. ๋ชจ๋ธ์˜ ๊ฒฐ๊ณผ๊ฐ€ ์‹œ๊ฐ์ ์œผ๋กœ ์ง๊ด€์ ์ด๋ฉฐ ํ•ด์„ํ•˜๊ธฐ ์‰ฝ๋‹ค.
  3. ์„ ํ˜•์ ์ธ ๊ด€๊ณ„๋งŒ์„ ํ•™์Šตํ•˜๋ฉฐ ๋น„์„ ํ˜• ๋ฐ์ดํ„ฐ์—๋Š” ์ ์šฉํ•˜๊ธฐ ์–ด๋ ต๋‹ค.
  4. ์ˆ˜๋งŽ์€ ๋…๋ฆฝ ๋ณ€์ˆ˜ ๊ฐ„์˜ ๋ณต์žกํ•œ ์ƒํ˜ธ์ž‘์šฉ์„ ์ž๋™์œผ๋กœ ํฌ์ฐฉํ•˜๊ธฐ ์–ด๋ ต๋‹ค.

7. [์˜ˆ์‹œ๋ฌธ์ œ] ๋น„์ง€๋„ ํ•™์Šต(Unsupervised Learning) ๋ฐฉ๋ฒ• ์ค‘ ํ•˜๋‚˜์ธ K-ํ‰๊ท  ๊ตฐ์ง‘(K-Means Clustering) ๋ถ„์„์— ๋Œ€ํ•œ ์„ค๋ช…์œผ๋กœ ์˜ณ์€ ๊ฒƒ์€ ๋ฌด์—‡์ธ๊ฐ€?

  1. ๋ฏธ๋ฆฌ ์ •์˜๋œ ๋ ˆ์ด๋ธ”(Label)์ด ์žˆ๋Š” ๋ฐ์ดํ„ฐ๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•™์Šตํ•˜์—ฌ ์ƒˆ๋กœ์šด ๋ฐ์ดํ„ฐ์˜ ํด๋ž˜์Šค๋ฅผ ์˜ˆ์ธกํ•œ๋‹ค.
  2. ๋ฐ์ดํ„ฐ๋ฅผ ๋ฏธ๋ฆฌ ์ •ํ•ด์ง„ K๊ฐœ์˜ ๊ตฐ์ง‘(Cluster)์œผ๋กœ ๋‚˜๋ˆ„๋ฉฐ, ๊ฐ ๊ตฐ์ง‘์˜ ์ค‘์‹ฌ(Centroid)์„ ๊ธฐ์ค€์œผ๋กœ ๋ฐ์ดํ„ฐ๋ฅผ ํ• ๋‹นํ•œ๋‹ค.
  3. ์„ ํ˜• ํšŒ๊ท€๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ์—ฐ์†์ ์ธ ์ข…์† ๋ณ€์ˆ˜์˜ ๊ฐ’์„ ์˜ˆ์ธกํ•˜๋Š” ๋ฐ ์ฃผ๋กœ ์‚ฌ์šฉ๋œ๋‹ค.
  4. ๋ฐ์ดํ„ฐ ๊ฐ„์˜ ์—ฐ๊ด€ ๊ทœ์น™์„ ๋ฐœ๊ฒฌํ•˜์—ฌ ์ƒํ’ˆ ์ถ”์ฒœ ์‹œ์Šคํ…œ ๋“ฑ์— ํ™œ์šฉ๋œ๋‹ค.

8. [์˜ˆ์‹œ๋ฌธ์ œ] ๋ฐ์ดํ„ฐ ์‹œ๊ฐํ™”์˜ ๋ชฉ์ ์€ ๋ณต์žกํ•œ ๋ฐ์ดํ„ฐ๋ฅผ ํšจ๊ณผ์ ์œผ๋กœ ์ „๋‹ฌํ•˜๊ณ  ์ˆจ๊ฒจ์ง„ ํŒจํ„ด์ด๋‚˜ ํŠธ๋ Œ๋“œ๋ฅผ ๋ฐœ๊ฒฌํ•˜๋Š” ๋ฐ ์žˆ๋‹ค. ๋‹ค์Œ ์ค‘ ์‹œ๊ฐ„์˜ ํ๋ฆ„์— ๋”ฐ๋ฅธ ํŠน์ • ๋ณ€์ˆ˜์˜ ๋ณ€ํ™” ์ถ”์ด๋ฅผ ๊ฐ€์žฅ ํšจ๊ณผ์ ์œผ๋กœ ๋ณด์—ฌ์ฃผ๋Š” ๋ฐ ์ ํ•ฉํ•œ ์‹œ๊ฐํ™” โ€ฆ

  1. ๋ง‰๋Œ€ ๊ทธ๋ž˜ํ”„(Bar Chart)
  2. ์› ๊ทธ๋ž˜ํ”„(Pie Chart)
  3. ์„  ๊ทธ๋ž˜ํ”„(Line Chart)
  4. ์‚ฐ์ ๋„(Scatter Plot)