21_빅데이터 뢄석기사

02_데이터 λΆ„μ„κ³„νš(1)_뢄석 μž‘μ—… κ³„νš_뢄석 μž‘μ—… κ°œμš”

devnest 2026. 3. 6. 17:14
728x90
01_뢄석 μž‘μ—… κ°œμš”

뢄석 μž‘μ—… κ³„νšμ„ μˆ˜λ¦½ν•˜κΈ° μœ„ν•΄ 데이터 처리 ν”„λ‘œμ„ΈμŠ€ 전체에 λŒ€ν•œ 이해가 ν•„μš”ν•˜λ©°, 데이터 처리 μ˜μ—­κ³Ό 데이터 뢄석 μ˜μ—­μœΌλ‘œ λ‚˜λˆ„μ–΄ μ‚΄νŽ΄λ³Ό 수 μžˆλ‹€.

 

1) 데이터 처리 μ˜μ—­

데이터 뢄석을 μœ„ν•œ κΈ°μ΄ˆλ°μ΄ν„°λ₯Ό μ •μ˜ν•˜κ³  μˆ˜μ§‘ 및 μ €μž₯, λΆ„μ„ν•˜κΈ° μˆ˜μ›”ν•˜λ„λ‘ 물리적인 ν™˜κ²½μ„ μ œκ³΅ν•˜λŠ” μ˜μ—­μ΄λ‹€.

단계 λ‚΄μš©
데이터 μ†ŒμŠ€ κΈ°μ—… λ‚΄ 각 λΆ€μ„œλ‚˜ μ„œλΉ„μŠ€λ³„ 적재되고 μžˆλŠ” λ‚΄λΆ€ 데이터와 λ‹€λ₯Έ κΈ°μ—…μ΄λ‚˜ 곡곡 데이터 λ“± μ™ΈλΆ€ 데이터가 μžˆλ‹€.
데이터 μˆ˜μ§‘ μ‚¬μš©μžλ‘œλΆ€ν„° 데이터λ₯Ό 직접 μž…λ ₯λ°›κ±°λ‚˜ λ‘œκ·Έμˆ˜μ§‘κΈ°, 크둀링, μ„Όμ„œλ„€νŠΈμ›Œν¬ 등을 톡해 데이터λ₯Ό μˆ˜μ§‘ν•œλ‹€.
데이터 μ €μž₯ 데이터λ₯Ό μœ ν˜•λ³„λ‘œ λ‚˜λˆ  졜적의 섀계λ₯Ό ν•˜μ—¬ 데이터 μŠ€ν† λ¦¬μ§€μ— μ €μž₯ν•œλ‹€.
데이터 처리 μ €μž₯된 λŒ€μš©λŸ‰μ˜ 데이터λ₯Ό μ‹ μ†ν•˜κ³  μ •ν™•ν•˜κ²Œ μ²˜λ¦¬ν•˜κΈ° μœ„ν•˜μ—¬ μ‹€μ‹œκ°„ 처리 및 λΆ„μ‚° 처리 등을 μ‹œλ„ν•œλ‹€.

 

2) 데이터 뢄석 μ˜μ—­

μ €μž₯λ˜μ–΄ μžˆλŠ” 데이터λ₯Ό μΆ”μΆœν•˜μ—¬ 뢄석 λͺ©μ κ³Ό 방법에 맞게 κ°€κ³΅ν•œ ν›„, 데이터 뢄석을 직접 μˆ˜ν–‰ν•˜κ³  κ·Έ κ²°κ³Όλ₯Ό ν‘œν˜„ν•˜λŠ” μ˜μ—­μ΄λ‹€.

 

β‘  데이터 뢄석

● 데이터 뢄석을 μœ„ν•΄ μ €μž₯된 데이터λ₯Ό μΆ”μΆœ 및 κ°€κ³΅ν•˜μ—¬ λͺ©μ μ— λ§žλŠ” 뢄석 방법을 톡해 λΆ„μ„ν•œλ‹€.

ꡬ뢄 λ‚΄μš©
도메인 이슈 λ„μΆœ ● 뢄석 λŒ€μƒ 과제 ν˜„ν™©μ„ νŒŒμ•…ν•˜κ³  κ°œμ„ κ³Όμ œλ₯Ό μ •μ˜ν•œλ‹€.
● 문제의 μ£Όμš” μ΄μŠˆλ³„λ‘œ κ°œμ„ λ°©ν–₯을 λ„μΆœν•˜κ³ , κ°œμ„ λ°©μ•ˆμ„ μˆ˜λ¦½ν•˜λ©°, 빅데이터 μš”κ±΄ μ •μ˜μ„œλ₯Ό μž‘μ„±ν•œλ‹€.
뢄석λͺ©ν‘œ 수립 ● 빅데이터 μš”κ±΄ μ •μ˜μ„œλ₯Ό ν† λŒ€λ‘œ κ°œμ„ λ°©ν–₯에 λ§žλŠ” ν˜„μ‹€μ μΈ 뢄석 λͺ©ν‘œλ₯Ό μˆ˜λ¦½ν•œλ‹€.
● 데이터 κ΄€λ ¨ 정보, 뢄석 타당성 κ²€ν† , μ„±κ³Ό μΈ‘μ • 방법 등을 ν¬ν•¨ν•œ 뢄석λͺ©ν‘œ μ •μ˜μ„œλ₯Ό μž‘μ„±ν•œλ‹€.
ν”„λ‘œμ νŠΈ κ³„νš 수립 ● 사전에 μ±…μ •λœ μžμ›κ³Ό μ˜ˆμ‚°, κΈ°κ°„ 등을 κ³ λ €ν•˜μ—¬ 뢄석 ν”„λ‘œμ νŠΈ κ³„νšμ„ μˆ˜λ¦½ν•œλ‹€.
● 뢄석 λͺ©ν‘œ μ •μ˜μ„œ, ν”„λ‘œμ νŠΈ μ†Œμš”λΉ„μš© λΉ„λΆ„ κ³„νšμ„ λ°”νƒ•μœΌλ‘œ μž‘μ—…λΆ„ν• κ΅¬μ‘°λ„(WBS)λ₯Ό μž‘μ„±ν•œλ‹€.
보유 데이터 μžμ‚° 확인 ● 뢄석λͺ©ν‘œμ™€ ν”„λ‘œμ νŠΈ κ³„νšμ„ 기반으둜 ν˜„μž¬ λ³΄μœ μ€‘μΈ λ°μ΄ν„°μ˜ ν’ˆμ§ˆμ΄λ‚˜ 규λͺ¨, μœ ν˜• 등을 ν™•μΈν•˜κ³  법λ₯ μ  μ΄μŠˆλ‚˜ μ œμ•½μ‚¬ν•­ 등을 κ²€ν† ν•œλ‹€.

 

β‘‘ 데이터 ν‘œν˜„

● λΆ„μ„λœ κ²°κ³Όλ₯Ό λˆ„κ΅¬λ‚˜ μ‰½κ²Œ 이해할 수 μžˆλ„λ‘ μ ν•©ν•œ μ‹œκ°ν™” 방법을 μ΄μš©ν•˜μ—¬ ν‘œν˜„ν•œλ‹€.

ꡬ뢄 λ‚΄μš©
빅데이터 뢄석 κ²°κ³Ό μ‹œκ°ν™” λ‹€μ–‘ν•œ 뢄석 및 μ‹œκ°ν™” 도ꡬλ₯Ό ν™œμš©ν•˜μ—¬ 뢄석 κ²°κ³Όλ₯Ό μ‹œκ°ν™” ν•œλ‹€.