dataMiningStudy

# 데이터 마이닝 실무적 처리 순서

내 경우는 주로 모바일 센싱 데이터를 처리하였음

0. 데이터 연구목적 : 어떤 데이터를 수집하여, 어떤 연구를 하고자 하는지 설정

1. 데이터 서버 : 수집하는 데이터들이 담기는 서버를 준비함, 주로 웹서버(APM)를 이용하였음 
2. 데이터 로거 : 주로 모바일 센싱데이터를 수집하기 위한 앱을 제작함, 주로 자바를 이용하였고, 데이터는 db 파일로 저장함

3. 데이터 전처리1 : 로거(크롤러)에서 수집되어 서버에 저장된 Raw Data 를 시간순으로 Merging 함, 주로 파이썬을 이용함
4. 데이터 전처리2 : 전처리1 된 파일을 종류별(앱/노티/와이파이 등)로 Dividing 함, 주로 파이썬을 이용함

5. 데이터 가설토의 : 데이터에서 어떤 Feature 들을 뽑을지 토의함

6. 데이터 전처리3 : 전처리2 된 파일을 연구목적에 맞는 데이터들만 Extracting 하여 csv 파일로 저장함, 주로 파이썬을 이용함
7. 데이터 마이닝 : 전처리3 에서 만들어진 csv 파일로 여러가지 마이닝을 함, 주로 파이썬을 이용함

8. 데이터 비쥬얼화 : 파이썬/엑셀/파워포인트를 이용하여, 비쥬얼에 가장 쉬운 방법으로 각 경우에 따라 골라서 활용

// 5,6,7 이 주 반복 코스