24.05.01 데이터 분석 공부 조언

데이터 분석을 하려니 막연하여 내용을 찾는 중이다

---

(질문)

직무 바꿀까 생각중인데
통계학 3학년 강의까지는 다 들었거든
캐글 노트북도 몇번 써보고
근데 그 이상으로 뭘 해야할지 모르겠어

데이터 확인 -> EDA -> 피쳐 엔지니어링 -> 모델 -> 튜닝 -> 끝
그냥 도돌이표만 반복하는 느낌이야

통계학 강의 들은것도 사실 써먹을데가 별로 없어 맨 휘트니 u 검정 이거 어디다가 써? PCA LDA 이런것도 딱히 쓰는 사람 없는거 같아 ㅋㅋ

캐글 노트북 봐도 그냥 피처 고르고 모델 고르고 모델 여러개 쌓고 끝. 이런 느낌이라 봐도 뭘 배워야할지…

대학원 가는게 맞을까? 엄청 답답해

(답변)

제조, 의학, 커머스, 모빌리티, 광고, 검색... 분석이라고 퉁치고 있지만 사실 다 달라서 어떤 도메인인지에 따라 필요한 게 달라여. 그리고 분석일은 결국 비지니스에 도움되려고하는거다보니 컨설턴트식 문제해결, 가설기반 사고가 매우 중요하고 이걸 돕는 느낌으로 통계와 확률적사고, it 엔지니어링 능력 등이 끼얹어지는 느낌이라... 비지니스랑 거리가 먼 순수 모델링 업무가 아니라면 통계만 배워선 실무에 큰 도움이 못될겁니다. 이 개념이 잡혀있지않으면 대학원가셔도 큰 도움이 된다고 못느끼실거에요

---

통계만을 공부하는건 모델링하고는 다른방향이에요
말그대로 평가, 분석 등 현재 상황파악, 방향성 등을 파악하는게 분석하는사람들이 하는일이고,
개선을 위해 직접 모델 측면에서 개발을하는게 인공지능을 공부한 사람들이 하는거에여

그러니 분석공부를 할거면 공부할때 단순히 모델 쌓고 이런게 아니라 문제점 파악에 초점을 두세요

---

문제점 파악이라는게 어떤 것을 말하시는건가요? 그냥 통계학 강의만 쭉 들어와서 좀 이해하기 힘드네요 ㅠㅠ 예시를 들어주실 수 있나요?

---

보통 데이터사이언티스트라는 직무가 이런 분석등이 주인 직무에요. 해당 직무가 뭐하는지부터 한번 찾아보시면 좋을거같네요

---

<가설 기반 사고>
BCG 의 우치다 카즈나리 님이 쓴 "가설이 무기가 된다" "질문이 무기가 된다" 이 두 권 보시면 도움이 될겁니다

---

문제 정의, 문제 해결.

---

단순 데이터를 분석해서 현재를 설명하는건 기초통계로도 어느정도 할 수 있지만,
직관과 통계를 엮어서 비즈니적인 인사이트를 만들어내는거는 통계학지식과 도메인 지식이 없으면 안되겠더라구요.


May 1, 2024
블라인드에서