T'SPACE

다채로운 에디터들의 이야기

컴퓨터공학/ADsP

ADsP 데이터 분석 준 전문가 정리 2

Tonny Kang 2024. 7. 6. 10:04
반응형

https://tonnykang.tistory.com/255

 

ADsP 데이터 분석 준 전문가 정리 1

데이터의 이해DIKW Pyramid데이터 Data정보 Information, 내포된 의미 → 유용하지 않을 수도 있음지식 Knowledge지혜 WidsomDataBase통합된 데이터 (Integrated data): 중복되지 않게 통합되어있다저장된 데이터 (St

tonnykang.tistory.com

 

빅데이터 활용 기본 테크닉 7가지

728x90

1. 연관 규칙 학습 (Association Rule Learning)

주목할 만한 상관 관계가 있는지 찾아내는 방법

2. 유형분석 (Classification tree analysis)

새로운 사건이 속할 범주를 찾아내는 방법

3. 유전 알고리즘

https://tonnykang.tistory.com/233

 

Genetic Algorithm 유전 알고리즘

유전 알고리즘(Genetic Algorithm, GA) 자연세계의 진화과정 및 유전법칙에 기초한 계산 모델로서 존 홀랜드(John Holland)에 의해서 1975년에 개발된 전역 최적화 기법(Global Optimization Method)생물의 진화

tonnykang.tistory.com

 

4. 기계학습=머신러닝 (Machine Learning)

컴퓨터가 데이터로부터 규칙을 찾고 활용해 예측하는 방법

사람이 데이터를 분석하지 않는다

5. 회귀분석 (Regression Analysis)

독립변수를 조작하면서 종속변수가 어떻게 변하는지를 보며 분석하는 방

6. 감정분석 (Sentimental Analysis)

글쓴이의 감정을 분석하는 방법이다

7. 소셜 네트워크 분석 (SNA: Social Network Analysis)

SNS같은 온라인 공간에서 팔로워 팔로잉 관계를 분석, 사회 관계망 분석으로도 불림

반응형

빅데이터의 위기 요인과 통제 방안

(1) 위기요인

1. 사생활 침해

2. 책임 원칙 훼손

알고리즘의 희생양이 될 수 있음

→실제로 범죄, 행동을 하기전 인공지능이 판단해 불이익 발생

3. 데이터 오용

(2) 통제방안

1. 사생활 침해→동의에서 책임으로

2. 책임 원칙 훼손→결과 기반 책임 원칙

범죄를 저지를 것이라고 예상되더라도 현 시점에서 아무런 범죄가 일어나지 않았음으로 어떠한 조치 취하기 금지

3. 알고리즘 접근 허용

최근 알고리즘을 이해하고 해석해 사전에 피해자를 방지 하고자 하는 전문인력 알고리즈미스트(Algorithmist)가 부상

데이터 사이언티스트에게 요구되는 역량

하드 스킬 (Hard Skill)

  • 빅데이터에 대한 이론적 지식
  • 분석 기술에 대한 숙련

소프트 스킬 (Soft Skill)

  • 통찰력 있는 분석
  • 설득력 있는 전달
  • 다분야 간 협력

가트너가 제시한 데이터 사이언티스트 요구 역량

  • 데이터 관리
  • 분석 모델링
  • 비즈니스 분석
  • 소프트 스킬: 커뮤니케이션, 협력, 리더십, 창의력, 규율, 열정

 

https://tonnykang.tistory.com/257

 

ADsP 데이터 분석 준 전문가 정리 3

데이터 분석 기획분석 대상과 그 방법에 따른 4가지 분석 주제최적화 Optimization - 문제, 분석법 둘다 앎솔루션 Solution - 문제만 알고 분석법 모름발견 Discovery - 둘다 모름통찰 Insight - 문제는 모르

tonnykang.tistory.com

 

반응형