본문 바로가기

학교수업/정책분석과 빅데이터

[정책분석과 빅데이터] week5. AI와 빅데이터 이론

4차 산업혁명

기술 융합기반의 초지능 혁명

초연결성, 초지능성

 

AI

인공적으로 만들어진 지능

충분히 많은 데이터, 좋은 알고리즘, 고효율의 하드웨어가 상호 보완적으로 연관

 

약인공지능 VS 강인공지능

강인공지능은 사람과 같은 지능을 가진 인공지능이며 약인공지능은 특정 분야에 국한해서만 지능적 판단이 가능한 인공지능

 

인공지능의 활용단계

규칙기반 인공지능

전문가의 도움으로 컴퓨터가 학습하여 인간의 의사결정 보조하는인공지능

인공지능이 스스로 의사결정

 

머신러닝과 딥러닝의 차이

머신러닝은 데이터와 알고리즘을 사람이 제공하여 패턴을 학습하게 하지만, 딥러닝은 기존 학습내용을 기반으로 패턴을 스스로 학습하여 스스로 의사결정

 

머신러닝 과정

문제정의

데이터수집

데이터처리

모형학습

성능평가

 

빅데이터

3V의 특성을 갖는

1TB 이상의 데이터군

 

데이터의 빠른 처리방식

배치처리, 실시간 스트리밍

 

빅데이터 기술

생성

수집

저장: 클라우드 컴퓨팅, 데이터베이스

처리: 하둡(여러개의 저렴한 컴퓨터를 하나로 묶어 대용량 데이터 처리하는 분산파일 시스템&맵리듀스)

분석

시각화

 

빅데이터 분석기법

전통적 통계적 분석

데이터마이닝

텍스트마이닝

소셜네트워크분석

평판분석

군집분석