본문 바로가기
01.빅데이터_분석

빅데이터분석기사-part 01 빅데이터 분석기획-

by 마르쿠스 아우렐리우스 2022. 6. 7.
반응형

chapter 01

section 02

빅데이터 기술 및 제도

빅데이터 플랫폼-빅데이터를 분석 또는 활용하는데 필요한 필수적인 것으로,빅데이터 기술의 집합체이다

 

빅데이터 플랫폼의 기능-부하들을 기술적인 요소들을 결합하여 해소한다
빅데이터 플랫폼의 구조-소프트웨어 계층,플랫폼 계층,인프라스트럭쳐 계층
플랫폼 계층
인프라스트럭쳐 계층
빅데이터 처리과정-데이터 생성,수집,저장,처리,분석,시각화
빅데이터 수집-ETL프로세스
빅데이터 저장-NoSQL,분산파일시스템_GFS,HDFS,아마존S3
빅데이터 처리-하둡,아파치 스파크,맵리듀스
빅데이터 분석-탐구요인분석_EFA,확인요인분석_CFA
데이터분석방법-분류,군집화,기계학습,텍스트마이닝,웹마이닝,오피니언마이닝,리얼리티마이닝,소셜네트워크분석,감성분석
빅데이터와 인공지능-기계학습,딥러닝(기계학습 방법 중 하나),깊은 구조에 의해 엄청난 양의 데이터를 학습
기계학습-지도학습,비지도학습,강화학습
빅데이터 인공지능-이미지 애노테이션
인공지능 기술동향-기계학습 프레인워크(텐서플로우,케라스),GAN,오토인코더,설명가능한 인공지능(XAI),기계학습 자동화
인공지능의 미래
개인정보 개요-살아있는 개인에 관한 정보,개인정보의 이전,개인정보 처리 위탁,개인정보의 제3자 제공,개인정보의 보호
빅데이터 개인정보보호 가이드라인-비식별화,투명성확보,재식별 시 조치,민감정보 및 비밀정보 처리,기술적/관리적 보호조치
개인정보보호법
정보통신망법의 개요
2020년 데이터3법의 주요 개정내용
개인정보 비식별화
개인정보 비식별화 조치 가이드라인의 단계별 조치사항-사전검토,비식별 조치,적정성 평가,사후 관리
개인정보 비식별화 조치 방법-가명처리,총계처리,데이터삭제,데이터범주화,데이터마스킹
데이터 수집의 위기요인과 통제방안-동의에서 책임으로 강화하여 통제,데이터 활용의 위기 요인과 통제방안-결과 기반 책임원칙을 고수하여 통제
데이터 처리의 위기 요인과 통제방안-데이터 오용으로 위기발생,알고리즘 접근을 허용하여 통제

 

반응형