빅데이터 분석기사 2

빅데이터 분석기사 내용 정리/ 2. 빅데이터 기술 및 제도

1. 빅데이터 플랫폼 (★★)¶(1) 빅데이터 플랫폼의 개념¶ 빅데이터에서 가치를 추출하기 위해 일련의 과정(수집->저장->처리->분석->시각화)를 규격화한 기술 특화된 분석(의료, 환경, 범죄, 자동차 등)을 지원하는 빅데이터 플랫폼이 발전하는 추세 (2) 빅데이터 플랫폼 구성요소¶ 크게 수집, 저장, 분석, 활용 단계로 구성됨 수집 원천 데이터(정형/반정형/비정형) 수집 ETL, 크롤러, EAI 등 저장 정형, 반정형, 비정형 데이터 저장 RDBMS, NoSQL 등 분석 텍스트 분석, 머신러닝, 통계, 데이터 마이닝 SNS분석, 예측 분석 등 활용 데이터 가시화 및 BI, OpenAPI 연계 히스토그램, 인포그래픽 등 (3) 빅데이터 플랫폼 데이터 형식¶ 데이터 형식은 대표적으로 HTML, XML, ..

빅데이터 분석기사 내용 정리/ 1. 빅데이터 개요 및 활용

1. 빅데이터 개요 및 활용¶1. 빅데이터 특징 (★★★)¶(1) 빅데이터 개념¶ DIKW 피라미드 (대정식혜): 대전 식혜 꿀맛 Data(데이터): 객관적 사실로서 다른 데이터와의 상관관계각 없는 가공하기 전의 순수한 수치나 기호 수제비 책을 A사이트에서 35,000원 B사이트 30,000원 판매 Information(정보): 가공, 처리하여 데이터간의 연관관계와 함께 의미가 도출된 데이터 수제비 책은 A 사이트에서 더 싸게 판매 Knowledge(지식): 획득된 다양한 정보를 구조화하여 유의미한 정보로 분류되고 일반화시킨 결과물. 정보에 기반해 찾아진 규칙 A 사이트가 싸게 팔아서 여기서 책을 사야지 Wisdom(지혜): 근본 원리에 대한 깊은 이해를 바탕으로 도출되는 아이디어, 상황이나 맥락에 맞게..