빅데이터크롤링
정치, 사회, 경제, 문화, 과학기술등 빅데이터로 미리 예측하고 분석하자!
3V 방식으로 대규모 데이터를 목적에 따라 분석하고 결과를 제공하는 능력을 배우는 과정입니다.
구글에서는 1분에 200만건의 검색과 유튜브에서는 72시간의 비디오와 트위터에서는 27만건의 데이터가 생성이 됩니다.
이처럼 수많은 DB관련 대용량의 정보들을 빠른 시간 안에 수집 및 분석하고 이를 바탕으로 저장하여 실시간 대처 및 분석용 데이터를 만들어냅니다.
빅데이터와 관련된 업무의 활용도가 높아지고 있어 전문인력 수요가 급증하고 기업에서도 인력 충원으로 인해 앞으로의 발전가능성이 매우 큽니다.
※빅데이터의 3V란?※
양(Volume), 데이터 생성 속도(Velocity), 형태의 다양성(Variety)을 말한다.
수강대상
- 빅데이터 플랫폼에 관심을 가진 분
- 프로그래밍 전공을 했지만 빅데이터로 이직을 하고 싶으신 분
취득가능자격증
빅데이터전문가1급
취업분야
IT업계 데이터분석전문가, 비지니스 분석전문가, 통계전문가
과정소개
| 개강일 | 2020-05-11(예정) | 교육기간 | 5개월/115일/905시간 |
|---|---|---|---|
| 수강료 | 미정(국비무료) | 정원 | 20명 |
| 훈련시간 | 09:10 ~ 18:00(16:00) | 1일 훈련시간 | 6 ~ 8시간 |
| NCS수준 | 5수준 이상 | 훈련기간 | 2020.05. ~ 2020.11.(예정) |
NCS 주요과정 편성
| 교과목 | NCS능력단위 | 시간 | 훈련목표 |
|---|---|---|---|
| 빅데이터 수집 | 빅데이터 수집시스템 개발 | 60 | 활용목적에 적합한 데이터를 수집하기 위하여 빅데이터 수집시스템 구성, 내·외부 데이터 수집모듈 개발, 데이터 변환모듈 개발 및 수집 데이터 검증모듈을 개발할 수 있다. |
| 빅데이터 분석 | 빅데이터 분석시스템 개발 | 60 | 빅데이터에 숨겨진 패턴과 알려지지 않은 정보간의 관계를 찾아내기 위해 사용되는 통계기법, 머신러닝, 텍스트마이닝 등의 분석방법들을 효과적으로 적용하기 위한 분석시스템을 개발할 수 있다. |
| 빅데이터 저장 | 빅데이터 저장시스템 개발 | 60 | 수집 변환된 데이터를 조직의 활용 목적에 적합하도록 데이터 유형과 분석 목적을 고려하여 저장구조를 설계하고 고가용성을 제공하는 저장시스템을 개발할 수 있다. |
| 빅데이터 처리 | 빅데이터 처리시스템 개발 | 60 | 저장된 데이터를 처리목적에 따라 크기, 종류, 저장 구조를 고려하여 처리 및 가공하기 위한 분산처리, 실시간처리, 이벤트처리 모듈을 개발할 수 있다. |
| 프로그램 언어 활용 | 프로그램 언어 활용 | 90 | 빅데이터 저장모델을 설계하고 저장관리 시스템을 구성할 수 있다. |
| SQL활용 | SQL활용 | 90 | 90관계형 데이터베이스에서 SQL을 사용하여 목적에 적합한 데이터를 정의하고, 조작하며, 제어할 수 있다. |
| SQL응용 | 90 | 관계형 데이터베이스에서 SQL을 사용하여 응용시스템의 요구기능에 적합한 데이터를 정의하고, 조작하며, 제어할 수 있다. | |
| 응용SW 기초기술 활용 | 응용SW 기초기술 활용 | 130 | 응용소프트웨어개발을 위하여 운영체제, 데이터베이스, 네트워크의 기초 기술을 적용하고 응용개발에 필요한 환경을 구축할 수 있다. |
| 빅데이터 분석 기획 | 빅데이터 분석 기획 | 80 | 데이터 분석 결과를 활용하기 위하여 빅데이터 분석 요건 정의, 데이터 확보, 데이터 탐색, 분석 모델링, 분석 결과 적용을 기획할 수 있다. |
| 빅데이터 분석결과 시각화 | 빅데이터 분석결과 시각화 | 120 | 정보를 명확하고 효과적으로 전달하기 위해서 사용자가 분석 결과를 이해하기 쉽게 그래픽 의미를 이용하여 시각적으로 표현하고 전달할 수 있다. |
| UI디자인 | UI디자인 | 120 | UI 아키텍처 설계 후 시각적인 요소를 디자인하기 위해 비주얼 디자인 콘셉트를 도출하며 이 콘셉트에 근거하여 GUI를 상세 디자인 할 수 있다. |
| UI테스트 | 110 | 구현된 UI를 검증하기 위하여 사용성 테스트 계획, 수행, 분석, 결과 보고를 수행할 수 있다. | |
| UI구현 | 220 | UI 설계 산출물과 GUI 디자인 가이드를 바탕으로 UI 구현 표준을 수립하고 UI를 제작할 수 있다. |
