로그인 바로가기

중앙 내용으로 바로가기

엠아이티 능력개발원

본문내용

본문

자주하는 질문
+ Home > 입학신청 > 자주하는 질문
빅데이터 개발자란 무슨일은 하는 건가요?
  • 글쓴이
    질문
  • 작성일
    2018-03-20 15:23:39
    조회수
    165

 

빅데이터관련 프레임워크 및 에코시스템을 이용하여 개발을 하는 사람이라고 볼수 있습니다.

 

구체적으로 말씀드리면 데이터를 이용하기 위해서는
수집->저장 -> 가공(전처리) -> 분석 -> 시각화 

 

의 과정을 거치게 되는데 

 

이 중 데이터를 수집하고 저장하며 이를 분석하기 좋게 가공(전처리)하는 프로그램을 개발하는 개발자라고 할수 있습니다.

 

대표적인 프로그램으로는

데이터 수집시 flume, sqoop

데이터 저장시 hadoop,hbsee, cassandra

데이터 가공시 mapreduce, hive, spark 등을 사용합니다. 

 

목록보기
수정하기
삭제하기