안녕하세요:)
구디 아카데미 입니다.
오늘은 빅데이터 분야의 한 직종인
빅데이터 개발자에 대해 알아보는 시간을 가지려고 합니다 :)
여러분은 "빅데이터 개발자"에 대해 잘 알고 계신가요??
여러분이 생각하고 있는 "빅데이터 개발자"는 어떤 업무를 하는 사람일까요??
지금부터 구디아카데미와 함께!!
빅데이터 개발자에 관한 A to Z, 모든 것을 함께 파헤쳐 보기로 해요 :)
빅데이터는 4차 산업혁명이 진행되면서 더욱 중요해지고 있는 분야 중 하나입니다.
4차 산업혁명의 변화는 생활 방식을 근본적으로 바꾸고 디지털 영역과 물리적 영역이 통합돼 새로운 시스템을 창출하여 우리의 생활에 편리를제공하는데 있죠.
최근 한 CF를 보면 인공지능 가전들이 서로 대화를 하며 스스로의 할 일을 찾습니다.
CF에서는 냉장고는 냉장고 속 재료로 만들 수 있는 요리를 알려주고,
TV는 주인이 좋아할 만한 프로그램을 추천하고,
세탁기는 스스로 세탁을 하는 과거에서는 SF몰에서나 볼 법 한 장면들이 연출 됩니다.
하지만 이제는 더 이상 그런 장면들이 SF물이 아닌 현실에서도 충분히 가능한 시대가 왔고, 인공지능(AI)이 더 이상 어려운 이야기가 아니게 되었습니다.
과거에 비해 많아지고 다양해진 데이터를 활용해 사람들의 행동, 위치정보, 생각까지 분석하여 다른 산업과 융합시켜 새로운 결과를 산출하면서 이 모든 것(=인공지능 가전)이 가능하게 된 거죠!
이 모든 걸 가능하게 만들기 위해 방대한 데이터를 다루는 빅데이터분야가 중요해졌고 수행하는 업무에 따라 빅데이터 분석가 / 빅데이터 개발자 / 빅데이터 엔지니어로 구분 됩니다.
빅데이터 개발자는 빅데이터 분야의 한 직종으로 빅데이터를 소화 할 수 있는 아키텍쳐를 설계하고 분석을 위한 프로그램이나 플랫폼을 개발하는 사람을 말합니다.
쉽게 말해 빅데이터 기술을 사용하기 위해서 웹사이트나 서버, 데이터베이스 단에 환경을 구축하는 일을 합니다.
빅데이터 개발자는 기본적으로 JAVA를 활용하여 데이터분석하기 위한 데이타를 수집하고
이를 분석하기 좋게 가공/정제 하는 프로그램을 개발하는 업무를 한다고 보면 될 것 같습니다.
데이터 분석 목적에 맞게 데이터를 명확하고 신속한 처리할 수 있도록 프로그램이나 플랫폼을 설계하고, 데이터를 수집하고, 데이터를 정제하는 일을 하는거죠.
빅데이터 개발자는 데이터를 저장하는데 hadoop, hbase, cassandra등을 사용하고
데이터를 수집하는데 flume, sqoop등을 사용하고 데이터를 전처리/가공하는데 mapreduce, hive, spark등을 사용합니다.
그리고 이를 엮어서 프로그램으로 개발하는 일을 합니다.
거기에 분석한 결과를 웹상에 보여주기 위해 Javascript, HTML, CSS, Java, JSP, Spring 등의 기술도 요구 됩니다.
매일매일 방대한 양의 정보가 생성되고 있으며, 데이터를 통해 새로운 정보를 도출하고자 하는 분야도 많아지고 있어
많은 양의 DATA를 수집/관리/융합/분석해 줄 빅데이터 전문가가 더욱 중요해질 것으로 전망 돼요.
실제로 한국정보화진흥원에서 발표한 자료에 따르면 2016년 국내 빅데이터 시장은 전년 대비 31.3%나 성장한 3440억원 규모이며, 이 속도로 성장 시 2020년에는 1조원까지 그 규모가 커질 것이라고 예상하고 있어요.
그런데 2015년 기준 시장 수요 대비 빅데이터 개발인력 공급률은 39.2%에 그쳤고, 빅데이터 엔지니어 공급률은 이보다 더 낮은 27.3%인 상황이라 빅데이터 전문가가 매우 부족한 상태이며 이건 우리나라뿐만 아니라 전 세계적으로 빅데이터 전문가가 매우 부족한 상태라고 하네요.
<또 IDC가 최근 연구 보고서에 따라 올해 세계 빅데이터 및 분석 시장이 전년대비 12.4% 성장하며
1508억달러 규모에 달할 것으로 전망했다. 이 시장은 빅데이터 및 분석 관련 하드웨어, 소프트웨어, 서비스를 포함한다.>
IDC는 이 시장의 성장세를 2020년까지 연평균(CAGR) 11.9%로 예상하며, 2020년에는 2100억달러 규모에 이를 것으로 전망하고 있다고 해요.
이에 따라 국내 빅데이터 및 분석 시장도 지속적인 성장세가 예상 되겠죠? 특히 은행, 조립제조 및 공정제조, 통신, 공공 분야 등의 투자규모가 커질 거라고 합니다.
"저는 빅데이터 개발자가 되고 싶어요!!"_빅데이터 개발자로 취업하기!!
여전히 뉴스나 신문에서 ‘빅데이터’관련 키워드를 많이 볼 수 있으며 향후 5~10년 동안은 지속적으로 성장할 분야라고 예측되고 있어요.
빅데이터 개발자는 개발업무를 하기 때문에 컴퓨터관련 학과/전공 또는 통계학/수학학과 등이 취업하는데 유리하며
국가공인자격증인 ADSP, ADP 또는 OCA, OCP, OCM과 같은 국제자격증과 자바자격증 OCJP, 기타 정보처리(산업)기사 자격증이 있다면 더 도움이 됩니다.
더불어, 자격증과 개발자 엔지니어로서 갖춰야 할 이론과 실무능력까지 갖추고 있다면 기업에서 뽑고 싶은 인재가 되겠죠??
COMMENT (0)개