[IT 직업]데이터 엔지니어(Data Engineer) 하는 일,필요 역량,연봉,전망

 

​

​

데이터 엔지니어란?

​

​

데이터 엔지니어는 데이터를 수집, 가공, 적재하는 업무인 ETL을 할 수 있는 데이터 파이프라인을 설계하고 구축하는 일을 하는 사람이다.​

데이터 사이언티스트나 데이터 분석가가 데이터를 활용하여 데이터 분석, 머신러닝 모델 구현 등을 편하게 할 수 있게 하는 환경을 만들어주는 것이다.

​

여기서 데이터 파이프라인이란, 매시간 수집되는 데이터들이 각 팀 들마다 필요한 곳에 데이터가 흘러갈 수 있도록 해주는 시스템을 말한다.

​

하는 일

​

​

- 서비스 제공의 안정성을 보장하기 위한 서비스 성능관리기준에 따른 서비스 성능 측정

​

- 서비스 성능개선을 위해 성능지연발생 시 근본원인을 파악, 제거함

​

- 서비스 가용성 관리기준에 따라 가용성을 측정, 서비스 가용성 관리기준 미준수 시 근본원인을 분석

​

- 서비스 가용성 향상을 위해 서비스 가용성을 저해하는 근본원인 제거

​

- 서비스 품질보증을 위하여 서비스 변경내역을 관리

​

- 사용자 및 서비스 운영자 변화관리를 위해 서비스 변경 발생 시 변경된 내용을 알림

​

- 변경내용이 안정적으로 적용되었는지 확인하기 위하여 제공서비스를 모니터링 ​

 

 

 

필요 역량

​

​

​

데이터 엔지니어는 빅 데이터 기술, 소프트웨어 엔지니어링,  데이터베이스 기술에 대한 이해를 필요로 한다.

따라서 Python, Scala, Java 등 주요 코딩 스킬,그리고 빅데이터 분산처리 시스템 아키텍처에 대한 이해가 필요하다. ​

​

 

 

연봉

​

데이터 엔지니어의 초봉은 2021년 기준 3391만, 5년차는 5148만, 10년차는 7907만 정도이다.

​

전망

​

빅데이터 시장 매출 규모는 매년 지속적인 성장을 하고 있다. 따라서 데이터 엔지니어에 대한 수요역시 꾸준히 증가할 것으로 예상된다.

​

​

자료 출처

 

 

https://www.codestates.com/blog/content/%EB%8D%B0%EC%9D%B4%ED%84%B0%EC%97%94%EC%A7%80%EB%8B%88%EC%96%B4%EB%A1%9C%EB%93%9C%EB%A7%B5

데이터 엔지니어가 하는 일은?ㅣ데이터 엔지니어 로드맵, 필요 역량

 

 

https://m.terms.naver.com/entry.naver?docId=5665210&cid=42117&categoryId=42117 

데이터엔지니어

 

https://socrates-dissatisfied.tistory.com/entry/%EB%8D%B0%EC%9D%B4%ED%84%B0%EB%B6%84%EC%84%9D%EA%B0%80-vs-%EB%8D%B0%EC%9D%B4%ED%84%B0%EC%97%94%EC%A7%80%EB%8B%88%EC%96%B4-vs-%EB%8D%B0%EC%9D%B4%ED%84%B0%EA%B3%BC%ED%95%99%EC%9E%90-%EC%B0%A8%EC%9D%B4%EA%B0%80-%EB%AD%98%EA%B9%8C%EC%9A%94-3-%EC%97%B0%EB%B4%89%EA%B3%BC-%EB%B3%B4%EC%83%81#:~:text=%EB%8D%B0%EC%9D%B4%ED%84%B0%20%EB%B6%84%EC%84%9D%EA%B0%80%3A%208%2C250%EB%A7%8C%EC%9B%90,%EA%B3%BC%ED%95%99%EC%9E%90%3A%201%EC%96%B53%2C543%EB%A7%8C%EC%9B%90

데이터분석가 vs 데이터엔지니어 vs 데이터과학자 차이가 뭘까? (3) 연봉과 보상

 

 

참고자료

 

https://techblogpedia.com/%EB%B9%85%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%97%94%EC%A7%80%EB%8B%88%EC%96%B4-%EC%B7%A8%EC%97%85-%EC%A0%84%EB%A7%9D%EA%B3%BC-%ED%95%84%EC%9A%94%EC%97%AD%EB%9F%89-%ED%95%98%EB%8A%94%EC%9D%BC-%EC%A0%95/

빅데이터 엔지니어 취업 전망과 필요역량 하는일 정리 - TECH 블로그피디아