본문 바로가기

데이터 엔지니어

데이터 엔지니어와 백엔드 엔지니어의 차이? ※ 필자도 데이터 엔지니어링을 공부하고 있는 한 사람이기 때문에 이 글에서 말하고 있는 것은 한 사람의 의견으로 봐주시면 감사하겠습니다. ※ 데이터 엔지니어링을 공부하면서 들었던 생각 중 하나가 "데이터 엔지니어와 백엔드 엔지니어의 차이를 현업에서는 어떻게 바라보고 있을까?"였습니다. 이런 궁금증을 가지고 구글링을 하면서 여러 글들을 보고 제 나름대로는 정리가 됐지만 Wanted에서 채용 공고들을 크롤링해서 한 번 DE와 BE의 업무가 얼마나 다른지 한 번 더 살펴보기로 했습니다. 데이터 수집 Wanted에서 Data Engineer, 데이터엔지니어, 데이터 엔지니어, 백엔드 엔지니어, Backend Engineer의 키워드를 사용해서 채용 공고들을 크롤링해서 csv파일로 저장했습니다. (DevOps E.. 더보기
데이터 엔지니어는 무슨 일을 하나요? ※ 필자도 현재 공부하고 있는 사람 중에 하나로서 개인적인 견해가 포함되어 있을 수 있습니다. 최근 데이터 분석가, 엔지니어, 사이언티스트 등 데이터 직군에 대한 관심이 뜨겁습니다. 아마도 여러 산업에서 AI의 관심이 높아지면서 많은 데이터들을 필요로 하고, 많은 데이터들을 다룰 수 있는 데이터 직군에 대한 수요가 올라간 것 같습니다. 글의 주제인 데이터 엔지니어에 대해서 알아보기 전에 먼저 데이터 직군에는 어떤 것들이 있는지 알아보겠습니다. 데이터 직군에는 무엇이 있나요? 우리가 보통 듣게 되는 데이터 직군은 크게 데이터 분석가(Data Analyst, 이하 DA), 데이터 엔지니어(Data Engineer, 이하 DE), 데이터 사이언티스트(Data Scientist, [MLE, DLE 모두 포함하겠.. 더보기