카카오 하둡엔지니어링파트, 42 Seoul서 데이터 직무 스몰톡 진행

카카오 하둡엔지니어링파트의 데이터 플랫폼 엔지니어가 42 Seoul에서 예비 개발자(카뎃)를 대상으로 데이터 직무 스몰톡을 진행했다. 멘토링 신청 부진과 채용 과정에서의 어려움, 높은 심리적 진입 장벽을 해소하기 위해 기획된 자리다.

데이터 엔지니어와 플랫폼 엔지니어의 역할

기업 내 데이터 흐름은 데이터 플랫폼 엔지니어가 기반 환경을 구축하고, 데이터 엔지니어가 데이터를 추출·변환·적재하며, 최종적으로 분석가나 기획자에게 전달되는 구조다.

• 데이터 엔지니어: 분석가·기획자의 니즈에 맞는 데이터를 제공하는 역할로, 저장소·메시징 큐·가공 기술 활용 능력이 필수다.
• 데이터 플랫폼 엔지니어: 파이프라인 구성을 돕는 플랫폼을 구축·운영하며, OS·네트워크 등 시스템 엔지니어링 지식이 요구된다.

신입 개발자를 위한 준비 역량

신입 개발자에게 즉시 모든 역량을 요구하지는 않지만, 빠른 성장을 위해 다음 세 가지를 권장했다.

1. Java 이해: 데이터 엔지니어링 도구의 대부분이 Java 기반이므로 코드 읽기 및 작성 능력 필요
2. Hadoop 이해: 데이터 파이프라인의 핵심으로, 분산 클러스터 구축 및 내부 동작 파악 경험 추천
3. Linux 프로젝트 경험: 데이터 수집부터 적재까지 분산 처리 환경을 직접 구축해 문제 해결 경험을 쌓는 것이 중요

학위와 직무 보람

카카오는 학위 유무보다 지원자의 지식과 경험을 중시하며, 석·박사 학위는 선택 사항이다. 연사는 카카오 서비스가 국민 생활 전반에 미치는 영향 속에서 자신의 수고가 보탬이 된다는 자부심을 주요 동기부여로 꼽았다. 이번 스몰톡은 데이터 직무에 대한 관심과 정보 접근성을 높이는 계기가 되었다.