[11번가] 데이터 플랫폼 엔지니어(거버넌서&자동화)

데이터엔지니어링 Unit 은 대규모 온프레미스 데이터 플랫폼을 직접 구축 및 운영을 하며, 데이터 거버넌스 체계와 운영 자동화 환경을 만들어 데이터 활용 조직이 보다 쉽고 안전하게 데이터를 사용할 수 있도록 플랫폼을 지속적으로 고도화하는 업무를 수행하고 있습니다. 운영과 개선을 함께 끌고 가며, 반복적인 업무를 자동화해 나갈 분과 함께하고 싶습니다.

- 온프레미스 데이터 플랫폼 거버넌스 체계 구축·운영 - 데이터 표준, 메타데이터 및 데이터 품질 관리 체계 구축 - 데이터 카탈로그 및 데이터 계보 관리 체계 구축 - 데이터 접근제어 및 보안 정책 운영 - 데이터 관련 컴플라이언스를 반영한 플랫폼 운영 정책 수립 및 이행 - 온프레미스 데이터 입수 파이프라인 개발·운영 - 다양한 데이터 소스의 수집 및 적재 파이프라인 개발 - Batch/Streaming 기반 데이터 처리 - 데이터 파이프라인 모니터링 및 장애 대응 - 대규모 온프레미스 데이터 플랫폼 저장 및 컴퓨팅 영역 최적화 - HDFS 저장영역 운영 및 최적화 - YARN 컴퓨팅 자원 운영 및 효율화 - 데이터 플랫폼 안정성 분석 및 운영 방식 고도화 - 성능/장애 분석 및 안정성 개선 - 운영 자동화 및 모니터링 체계 개선 - 주요 기술 스택: Hadoop, HDFS, Hive, Trino, Kafka, Flink, Spark, Airflow, Kubernetes, SQL, Python, Apache Ranger

- 대규모 데이터 플랫폼 및 데이터 거버넌스 업무 경력이 7년 이상인 분 - 거버넌스 정책을 데이터 플랫폼에 직접 적용하고 운영해 보신 분 - Python 또는 Java/Scala 등을 활용한 데이터 플랫폼 개발 역량과 운영 업무 자동화 경험이 있는 분 - 데이터의 수집, 저장, 처리, 활용 전반의 흐름을 이해하시는 분 - 플랫폼 표준화와 자동화 관점에서 문제를 정의하고 개선할 수 있는 분 - 다양한 개발 조직 및 데이터 활용 조직과 원활하게 협업할 수 있는 분

- 수 PB~10PB 이상 규모의 온프레미스 데이터 플랫폼 구축 및 운영 경험 - Hadoop, Hive, Spark, Trino 등 데이터 플랫폼에 대한 높은 이해 - 데이터 플랫폼의 용량 관리, 데이터 Lifecycle 관리 및 운영 효율화 경험 - Linux 환경에서 서비스를 직접 운영 경험 - Spark 기반 대용량 데이터 처리 및 성능 최적화 경험 - Airflow 기반 데이터 파이프라인 구축 경험 - Apache Ranger 기반 데이터 접근제어 경험

- 활용 기술 자체보다는, 데이터 플랫폼 운영 과정에서 문제를 발견하고 해결한 과정 및 본인의 역할·경험 - 반복·수작업 업무를 자동화·표준화하여 운영 효율성을 개선한 경험 및 개선 전 후의 수치·객관적 근거 - 데이터 거버넌스, 플랫폼 운영, 데이터 파이프라인 영역에서 문제를 주도적으로 해결하거나 운영 안정성을 높인 구체적인 사례

- 전형 절차: 서류전형 ▶ 직무면접 ▶ 인성검사 ▶ 임원면접 ▶ 처우협의/채용검진 ▶ 최종입사 (전형 단계는 진행 상황에 따라 변경될 수 있습니다) - 각 전형 별 상세 절차 및 일정은 지원자 별로 상이할 수 있으며, 합격자에게 개별 안내 드립니다. - 제출서류: 자유 양식 이력서(필수), 경력기술서(필수), 포트폴리오(선택) - 최종 합격 후 빠른 합류가 가능한 분을 희망합니다. - 본 공고는 채용이 완료되면 별도 사전 고지 없이 조기 종료될 수 있으며 반대의 경우 연장 될 수도 있습니다.

- 직무간 중복지원 및 동일공고 재지원이 불가하므로 이 점 유의하여 지원해 주시기 바랍니다. ※ 중복지원 사실이 확인되는 경우 합격이 취소될 수 있습니다. ※ 지원서 접수 이후에는 추가 수정이 불가합니다. - 장애인 및 보훈 대상자는 관련 법령에 따라 우대합니다. - 수습 기간은 최초 입사일로부터 3개월로 합니다. 수습 기간 중의 임금은 100%를 지급합니다. - 지원자격이 충족되지 않거나, 지원서 내용 및 그외 제출 자료에서 허위로 판명될 경우 영입이 취소될 수 있습니다. - 제출하신 서류에서 결격 사유가 확인되는 경우, 영입이 취소될 수 있습니다. ※ 전형 및 기타 문의사항 : recruit.11st@sk.com