팀 소개 데이터플랫폼개발팀은 카카오엔터테인먼트의 데이터 분석가/데이터 사이언티스트/데이터 엔지니어들이 가치있는 데이터를 창출할 수 있는 플랫폼을 개발 및 운영합니다. 배치로 데이터를 수집, 적재하는 것을 뛰어넘어 CDC에 기반한 실시간 수집 및 적재 시스템을 구축하고, 데이터 조직 내부 뿐만 아니라 서비스나 타 조직에서도 쉽게 데이터를 활용할 수 있도록 데이터 플랫폼을 고도화 시킵니다. 업무 내용카카오엔터테인먼트 글로벌 서비스의 다양한 종류의 데이터의 변화를 추적 및 수집하여 Data Lake 구축데이터를 다루기 위한 기반 환경(하둡 클러스터, Spark, Kafka, Presto 등) 구축 및 운영다양한 데이터 기반 플랫폼 개발 및 운영 : 데이터 파이프라이닝, 실시간 Data API 제공, 유저 타겟팅 등과 같이 서비스에서 다양하게 데이터를 활용할 수 있는 플랫폼 개발 및 운영지원 자격데이터 플랫폼 엔지니어 경력 3년 이상이신 분Java, Scala, Kotlin 중 하나의 언어를 능숙하게 다루실 수 있으신 분Data Lake 구축 경험 혹은 데이터 파이프라인 플랫폼을 구축 경험이 있으신 분대량의 데이터를 실시간으로 처리하여 적재하는 어려움을 이해하고, 최선의 방법을 고민하고 개선해 오신 분우대 사항Kafka Connect, Spark Streaming 등 분산 스트리밍 어플리케이션 관련 이해도가 높으신 분Debezium과 같은 CDC(Change Data Capture) 플랫폼 경험이 있으시거나 CDC와 연관된 이해도가 높으신 분Data API 구축 및 제공과 관련된 이해가 높거나 경험이 있으신 분Apache Hudi, Apache Iceberg, Delta Lake 등의 테이블 포맷에 대한 이해도가 높으신 분Kubernetes를 통한 빅데이터 관련 어플리케이션 관리 및 운영 경험이 있으신 분클라우드 환경의 빅데이터와 관련된 플랫폼 활용 경험이 있으신 분Kafka, Spark, Hadoop, Presto, Airflow 등의 기반 환경 구축 경험이 있거나 관련 기술의 이해도가 높으신 분데이터 카탈로그, 거버넌스 등을 위한 도구 구축 경험이 있으신 분
인터넷·IT·통신·모바일·게임>ERP·시스템분석·설계>데이터분석|인터넷·IT·통신·모바일·게임>빅데이터·AI(인공지능)>데이터분석|인터넷·IT·통신·모바일·게임>통신·모바일>플랫폼(VM)
Report job