- 기간 : 2023.11 ~ 2025.11
- 인력: 5명
👩🏫소개
SK 개열사 데이터 분석 및 디지털 대시보드 통합 Platform 운영
- DIP 프로젝트 운영 및 유지 보수를 제공하여 서비스 데스크 관리, 고객서비스 요청 관리, 신규 개발 및 테스트 , 신규 시스템 운영 및 유지보수 이관, 장애/이벤트 관리 등 업무를 수행
- 안정적인 유지 보수로 최적의 Data Platform 운영하여 아키텍처 최신화 및 비즈니스 협업을 통한 Delivery Excellence 달성
- 아키텍처
.png)
담당 업무
운영(AWS Glue, Lambda, Redshift, CodeCommit, EMR, Python, SQL, Airflow)
- 경영 / 외부 / 사용자 데이터 수집 모니터링 및 적재, 데이터 검증, 신규 데이터 수집 개발 (Lambda, Glue)
- EMR Scala Spark 사용한 데이터 적재 및 마트 코드 개발 및 배포
- Airflow 모니터링 및 Task 모니터링, 오류 관리 및 재 처리 실행
- 기존 아키텍처 Optimize 하여 Airflow Task 생성 및 추가
- 메타 DB 관리 및 경영 데이터 사용자 권한 관리
- 대시보드 신규 개발 필요한 Table/View 생성 및 권한 부여
- JIRA 이슈 생성 및 관리
작업 내용