KR
위시켓
어려움
상주
Python/AWS 기반 데이터 오퍼레이션 파이프라인 개발 및 운영 전문가
예상 기간
3개월
지원 마감
2026년 09월 10일
난이도
어려움
기술 스택
Python
SQL
AWS Glue
Athena
MWAA(Airflow)
S3
PostgreSQL
GitLab
AI 분석 요약 기회점수 62/100
AWS 환경에서 Python과 SQL을 활용해 개인정보 활용 동의값 관련 데이터를 검증·처리하는 데이터 오퍼레이션 파이프라인을 구축·운영하는 프로젝트입니다. Glue ETL, Athena/SQL 기반 검증, MWAA(Airflow) 배치 파이프라인 운영과 데이터 누락·오류 발생 시 원인 분석 및 재처리를 담당합니다. 폐쇄망 환경에서 GitLab 형상관리를 활용하며, AWS 데이터 파이프라인 구축·운영 경험이 있는 4~7년차 데이터 엔지니어에게 적합합니다.
핵심 요구사항
- AWS 기반 데이터 파이프라인(S3, Glue, Athena, RDS, MWAA, EC2) 구축·운영 경험
- Python 및 SQL(PostgreSQL) 활용 능력 우수
- Glue 메타데이터/스키마 관리 및 Athena 조회 운영
- MWAA(Airflow) 기반 배치 파이프라인 운영
- 데이터 누락·오류 원인 분석 및 재처리 수행
- 폐쇄망 환경 GitLab 형상관리 및 상주 근무 가능
산출물
- Glue ETL 및 Athena/SQL 기반 데이터 검증·처리 파이프라인
- MWAA 기반 배치 파이프라인 운영 체계
- Glue 메타데이터 및 테이블/스키마 운영 구성
- 데이터 오류 원인 분석 및 재처리 결과물
매력 포인트
- 명확한 기술 스택과 업무 범위
- 장비(내부망·외부망 노트북 2대, 모니터) 제공
- 실무 중심 AWS 데이터 엔지니어링 경험 축적 가능
주의사항
- 예산·급여가 '협의'로만 표기되어 단가 확인 불가
- 폐쇄망 상주 근무(서초구 신논현) 강제로 원격 불가
프로젝트 유형장기계약
적합 개발자4~7년차 데이터 엔지니어 (AWS + Python/SQL, ETL 파이프라인 운영)
클라이언트 정보
회사위시켓
위치서울특별시 강남구
고용형태CONTRACTOR
프로젝트 원문 설명
프로젝트 소개:
- AWS 환경과 Python, SQL을 활용하여 데이터 검증 및 처리 파이프라인을 구축하고 운영하는 프로젝트입니다.
전체 프로젝트 일정:
- 3개월
모집 인원:
- 경력 4~7년 차 1명 (월 급여 협의)
근무 형태:
- 상주 근무 (서울 서초구 신논현역)
상세 업무:
- 개인정보 활용 동의값 관련 S3 적재 데이터에 대한 Glue ETL 및 Athena/SQL 기반 데이터 검증 및 처리 파이프라인 운영
- Glue 메타데이터 관리 및 Athena 조회를 위한 테이블 및 스키마 운영
- 관계사 전송 데이터의 S3 적재 및 MWAA 기반 배치 파이프라인 운영
- 데이터 누락 및 오류 발생 시 Python과 SQL을 활용한 원인 분석 및 데이터 재처리 수행
- 폐쇄망 환경에서 GitLab을 통한 코드 형상관리 및 배포
필수 기술:
- AWS S3, Glue, Athena, RDS, MWAA(Airflow), EC2, Python, SQL(PostgreSQL), Gitlab
자격 요건:
- AWS 기반의 데이터 파이프라인 구축 및 운영 경험이 있으신 분
- Python 및 SQL 활용 능력이 우수하신 분
- 지정된 사무실 상주 근무가 가능하신 분
우대 사항:
- 폐쇄망 및 보안망 환경에서의 개발 및 운영 경험이 있으신 분
- 대용량 데이터 처리 및 ETL 파이프라인 최적화 경험이 있으신 분
- Airflow를 활용한 워크플로우 자동화 경험이 있으신 분
기타 사항:
- 업무용 노트북 2대(내부망, 외부망) 및 모니터 제공
- AWS 환경과 Python, SQL을 활용하여 데이터 검증 및 처리 파이프라인을 구축하고 운영하는 프로젝트입니다.
전체 프로젝트 일정:
- 3개월
모집 인원:
- 경력 4~7년 차 1명 (월 급여 협의)
근무 형태:
- 상주 근무 (서울 서초구 신논현역)
상세 업무:
- 개인정보 활용 동의값 관련 S3 적재 데이터에 대한 Glue ETL 및 Athena/SQL 기반 데이터 검증 및 처리 파이프라인 운영
- Glue 메타데이터 관리 및 Athena 조회를 위한 테이블 및 스키마 운영
- 관계사 전송 데이터의 S3 적재 및 MWAA 기반 배치 파이프라인 운영
- 데이터 누락 및 오류 발생 시 Python과 SQL을 활용한 원인 분석 및 데이터 재처리 수행
- 폐쇄망 환경에서 GitLab을 통한 코드 형상관리 및 배포
필수 기술:
- AWS S3, Glue, Athena, RDS, MWAA(Airflow), EC2, Python, SQL(PostgreSQL), Gitlab
자격 요건:
- AWS 기반의 데이터 파이프라인 구축 및 운영 경험이 있으신 분
- Python 및 SQL 활용 능력이 우수하신 분
- 지정된 사무실 상주 근무가 가능하신 분
우대 사항:
- 폐쇄망 및 보안망 환경에서의 개발 및 운영 경험이 있으신 분
- 대용량 데이터 처리 및 ETL 파이프라인 최적화 경험이 있으신 분
- Airflow를 활용한 워크플로우 자동화 경험이 있으신 분
기타 사항:
- 업무용 노트북 2대(내부망, 외부망) 및 모니터 제공
위시켓에서 원본 확인
원본 보기