Databricks 기반 제조 설비·생산 데이터 파이프라인 및 Data Mart 구축 전문가

프로젝트 소개:
- 공장의 설비·생산 데이터를 대상으로 Databricks 기반 데이터 수집 환경을 확대·개선하고, 분석 활용을 위한 표준 Data Mart를 구축하는 프로젝트입니다.
- 신규 설비 도입에 따른 수집 범위 확대와 기존 파이프라인의 안정성·성능 개선을 함께 진행합니다.

프로젝트 진행 상황:
- 기존 설비 데이터 수집 환경을 운영 중입니다.
- 신규 설비 확대에 따른 추가 데이터 수집 및 파이프라인 구성이 예정되어 있습니다.
- 기존 데이터 수집 로직 및 실시간 파이프라인 개선이 진행 중입니다.

전체 시스템 구성:
- 데이터 플랫폼: Databricks
- 데이터 저장·연계: AWS S3, CSV 등
- 데이터 처리: 설비 데이터 수집 및 ETL/데이터 파이프라인
- 데이터 활용: L1 Mart / Golden Mart 등 분석용 Data Mart
- 연계 데이터: MES, SPC 등 제조·생산 시스템 데이터

전체 프로젝트 일정:
- 4개월 (2026년 10월 ~ 2027년 1월)

모집 인원:
- 경력 9~13년 차 2명 (월 600만 원)
- 경력 13~20년 차 1명 (월 800만 원)

근무 형태:
- 상주 근무 (경북 구미시)

상세 업무:
- 신규 설비 확대에 따른 데이터 수집 환경 구성
- 설비 데이터 수집 파이프라인 구축 및 개선
- S3 기반 CSV 데이터 적재 및 데이터 처리
- 기존 실시간 데이터 수집 파이프라인 안정화 및 개선
- 대용량 데이터 배치 및 처리 성능 튜닝
- 설비·생산 데이터 표준화 및 Data Mart 구축
- L1 Mart 및 Golden Mart 구성
- MES, SPC 등 제조 시스템 데이터 연계
- 생산현황, 재공재고, 불량, Scrap, 장비상태 등 분석용 데이터 구성

필수 기술:
- Databricks
- SQL
- 데이터 수집 및 ETL/ELT 파이프라인 구축
- Data Mart 구축 및 데이터 모델링
- 대용량 데이터 처리 경험

자격 요건:
- Databricks를 활용한 데이터 엔지니어링 프로젝트 경험이 있으신 분
- 데이터 수집부터 적재·가공·Mart 구축까지 파이프라인 전반을 다뤄 보신 분
- 대용량 데이터 처리 및 성능 개선 경험이 있으신 분
- SQL 기반 데이터 가공 및 분석용 데이터셋 구축 경험이 있으신 분
- 담당 영역을 독립적으로 수행할 수 있으신 분

우대 사항:
- 제조·생산·설비 데이터 프로젝트 경험이 있으신 분
- MES, SPC 등 제조 시스템 데이터 연계 경험이 있으신 분
- AWS S3 기반 데이터 처리 경험이 있으신 분
- 실시간 및 배치 데이터 파이프라인 구축 경험이 있으신 분
- Databricks 기반 Lakehouse·Data Mart 구축 경험이 있으신 분
- 제조 데이터 표준화 및 Golden Mart 구축 경험이 있으신 분

기타 사항:
- 총 3명이 투입되며 특급 1명, 고급 2명으로 구성됩니다.
- 야간 및 주말 근무 발생 시 추가 근무 수당 또는 대체 휴가가 제공됩니다.
- 발주처에게서 수주한 SI 프로젝트이며, 발주처명은 면접 시 공개됩니다.
- 지원자 모집 마감일은 2026년 9월 23일입니다.