Jr. Data Architect/Engineer
■ 근무 조건
• 근무지: Plano, TX
• 근무 형태: 풀타임
• 계약 기간: 1년
• 보수: 월 $10,400 (경력에 따라 협의)
■ 포지션 소개
내부 업무 시스템을 통합하는 신규 데이터 플랫폼을 메달리온 아키텍처(Medallion Architecture) 기반으로 구축할 미드레벨 데이터 플랫폼 엔지니어를 모집합니다.
데이터 수집부터 Bronze·Silver·Gold 계층의 변환까지 전체 데이터 파이프라인을 담당하며, 기존 Alteryx 워크플로를 dbt와 Python 기반 코드로 전환합니다.
또한 AI 에이전트가 업무별 데이터 마트를 조회할 수 있도록 MCP 서버를 개발하여 AI 기반 분석을 지원합니다. 확장성과 데이터 관리 체계를 갖춘 기반을 구축해 비즈니스 인사이트 도출과 AI 도입을 촉진하는 역할입니다.
■ 주요 업무
• Microsoft SQL Server, Oracle 등 원천 시스템의 데이터를 Bronze 계층으로 수집하고, 변경 데이터 캡처(CDC) 기반 증분 수집 구현
• 데이터 정제, 표준화, 중복 제거 및 품질 테스트를 위한 Silver 계층의 dbt 모델 개발
• Gold 계층의 업무별 데이터 마트 개발 및 기존 Alteryx 데이터 변환 로직 이전
• 스키마 변경 및 과거 시점 데이터 조회(Time Travel)를 지원하는 Apache Iceberg 테이블과 REST Catalog 구성
• Apache Airflow DAG 개발·운영 및 작업 의존성, 실행 일정, 실패 알림 관리
• AI 에이전트가 Gold 계층 데이터 마트를 조회할 수 있도록 MCP 서버 개발
• MCP 서버의 카탈로그·메타데이터 접근, 온톨로지 연동 및 쿼리 실행 기능 구현
• OpenMetadata를 활용한 메타데이터 및 데이터 계보 관리
• Python과 openpyxl을 활용한 Excel 보고서 자동화
■ 필수 자격 요건
• 실제 운영 환경에서의 데이터 엔지니어링 실무 경력 3년 이상
• 윈도 함수, CTE 및 쿼리 튜닝을 포함한 고급 SQL 활용 능력
• 모델 설계, 증분 처리 전략, 매크로 및 테스트를 포함한 dbt 실무 경험
• pandas 등 라이브러리를 활용한 데이터 처리·자동화를 위한 Python 역량
• Apache Airflow DAG 개발 경험
• Trino/Presto, Apache Spark, DuckDB 중 하나 이상의 분석 엔진 활용 경험
• Apache Iceberg, Delta Lake, Apache Hudi 중 하나 이상의 레이크하우스 테이블 형식 활용 경험
• 메달리온 아키텍처 및 스타 스키마·차원 모델링 경험
• CDC 또는 배치 처리를 통한 Microsoft SQL Server, Oracle 등 관계형 데이터베이스 연동 경험
■ 필수 기술
• SQL
• dbt
• Python
• pandas
• Apache Airflow
• Trino/Presto, Apache Spark 또는 DuckDB
• Apache Iceberg, Delta Lake 또는 Apache Hudi
• Microsoft SQL Server
• Oracle
• Kubernetes
• MinIO — S3 호환 스토리지
■ 우대 사항
• Airbyte, Fivetran 등 데이터 추출·적재(EL) 도구 활용 경험
• Apache Polaris 등 Iceberg REST Catalog 구현체 활용 경험
• OpenMetadata, DataHub 등 데이터 거버넌스 도구 및 Cube.dev 등 시맨틱 계층 활용 경험
• Alteryx 워크플로 파일(.yxmd)을 분석하고 해당 로직을 SQL/dbt로 전환할 수 있는 능력
• MCP 서버 개발 또는 LLM·RAG·AI 에이전트 파이프라인 구축 경험
• Java 또는 Python을 활용한 애플리케이션, API 및 백엔드 서비스 개발 경험
• LLM 연동, 검색 증강 생성(RAG) 및 AI 에이전트 워크플로를 포함한 생성형 AI 애플리케이션 구축 경험
• LangChain 또는 LangGraph를 활용한 도구 연동 AI 에이전트 개발 및 다단계 워크플로 구성 실무 경험
• 생산·판매·재고(PSI) 및 판매 분석을 포함한 리테일·가전 사업에 대한 이해
■ 우대 기술
• Java 또는 Python
• 생성형 AI 및 LLM 연동
• LangChain
• LangGraph
• RAG 및 AI 에이전트 파이프라인
• MCP 서버 개발
• Airbyte
• Fivetran
• Apache Polaris
• OpenMetadata
• DataHub
• Cube.dev
• Alteryx
• openpyxl
■ 지원방법
이력서를 아래 이메일로 보내주세요.
이메일: sales@sbtgus.com