42dot Jobs logo
Posted 2mo ago•Pangyo (Software Dream Center), South Korea

LLM Engineer (Data Generation)

MiddleOn-site (Pangyo)€5,500 – €7,300 / mo
Required Skills
PythonLLMsApache Spark
Job Description

About the Team & Mission

LLM Engineer (Data Generation)는 Data-Centric AI 관점에서 모델 성능 향상에 필요한 학습 데이터를 설계·생성·평가·개선하는 역할을 수행합니다.

모델의 성능 병목과 Failure case를 분석하여 데이터 요구사항을 정의하고, Instruction Data, Preference Data, Reasoning Data, Domain-specific Data 등 목적에 맞는 학습 데이터를 구축하며, Data Generation Pipeline, 학습 결과 기반 Data Evaluation, Data Curation을 통해 대규모 학습 데이터의 품질을 체계적으로 개선하고, 차세대 Generative AI 모델의 성능 향상에 기여합니다.

Responsibilities

  • 모델 성능 개선을 위한 데이터 설계 및 생성

    • Research 및 Model Training 팀과 협업하여 모델의 성능 병목, Failure Case, 학습 목표를 분석하고 데이터 요구사항을 정의합니다.

    • Instruction Data, Preference Data, Reasoning Data, Domain-specific Data 등 목적에 맞는 학습 데이터를 설계·생성·정제합니다.

    • 생성된 데이터가 모델 성능에 미치는 영향을 실험적으로 분석하고, 결과를 바탕으로 데이터 생성 전략을 반복적으로 개선합니다.

  • Data Generation Pipeline 구축

    • Synthetic Data를 포함한 학습 데이터 생성 자동화 파이프라인을 설계하고 운영합니다.

    • 대규모 데이터 생성 Workflow를 구축하여 안정적이고 효율적인 데이터 생산 환경을 제공합니다.

    • 생성 비용, 처리 속도 및 품질을 고려한 Pipeline을 지속적으로 최적화합니다.

Similar Openings in AI & Machine Learning

View all in category➔