파이프라인 설정
파이프라인의 스케줄과 실행 옵션을 관리하는 방법을 설명합니다. 설정은 워크플로우 편집기 상단 툴바의 Settings (톱니바퀴 아이콘)에서 접근할 수 있습니다.
Settings 다이얼로그
Settings 다이얼로그는 두 개의 탭으로 구성됩니다.
Schedule 탭
파이프라인의 정기 실행 스케줄을 설정합니다. Batch 파이프라인 전용이며, Event 파이프라인에서는 이 탭이 숨겨집니다.
- 프리셋 선택: Every Minute, Hourly, Daily, Weekly, Monthly, Custom 중 선택
- Cron 표현식: Custom 선택 시 직접 Cron 표현식 입력
- 스케줄 삭제: Remove 버튼으로 등록된 스케줄 삭제
자세한 스케줄 설정 방법은 스케줄링 문서를 참고하세요.
Options 탭
파이프라인 실행 환경을 설정합니다.
| 항목 | 설명 |
|---|---|
| Docker Image | 파이프라인 실행에 사용할 컨테이너 이미지 |
정보
커스텀 패키지가 필요한 경우 별도의 Docker 이미지를 빌드하여 지정할 수 있습니다. 기본 이미지에는 pandas, polars, pyarrow 등 주요 데이터 처리 라이브러리가 포함되어 있습니다.
파이프라인 메타데이터
파이프라인의 이름, 설명 등 기본 정보는 편집기 상단 툴바에서 직접 편집할 수 있습니다.
이름 변경
파이프라인 제목을 직접 클릭하여 인라인 편집할 수 있습니다.
AI 자동 생성
파이프라인에도 AI 자동 설명/태그 생성 기능이 제공됩니다.
개별 노드 설정
각 Dataset 출력 노드에서 쓰기 모드를 개별적으로 설정할 수 있습니다. Inspector 패널의 Options 탭에서 다음 옵션을 확인하세요:
| 모드 | 설명 |
|---|---|
| Append | 기존 데이터에 추가 |
| Overwrite | 기존 데이터를 덮어쓰기 |
| Merge | 키 기준으로 병합 (Upsert) |
팁
쓰기 모드는 개별 Dataset 출력 노드의 Options 탭에서 설정합니다.