SO EASY정의
데이터가 소스에서 저장소나 쓰는 곳까지 흘러가는 길 전체.
자세한 설명
데이터가 처음 생겨난 곳에서부터 정제·변환을 거쳐 데이터 웨어하우스나 보고서처럼 실제로 쓰이는 곳까지 이동하는 과정 전체를 가리킵니다. ETL·ELT는 이런 파이프라인을 짜는 대표적인 방법이며, 파이프라인은 그 흐름 전체를 아우르는 더 넓은 말입니다. 한 단계가 막히면 뒤이은 단계도 멈추기 때문에, 중간에 오류가 나면 바로 알 수 있도록 점검 지점을 두는 것이 중요합니다. 코드를 다루는 빌드 파이프라인과는 다른, 데이터가 흐르는 길을 가리키는 말입니다.
예를 들면
매장 결제 데이터가 정제를 거쳐 데이터 웨어하우스까지 흘러가는 전체 데이터 파이프라인을 그려 두고 관리합니다.
체크포인트
파이프라인 중간 단계가 조용히 멈춰도 모르고 지나칠 수 있어, 각 단계가 끝났는지 알려 주는 점검을 넣어 둡니다.
관련 용어
용어 설명은 이해를 돕기 위한 안내입니다. 법령·세무·지원 제도의 정확한 기준은 관계 법령과 소관 기관의 최신 안내를 확인하세요.