Back to the Basics Back to the Basics

Apache NiFi에서 JSON, CSV, XML 등 다양한 데이터 포맷을 읽고 변환하는 방법을 실습합니다. 데이터 통합과 변환 파이프라인 구축의 핵심을 단계별로 안내합니다. 데이터 파이프라인의 현실 – 다양한 포맷의 데이터 실무 데이터는 절대 하나의 포맷으로만 존재하지 않습니다.ERP 시스템에서는 CSV, 외부 API는 JSON, 레거시 시스템은 XML 등 다양한 형식이 혼재되어 있습니다. 데이터 엔지니어의 핵심 과제 중 하나는 이 데이터를 하나의 공통 포맷으로 통합하는 것입니다.Apache NiFi는 이 문제를 매우 직관적이고 강력하게 해결할 수 있습니다. 이번 실습에서는 CSV, XML, JSON 파일을 읽어 JSON으로 통합하는 기본 파이프라인을 구축해 보겠습니다. 실습 목표Input (CS..