Data Engineering
2025. 6. 3.
데이터 카탈로그(Data Catalog)
조직 내의 모든 데이터 자산을 검색하고 이해하기 쉽게 정리해놓은 중앙 집중식 저장소도서관의 책 목록처럼, 어떤 데이터가 어디에 있고, 어떤 의미를 가지며, 누가 소유하고, 어떻게 사용해야 하는지에 대한 정보단순히 데이터베이스 목록을 넘어, 데이터에 대한 메타데이터(Metadata)와 컨텍스트를 제공하여 사용자가 필요한 데이터를 쉽게 찾고 활용할 수 있도록 돕는 도구즉, 회사 데이터에 대한 나무위키데이터 카탈로그의 필요성기업들은 엄청난 양의 데이터를 다양한 시스템에 저장하고 있음. 이런 환경에서 다음과 같은 문제점들이 발생데이터를 찾기 어려움: 어떤 데이터가 어디에 있는지, 최신 버전인지, 어떤 의미를 가지는지 알기 어려워 데이터를 찾고 이해하는 데 많은 시간과 노력이 소요데이터 중복 및 불일치: 동일한 ..