데이터 기반
Cortex Framework 데이터 기반 레이어는 소스 데이터의 최신 레코드를 표준화되고 정리된 방식으로 표현하며 데이터 제품 레이어에 제공됩니다. 이 레이어는 CDC 지원 소스에 대해 증분 방식으로 업데이트되며 CDC 지원이 아닌 소스 및 외부에서 구현된 CDC 소스에도 뷰를 사용합니다. 구현은 소스 시스템의 기능에 적응합니다.
CDC 지원 소스 (Cortex Framework 관리 CDC): 전용 Dataform 파이프라인이 원시 레이어 로그를 지속적으로 업데이트되고 유지되는 '현재 상태' 테이블로 증분 처리합니다. 데이터 파운데이션 레이어는 이러한 증분 변경사항을 소스 시스템 데이터 세트의 현재 상태를 나타내는 행으로 변환하여 데이터 제품, 다운스트림 분석, AI 에이전트를 지원합니다.
CDC 처리 외에도 유연한 아키텍처를 사용하면 내장된 CDC 처리를 우회하고 다른 기존 CDC 파이프라인을 기본 레이어에 직접 연결할 수 있습니다.
CDC 지원 소스가 아닌 경우 (외부 CDC): 복제 도구 또는 소스 시스템에서 CDC를 실행하는 소스의 경우 Cortex Framework는 CDC 파이프라인을 건너뛰고 랜딩 존 데이터 세트를 데이터 제품을 제공하는 소스로 사용합니다. 뷰 기반 시맨틱 추상화 레이어 역할을 하며 즉석에서 정리 기능을 적용하여 다운스트림 데이터 제품을 스키마 변경사항으로부터 보호합니다.
Cortex Framework 데이터 기반 레이어는 동적 테이블 스키마도 지원하므로 기본 SQL 모델을 수동으로 변경하지 않고도 원시 레이어에 있는 맞춤 필드를 자동으로 수집할 수 있습니다.
또한 기술 데이터와 비즈니스 사용자 간의 격차를 해소하기 위해 Cortex Framework 데이터 기반 레이어는 광범위한 주석 라이브러리 (src/data_foundation/{foundation_name}/annotations/)를 사용하여 테이블 스키마에 사람이 읽을 수 있는 설명을 추가하여 유용성을 향상합니다. 예를 들어 빌드 프로세스 중에 Cortex Framework는 bukrs과 같은 이해하기 어려운 SAP 테이블 열에 Company Code과 같은 읽기 쉬운 비즈니스 시맨틱을 사용하여 설명을 추가합니다.
지원되는 소스 시스템
Cortex Framework 데이터 기반 계층은 다음 소스 시스템을 지원합니다.
SAP ERP에서 복제된 원시 데이터:
- SAP ECC
- SAP S/4HANA
자세한 내용은 SAP ERP의 소스 데이터 준비 문서를 참고하세요.