Cortex Framework 可扩展性指南

Google Cloud Cortex Framework 提供数据产品加速器，用于高级分析和 AI。本文档介绍了如何自定义和扩展 Cortex Framework。

为了实现适当的隔离和生命周期管理，自定义基础模块和数据产品模块应打包在自定义命名空间内。本指南涵盖了三个主要的可扩展性方面：

• 数据基础模块创建：注册自定义数据模块，以定义自定义编译行为或从不受开箱即用支持的源系统（例如 Salesforce）注入表。
• 数据产品模块创建：使用本地 SQLX 或 JS 文件通过自定义逻辑创建新的分析型数据产品。
• 智能体式数据产品创建：使用自主 AI 编码助理技能（create-data-product、validate-data-product）来搭建、开发、验证和部署自定义数据产品。

注意： 您无需创建自定义数据基础模块即可注入和转换其他标准表或自定义表。您可以将此类额外的表直接添加到标准模块的表配置中，也可以按照部署配置中的说明，在 config/config.yaml 中配置现有模块的多个实例。

注意 ：如果您想在 Google Cloud 控制台中直接在远程 Dataform 工作区中添加自定义代码（例如 .sqlx 或 .js 文件），而无需在源代码管理中创建完整的数据产品模块，则必须将其放置在 definitions/custom/ 目录中。否则，您的自定义文件将在下次 Cortex Framework 部署运行 (cortex-deploy) 期间被删除或覆盖。

示例情境

为了说明扩展 Google Cloud Cortex Framework 的端到端示例，本指南提供了使用 SAP 航班安排数据的实用示例：

1. 命名空间定义：为了打包和隔离自定义模块，我们引入了专用自定义命名空间 sap_bookingdatamodel。如需了解详情，请参阅自定义命名空间设置。
2. 数据基础扩展：虽然添加表通常只需要修改表设置，但此演练演示了如何创建自定义数据基础模块，以说明封装和编译器自定义。如需了解详情，请参阅创建数据基础模块。
3. 创建自定义数据产品：此数据产品会使用 sflight 基础表，将其与标准 SAP 汇率表 (tcurr) 联接，并将机票价格从当地货币转换为美元 (USD)。如需了解详情，请参阅创建数据产品模块。