OSS数据节点数据映射

Data Mapping—OSS

数据映射配置是将数据源数据与数据目的地数据关联起来的步骤,是DataPipeline产品支持多元异构场景的核心,通过图形化的配置,您可以轻松地建立不同数据节点之间的数据映射,来为数据任务的运行做准备。

关于此功能

OSS数据节点数据映射功能分为表映射和字段映射两个部分,通过数据结构定义与数据清洗脚本,可对数据映射进行更加特异化的调整,我们将分两部分介绍数据映射。

◎ 表映射

配置OSS数据节点表映射

  • 选择同步列表

  • 写入文件配置

    • 动态目录定义

    • 新建文件大小限制

    • 写入时间限制

  • 创建新文件

◎ 字段映射

配置OSS数据节点字段映射

  • 调整字段映射内容

  • 定义写入数据结构

最后更新于

这有帮助吗?