普元数据开发平台 普元数据开发平台
产品介绍
安装部署
快速入门
操作指南
FAQ
  • 开发示例
  • 开发批量作业
  • 开发实时作业
  • 开发通用模板
  • 开发程序
  • 开发作业流

# 开发示例

本章节将详细指导用户如何使用 DWS IDE 进行数据类业务场景的开发。主要有:

# 开发批量作业

  • 关系型表数据同步示例
  • 关系型表数据同步示例(从步骤中插入变量)
  • 关系型表数据同步示例(替换SQL语句变量)
  • Excel 文件输入示例
  • 文件输出示例
  • JavaScript脚本使用示例
  • 执行 SQL 示例
  • 合并记录示例
  • RestClient 示例
  • 数据脱敏示例

# 开发实时作业

  • Kafka 数据同步到 PostgreSQL 示例
  • Kafka 数据同步到 PostgreSQL 示例(带函数)
  • Elasticsearch 同步到 MySQL示例

# 开发通用模板

  • PDI-关系型数据库同步示例
  • PDI-时间戳关系型数据库到Hive增量同步示例
  • Seatunnel-starRocks到关系型数据库同步示例
  • Seatunnel-CDC增量同步示例

# 开发程序

  • SQL程序示例
  • Shell程序示例
  • Flink程序实例

# 开发作业流

  • 开发作业流示例
  • 开发作业流流程控制示例