帮助与文档
大数据操作系统 > 用户操作指南 >工作流作业 > 节点使用说明 > 数据同步
数据接入
DB或FTP数据接入到指定的Hive或HDFS中,选择定义好的数据接入资源,运行后定时批量接入数据。
变量写变量名,sqoop里传过来的如分区值的变量day_id,值用${}表示,写${day_id},工作流前节点传过来的;如果是常量,直接写成20160913 ‘admin’ 即可(字符串要用单引号括起来) 。
图 数据接入节点界面
相关参数说明:
字段名称 | 字段说明 |
节点Id | 由用户自定义,用来标识该服务的唯一性。 |
节点名称 | 由用户编写,用来标识该节点的名称。 |
项目 | 将要调用的流程所在的项目。 |
导入类型 | DB数据接入或FTP数据接入资源。 |
接入资源 | 根据导入类型选择已定义好的该项目内的数据接入资源。 |
备注 | 由用户编写,用来简述该节点的相关信息。 |
数据导出
将Hive或HDFS中的数据导出至DB或FTP中,选择定义好的数据导出资源,运行后定时批量导出数据。
变量写变量名,sqoop里传过来的如分区值的变量day_id,值用${}表示,写${day_id},工作流前节点传过来的;如果是常量,直接写成20160913 ‘admin’ 即可(字符串要用单引号括起来) 。
图 数据导出节点界面
相关参数说明:
字段名称 | 字段说明 |
节点Id | 由用户自定义,用来标识该服务的唯一性。 |
节点名称 | 由用户编写,用来标识该节点的名称。 |
项目 | 将要调用的流程所在的项目。 |
导出类型 | 数据导出DB或FTP数据导出资源。 |
导出资源 | 根据导入类型选择已定义好的该项目内的数据导出资源。 |
备注 | 由用户编写,用来简述该节点的相关信息。 |