咨询电话
400-6240-800
GEO业务专线
400-6298-600
商务邮箱
business@percent.cn
更多联系方式 > >
logo
  • 首页
  • 产品
    arrow
    数据智能引擎
    • 百思数据治理大模型
    • 百思数据治理平台
    • 大数据操作系统
    • 资源服务系统
    • 主数据管理系统
    • 指标管理系统
    • 百思智能应用
    行业智能应用
    • 智能安全分析系统
    • 智慧应急决策系统
    • 舆情洞察系统(Mediaforce)
    • AI搜索洞察系统(Generforce)
    • AI境界
  • 行业服务
    arrow
    智慧政务
    • 数字城市
    • 应急管理
    • 智慧公安
    • 生态环境
    • 数字营商
    • 智慧统计
    数字产业
    • 央国企数字化
    • 零售快消
    • 汽车制造
    • 医药健康
    • 地产行业
    • 媒体报业
  • 案例
  • 生态合作
  • 关于我们
    arrow
    • 公司介绍
    • 新闻动态
    • 加入我们
    • 联系我们
    • 资源中心
  • EN
  • 产品 toggletoggle
    百思数据治理大模型
    百思数据治理平台
    大数据操作系统
    资源服务系统
    主数据管理系统
    指标管理系统
    百思智能应用
    智能安全分析系统
    智慧应急决策系统
    舆情洞察系统
    AI搜索洞察系统
  • 行业服务toggletoggle
    数字城市
    应急管理
    智慧公安
    生态环境
    数字营商
    智慧统计
    央国企数字化
    零售快消
    汽车制造
    医药健康
    地产行业
    媒体报业
  • 案例toggletoggle
    智慧政务
    数字产业
  • 生态合作
  • 关于我们toggletoggle
    公司介绍
    新闻动态
    加入我们
    联系我们
    资源中心
phone咨询电话
400-6240-800
phoneGEO业务专线
400-6298-600
关注我们
关注我们
©2026 百分点科技集团股份有限公司 保留所有权利
京ICP备09109727号-15
京公网安备11010802036555号
法律声明
隐私政策
帮助文档
  • 百思数据治理平台


    新增FTP数据接入

    FTP数据接入是指通过sqoop插件把FTP中的文件接入到HDFS系统或者Hive数据库中。

    新增一条Sqoop连接记录,设置FTP源和目标,配置FTP数据接入规则。保存后可在工作流中以Sqoop脚本形式调用。


    相关参数说明:

    字段

    说明

    基本信息

    资源名称

    数据接入的业务名称。

    导入方式

    数据接入到Hive或HDFS中。

    源

    FTP源

    加载出配置中心配置的FTP的所有资源名称。

    资源文件目录

    FTP文件的路径,必须为有权限的路径。支持动态时间规则文件名,时间规则如yyyy-mm-dd,目录名/时间规则拼起来为最终资源文件目录,从此目录中读取数据,参数根据任务运行日期更新替换。

    目标

    目标源

    加载出配置中心配置的类型为hive的资源名称。

    目标库

    根据所选的Hive目标源,加载出该项目有权限的所有数据库名称。

    目标表名

    根据选择的Hive目标库,加载出该库下有权限的所有表名。

    HDFS路径

    Hdfs的绝对路径,存储数据的目录。

    高级设置

    是否覆盖

    指执行接入操作时是否覆盖之前导入的数据。是:每次执行都会清空之前导入的数据,重新导入;否:每次执行会保留之前已存在的数据,然后将新的数据进行追加。

    队列

    指定执行该数据接入任务的队列。


    配置完成后,执行sqoop操作验证配置是否成功。当分区值为变量时,执行Sqoop时需要输入分区变量值。过程日志:点击执行按钮可以查看过程日志;结果日志:执行完成后查看结果日志。可以查看是否导入成功。

    图 执行Sqoop接入数据.png

    图 执行Sqoop接入数据


    编辑FTP数据接入

    编辑FTP数据接入的配置。


    删除FTP数据接入

    删除:删除FTP数据接入的配置。


    查询FTP数据接入

    查询:可以根据资源名称,数据源名称查询。

    图 查询FTP数据接入.png

    图 查询FTP数据接入