数据流数据抽取(脚本查询)介绍

栏目:云苍穹知识作者:金蝶来源:金蝶云社区发布:2024-09-23浏览:1

数据流数据抽取(脚本查询)介绍

变更记录


产品版本
更新内容更新日期
V6.0.000初始版本2023年08月25日
V6.0.12
支持WebAPI调用2024年05月15日


1 简介

1.1 功能介绍

用于定义数据抽取的资源。允许用户在数据流中通过脚本形式从源数据中抽取所需的信息。该资源连接到数据源并执行查询操作,将查询结果作为输出提供给后续的数据处理资源


1.2 应用场景

当需要使用数据流图设计器进行编排时,需要事先定义好数据查询节点,利用脚本从特定数据源中抽取特定的数据,以实现数据集成和整合。

注:如果入参是一条数据,但是结果可能是一条或者多条数据,且维度不统一,则建议使用脚本查询进行数据的抽取。


1.3 系统路径

【集成服务云】→【数据流】→【资源开发】 →【数据流资源】


1.4 关键字段/按钮说明

关键字段说明

字段名称详细解释
输出结果行描述

选择数据模型承载脚本查询处理的结果,即脚本return的结果,用于后续节点使用或者在日志中分析。

查询条件参数

选择查询组件的入参结构,该参数将作为过滤条件的比较值使用。若不想进行过滤请选择预置的“数据查询空参数”结构。

时间戳字段当数据流中断后重新执行恢复查询结果流时,需要使用该字段 + 主键字段 计算CRC校验码,以定位到上次中断时的位置。该字段一定要添加到结果字段中。


2 主要操作

2.1 新增选择数据查询

于数据抽取分类下,选择“脚本查询”栏目。



2.2 信息填写及条件定义

步骤1:基本信息填写,并选择查询条件参数和输出结果行描述的数据模型。



步骤2: 编辑查询脚本




2.3 调用WebAPI

前置步骤:在集成管理的WebAPI中已经登记了外部系统接口。


步骤1:在依赖的WebAPI中新增外部系统接口,并填写别名。



步骤2:在查询脚本中通过别名调用外部系统接口,如:Fn(body, header, urlParam) 。

注:脚本查询中返回的数据结构应该是list map,如:[{},{},{}]。



数据流数据抽取(脚本查询)介绍

变更记录产品版本更新内容更新日期V6.0.000初始版本2023年08月25日V6.0.12支持WebAPI调用2024年05月15日1 简介1.1 功能介绍用于定义数据...
点击下载文档
确认删除?
回到顶部
客服QQ
  • 客服QQ点击这里给我发消息