应用方案手册-2021.05数据采集用友网络科技股份有限公司版权用友集团未经用友集团的书面许可,本应用方案手册任何整体或部分的内容不得被复制、复印、翻译或缩减以用于任何目的。本应用方案手册的内容在未经通知的情形下可能会发生改变,敬请留意。请注意:本应用方案手册的内容并不代表用友所做的承诺。用友网络科技股份有限公司2目录版权1变更记录.4第一章整体概述..51.1总体概述.51.2应用概述.61.3应用价值.6第二章应用场景..72.1数据源配置.72.2中间件配置.82.3传输监控.9附录2:本文参见其他手册清单..12用友网络科技股份有限公司3导读此手册面向实施顾问以及企业关键用户,旨在为实施规划、解决方案制定和落实提供指导。手册围绕产品能够解决的主要业务场景展开,并以此为依托展现产品的关键应用功能,提供业务需求与产品功能相匹配的思路。本手册包括三大部分,第一部分是对产品及其价值的概要介绍;第二部分是对有关本模块的主要业务场景、流程、以及对应的业务功能的介绍;第三部分是初始准备设置;此外,为了便于用户对整体内容加深理解,手册中对一些关键的名词进行了解释,并在附录中对一些可能需要对照查询的关键点进行了补充说明,以便用户查找对照。为突出重点,本手册定位于方案性说明,仅对产品操作中的重要控制点有所描述。若读者希望深入了解特定板块的产品应用,可结合本手册,查阅如下资料:1.《NCCloud应用方案手册—权限管理》-----手册阐述了如何创建管理员、如何配置业务职责与管理职责,应用权限分别对应数据智能模块的数据权限与应用权限。2.《NCCloud应用方案手册--基础数据》-----可对手册第三部分(即初始准备设置)中的有关基础数据的理解和应用进行更详细深入地了解。用友网络科技股份有限公司4变更记录编写人王志杰版本修订人审核人起止时间修订/审核章节修订/审核内容2021.052021.06.23用友网络科技股份有限公司5第一章整体概述1.1总体概述现如今,大数据正在改变各国综合国力,成为重塑未来国际战略格局的变量。从中央到地方、从政府到企业,数据中心新基建被提升到前所未有的战略高度。在“十四五规划”中,大数据中心建设与5G、人工智能、工业互联网一同被提及,成为未来国家战略中的一个重要衡量指标。NCCloud数据智能模块旨在帮助企业实现数据探索、企业数字化转型的先驱型产品。产品通过连接NCCloud内部业务数据与社会数据的形式,通过大数据、AI算法、运筹算法等方式,实现企业客户对数据价值链的挖掘,帮助企业在不同业务场景下实现数据决策或数据驱动的业务模式。图1.1NCCloud数据智能应用蓝图用友网络科技股份有限公司61.2应用概述数据采集是数据智能产品的数据初始化组件,是需求预测分析和供应链网络模拟的应用基础。在环境初始化完成以后需要首先进行数据采集操作。数据采集包括数据源配置、传输监控、中间件配置三个节点。数据源配置是智能产品与异构系统数据链接的桥梁,实现跨系统间的数据流转与同步。传输监控是数据采集的主要节点,进行初始数据导入和业务数据定时导入的配置。(注:传输监控中的任务分为模板导入和nifi导入,其中模板导入不依赖数据源配置和中间件配置)。中间件配置是配置nifi(数据移动工具)并初始化nifi的节点,是传输监控中定时任务的运行基础。综上所述,数据采集节点的操作顺序应该是:数据源配置-中间配置-传输监控。1.3应用价值数据采集是NCCloud数据智能模块的基础组件,它承担着NCC数据的抽取以及异构系统数据的整合工作,是产品从业务驱动转变为流程驱动的基础能力。用友网络科技股份有限公司7第二章应用场景2.1数据源配置数据采集是NCC数据智能产品应用的基础,通过数据采集可实现NCC业务数据的归集,异构系统数据的采集,为数据智能业务场景的实现奠定坚实基础。图2.1数据采集核心功能打开数据源配置节点,点击查询按钮(图中所选搜索标书);图2.2数据源配置操作用友网络科技股份有限公司8点击表体行操作列中的配置按钮,查询预置好NC抽取表结构;输入数据来源的数据库连接配置确认,完成数据源匹配;图2.3数据源密码配置2.2中间件配置打开中间件配置节点,点击右上角的编辑按钮配置nifi的环境ip和端口并保存(目前没有用户名和密码)图2.4编辑NIFI配置依次点击连通测试和nifi初始化;用友网络科技股份有限公司9初始化完成后,系统与NC数据库完成匹配;图2.5NIFI初始化页面2.3传输监控传输监控包括传输任务和传输日志两部分,传输任务是进行数据导入的操作面板,传输日志是nifi导入的日志。1.系统数据采集系统数据采集时间配置:可配置系统自动采集的时间,按月/周/日进行配置,配置完成后系统自动执行采集任务;注:批量关联数据源仅限于NC标准数据库的数据源,异构系统和手工数据需要手工导入;用友网络科技股份有限公司10图2.6数据采集的时间设置配置玩采集时间后,可设置启停用规则,在停用状态下和手工执行数据采集;图2.6数据采集启停与手工执行2.手工数据采集按表体行下载数据导入模板,录入业务数据;用友网络科技股份有限公司11图2.7线下数据导入数据编辑完成后,点击数据导入,导入成功后系统提示成功;图2.8线下数据导入数据采集传输日志:记录系统数据源的数据量采集表名,执行的时间等信息;用友网络科技股份有限公司12附录2:本文参见其他手册清单序号手册名称备注1《NCCloud数据智能-供应链网络模拟》2《NCCloud数据智能-需求预测分析》用友网络科技股份有限公司13大型企业数字化平台ADigitalPlatformforLarge-scaleEnterprises用友网络科技股份有限公司YonyouNetworkTechCo.Ltd.用友网络科技股份有限公司