数据中台“管数”系列之(2)三分钟完成API数据处理
视频简介
本视频介绍如何在三分钟内使用ETL工具将API数据导入数据库中:
(1)读取API数据;
(2)对敏感数据脱敏;
(3)将加工后的数据存入数据库中;
视频内容
大家好,龙石数据中台在经历了功能完善、体系标准和简洁易用三个研发阶段之后,现已上线3.0版本。本期视频为大家展示如何实现API数据的读取加工和数据入库工作。
(1)进入数据中台的流程开发模块,新增数据流程。将输入组件中的API组件拖入面板,双击API组件,设置相应的基本属性。填入接口地址,选择跟接口对应的请求方式,调用API接口;
(2)选择输入组件中的JSON组件,双击组件设置相应的基本属性。接收API数据,并解析接口返回报文;
(3)在流程中选择条件判断组件,以身份证号是否为空为控制条件。如果身份证不为空,则通过数据脱敏组件将身份证第七位和第十位替换为星号。如果身份证为空,选择空操作组件。通过空操作组件来放弃该笔空数据;
(4)选择输出组件中的数据库输出组件,设置对应的目标库和目标表,自动完成字段匹配。保存并执行流程,就轻松实现了对API数据的处理和入库;
以上就是使用ETL工具将API数据导入数据库的整个过程。
【图(1)】
感谢观看,更多详细内容欢迎查看官网或联系我们。