ETL是什么?
ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL是BI项目中重要的一个环节,用户从数据源抽取出所需的数据,经过数据清洗,*终按照预先定义好的数据模型,将数据加载到数据仓库中去,为后续的数据分析提供数据支撑。
市场面上大多BI工具都不含ETL功能,在进行数据分析项目时,通常会用到BI、ETL两个工具,成本高、花费时间长。而Smartbi推出可视化ETL功能,通过简单的拖拽就可以完成ETL过程。ETL通常是将多来源的异构数据,进行处理后得到具备完整性、一致性的数据模型。
我们将从Smartbi中的自助ETL的应用场景入手,带你了解使用自助ETL是如何高数据的质量!
自助ETL场景应用
操作步骤
1、在Smartbi系统主界面的快捷菜单中选择 数据准备 > 自助ETL,进入“自助ETL”管理界面。
2、在“自助ETL”管理界面中,选择 新建自助ETL 按钮,进入“新建ETL”定制界面。
3、在此界面可以设计定制ETL工作流。
1、将关系数据源节点拖入画布区,在节点配置区设置关系数据源的参数。
2、在关系数据源上右键选择 执行到此处 ,运行当前节点。
3、点击查看输出,可查看关系数据源节点输出的数据,如下:
将表的数据导入当前工作流完成,下面对数据进行 数据预处理 。
需要在表中添加序号,并去除采购金额字段的小数位。
1、将增加序列号节点拖入画布区,连接两个节点,设置序列列名称。
2、将派生列节点拖入画布区,连接两个节点。在节点配置区选择 派生列配置 按钮。
3、将对应函数和字段分别拖入添加/编辑表达式区,点击 确定 按钮,添加一条“采购金额取整”的派生列。
4、在派生列节点上右键,选择 执行到此处 ,运行当前节点。派生列节点输出的数据如下:
数据预处理完成,下面将处理好的数据输出。
将处理好的数据输出成一张新的表。
1、将关系目标源家待拖入画布区,选择输出表的数据源、SCHEMA,并选择 新建表 按钮。
2、新的表命名为“产品销售数据表”,点击 创建表 按钮。
3、点击 运行 按钮,创建一张新的表。
流程运行完成后,关系目标源节点输出的数据如下:
一般情况下,ETL过程设计是需要用到大量的代码,且重复利用率较低。但Smartbi的自助ETL功能充分结合大量项目人员实施习惯,操作敏捷易用,通过封装ETL算法,将技术分离,以数据源——数据预处理——目标源的形式,实现业务人员进行自助ETL操作。Smartbi自助ETL的主要应用场景是将多来源的异构数据,进行处理后得到具备完整性、一致性的数据模型。使用自助ETL可以提高数据的质量、适应不同的数据分析方法。
免责声明:当前页为 业务人员可以进行自助ETL操作?这款BI工具你值得拥有产品信息展示页,该页所展示的 业务人员可以进行自助ETL操作?这款BI工具你值得拥有产品信息及价格等相关信息均有企业自行发布与提供, 业务人员可以进行自助ETL操作?这款BI工具你值得拥有产品真实性、准确性、合法性由店铺所有企业完全负责。世界工厂网对此不承担任何保证责任,亦不涉及用户间因交易而产生的法律关系及法律纠纷,纠纷由会员自行协商解决。
友情提醒:世界工厂网仅作为用户寻找交易对象,就货物和服务的交易进行协商,以及获取各类与贸易相关的服务信息的渠道。为避免产生购买风险,建议您在购买相关产品前务必确认供应商资质及产品质量。过低的价格、夸张的描述、私人银行账户等都有可能是虚假信息,请您谨慎对待,谨防欺诈,对于任何付款行为请您慎重抉择。
投诉方式:fawu@gongchang.com是处理侵权投诉的专用邮箱,在您的合法权益受到侵害时,请将您真实身份信息及受到侵权的初步证据发送到该邮箱,我们会在5个工作日内给您答复,感谢您对世界工厂网的关注与支持!