【Doris实时数仓】一键执行全链路加工，告别繁琐ETL！原创

Doris实时数仓全链路加工，实时采集、规范建模、资产复用、敏捷分析，一键执行，全链路加工告别繁琐ETL还在为数据表同步繁琐、跨表分析耗时长、多部门取数混乱、汇报整理低效发愁吗？现在带您体验all data数据中台的数据全流程高效加工处理，按需输出分层分析数据高效赋能多部门业务使用与数据可视化汇报落地第一步，数据同步分层运行分析本次操作将同步Miss code的电商订单事务表misslor进行同步，并关联用户表user进行分析。首先查看原表，并在目标端的这四个层中预先创建数据表。现在打开实时开发IDE先检查集群状态，然后在数据开发中创建项目并添加作业进行flink语句编。

填写完成后，点击执行执行提示成功后打开运维中心，进入详情页面查看运行详细，这里可以看到全链路加工流程的工作流详细，在SQL血源这里可以进行溯源，可以查看原表和目标表每个字段的对应关系，也可以进入flink页面中查看运行状态。现在返回数据源管理中，查看全链路加工后的数据情况。这一层进行了原表同步，这一层订单关联，用户变成一张完整的大宽表，这一层按用户汇总，算清楚每个人花了多少钱，这一层按省份汇总，直接生成业务报表，一键触发，全链自动跑通，一次加工多部门秒级共。

想让数据流转就这么简单。第二步，创建API访问接口一次配置，按需可见，用接口授权为每个部门定制专属数据视野，打开连接管理，检查数据源是否正常连接，然后打开接口配置进行创建，选择SQL语句创建，这里设置了能从S层的这个数据表中获取哪些数据，然后点击接口配置进行设置，这里是设置接口接收或返回的数据格式是什么，这里根据业务和部门设置。这里选择纯查询接口，不修改数据，适合大屏可视化调用。如果需要新增数据，选择这个要进行全量更新，选择这个要进行删除。

图数据选择这个完成后点击保存公开接口，让所有人都能调用，然后将接口正式上线使用。点击打开swagger页面，这里选择创建的接口，并点击execute，执行在线模拟发送请求，实时测试接口是否可用，并查看真实返回的数据。这里显示测试接口调用成功，数据已正常返回。第三步，数据可视化，激活API数据资产，以奥林可视化透视全链路业务全貌。打开数据视图，进行新建数据图表类型，这里选择通过数据表新建视图，然后主表这里选择全链路分析的数据表作为视图数据来源。

点击执行后查看数据信息，然后点击保存，填写视图名称，点击开始分析，进行可视化编辑。这里可以选择可视化的形式，如柱状图或表格圆饼图等。本次操作选用柱状图进行可视化操作。这个是维度类可视化维度决定分组依据是什么，数据怎么看？这部分是指标类可视画中指标决定数据结果，数据看什么？从左侧将需要的字段拖拽到中间对应的区域进行可视化编辑分类。每分组依据通常放置文本或日期类字段，数值计算字段，系统会对其执行聚合运算，如求和或平均值等。数据过滤条件只展示满足条件。

的数据，这里是颜色映射依据，这里是详细信息标签显示在图表上额外展示的文本信息。这里设置是按省份分组，汇总每个省份的订单总数，并用不同颜色区分各省份。数据完成后点击保存并填写名称后完成可视化。这里还可以导出成PDF或表格等形式，方便汇报等场景使用。在可视化中还可以新建仪表盘，将数据图添加进表盘中进行归类管理，点击编辑进行添加数据图，在这里选择引入已有数据图表进行添加，如果相同业务的数据图表也可以放到同一个仪表盘。

中进行管理。至此，全链路操作已完成。