用户6780870

腾讯云

开发者社区

文档建议反馈控制台

首页TVP

LV0

我关注的人

Kettle构建Hadoop ETL实践（三）：Kettle对Hadoop的支持

本篇演示使用Kettle操作Hadoop上的数据。首先概要介绍Kettle对大数据的支持，然后用示例说明Kettle如何连接Hadoop，如何导入导出Hadoo...

用户1148526 2020-09-022020-09-02 10:59:05

hadoop、hive、mapreduce、大数据、spark

Kettle构建Hadoop ETL实践（二）：安装与配置

在前一篇里介绍了ETL和Kettle的基本概念，内容偏重于理论。从本篇开始，让我们进入实践阶段。工欲善其事，必先利其器。既然我们要用Kettle构建Hadoop...

用户1148526 2020-08-262020-08-26 10:12:30

大数据、java、jar、linux、数据库

Kettle构建Hadoop ETL实践（十）：并行、集群与分区

本专题前面系列文章详细说明了使用Kettle的转换和作业，实现Hadoop上多维数据仓库的ETL过程。通常Hadoop集群存储的数据量是TB到P...

用户1148526 2020-12-082020-12-08 10:23:08

大数据、数据库、数据集成、sql、编程算法

Kettle构建Hadoop ETL实践（九）：事实表技术

上两篇里介绍了几种基本的维度表技术，并用示例演示了每种技术的实现过程。本篇说明多维数据仓库中常见的事实表技术。我们将讲述五种基本事实表扩展，分别...

用户1148526 2020-11-262020-11-26 17:27:52

大数据、sql、数据库、数据分析、编程算法

Kettle构建Hadoop ETL实践（八-2）：维度表技术

数据仓库中的关联实体经常表现为一种“父—子”关系。在这种类型的关系中，一个父亲可能有多个孩子，而一个孩子只能属于一个父亲。例如，通常一名企业员工...

用户1148526 2020-11-122020-11-12 11:10:41

大数据、编程算法、sql、数据库

Kettle构建Hadoop ETL实践（八-1）：维度表技术

前面文章中，我们用Kettle工具实现了Hadoop多维数据仓库的基本功能，如使用Sqoop作业项、SQL脚本、Hadoop file outp...

用户1148526 2020-11-122020-11-12 11:15:32

大数据、云数据库 SQL Server、hive、网络安全、sql

Kettle构建Hadoop ETL实践（七）：定期自动执行ETL作业

一旦数据仓库开始使用，就需要不断从源系统给数据仓库提供新数据。为了确保数据流的稳定，需要使用所在平台上可用的任务调度器来调度ETL定期执行。调度模块是ETL系统...

用户1148526 2020-10-262020-10-26 11:44:51

bash、bash 指令、hive、yarn、node.js

Kettle构建Hadoop ETL实践（六）：数据转换与装载

本篇重点是针对销售订单示例创建并测试数据装载的Kettle作业和转换。在此之前，先简要介绍数据清洗的概念，并说明如何使用Kettle完成常见的数据清洗工作。由于...

用户1148526 2020-10-262020-10-26 11:42:56

hive、内容分发网络 CDN、编程算法、mapreduce、数据库

Kettle构建Hadoop ETL实践（五）：数据抽取

本篇介绍如何利用Kettle提供的转换步骤和作业项实现Hadoop数据仓库的数据抽取，即ETL过程中的Extract部分。首先简述Kettle中...

用户1148526 2020-10-102020-10-10 11:43:35

xml、数据结构、编程算法、unix、大数据

Kettle构建Hadoop ETL实践（四）：建立ETL示例模型

从本篇开始，介绍使用Kettle实现Hadoop数据仓库的ETL过程。我们会引入一个典型的订单业务场景作为示例，说明多维模型及其相关ETL技术在Kettle上的...

用户1148526 2020-09-082020-09-08 22:04:32

hive、日志数据、数据分析、数据处理、数据库

Kettle构建Hadoop ETL实践（一）：ETL与Kettle

我在2017年写了一本名为《Hadoop构建数据仓库实践》的书。在这本书中，较为详细地讲解了如何利用Hadoop（Cloudera's Distribution...

用户1148526 2020-08-172020-08-17 15:03:26

大数据、数据分析、数据可视化、编程算法、命令行工具

10个微服务设计模式

微服务设计模式是一种指导微服务架构设计和开发的一系列原则和实践。微服务设计模式的目的是为了解决微服务架构中遇到的一些常见的问题和挑战，比如服务划分、服务通信、服...

wayn 2023-08-222023-08-22 17:06:32

微服务

应用架构之道：分离业务逻辑和技术细节

硬是要给一个概述，我认为架构就是对系统中的实体以及实体之间的关系所进行的抽象描述。

架构之家 2022-07-122022-07-12 15:45:01

系统架构、分布式

领域驱动设计（DDD）的几种典型架构

我们生活中都听说了DDD，也了解了DDD，那么怎么将一个新项目从头开始按照DDD的过程进行划分与架构设计呢？

肉眼品世界 2022-04-192022-04-19 10:52:35

微服务、架构设计、uml

聊聊六边形架构

指导我们写出漂亮代码有一种方式是学习设计模式，自从 Gof 四人组的《设计模式》出版后，各类设计模式的书层出不穷。熟读这类书籍，对面试肯定是有帮助的，但代码能力...

oec2003 2023-10-252023-10-25 10:24:46

微服务、测试、架构、接口、系统

构建可扩展的应用：六边形架构详解与实践

在现代软件开发中，构建可扩展、可维护、可测试的应用程序是一个不断挑战的任务。为了解决这一挑战，开发人员需要采用适当的架构模式，以确保代码的灵活性和可维护性。本文...

疯狂的KK 2023-09-062023-09-06 16:46:54

系统架构、架构设计、企业级互联网架构

（四）DDD之“架构”——没有规矩，不成方圆

一提到分层架构，大家应该都不会陌生。因为当我们开始从事软件开发这一行业的时候，接触到的企业项目基本都是采用分层架构的。它产生的时间比较早，可以说，分层架构模式被...

爪哇缪斯 2023-05-102023-05-10 11:37:09

ddd、架构、模型、事件、数据

DDD分层架构浅析

微服务架构模型有好多种，例如整洁架构、CQRS和六边形架构等等。每种架构模式虽然提出的时代和背景不同，但其核心理念都是为了设计出“高内聚低耦合”的架构，轻松实现...

架构狂人 2023-08-162023-08-16 13:41:14

微服务、ddd、服务、架构、模型

A Java Fork/Join Framework（Doug Lea 关于java Fork/Join框架的论文翻译）

Doug Lea State University of New York at Oswego Oswego NY 13126 315−341−2688...

冬天里的懒猫 2020-09-242020-09-24 10:30:25

unix、java、jvm、其他、编程算法

Jdon框架开发指南「建议收藏」

大家好，我是架构君，一个会写代码吟诗的架构师。今天说一说Jdon框架开发指南「建议收藏」,希望能够帮助大家进步!!!

Java架构师必看 2022-02-232022-02-23 13:26:50

xml、java、struts、uml、编程算法

12 下一页

个人简介

暂未填写公司和职称
暂未填写个人简介
暂未填写技能专长
暂未填写学校和专业
暂未填写个人网址
暂未填写所在城市
加入社区时间：2019-11-25

个人成就

TA 很懒，什么都没有留下╮（╯＿╰）╭

关注了：12关注者：0