腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
宾得和哈多普
、
、
、
如果这个问题看起来很幼稚的话,我很抱歉,但是我对数据工程领域还很陌生,因为我现在是一个自学的人,但是我的问题是像宾得和
Hadoop
这样的
ETL
产品之间有什么区别呢?当我用这个代替那个的时候?
浏览 0
提问于2018-04-25
得票数 2
回答已采纳
3
回答
Hadoop
作为
ETL
工具
的替代品,如SSIS、Informatica?
、
、
、
、
我非常了解SSIS,Informatica,用于执行
ETL
过程&将数据加载到数据仓库。我们可以用
Hadoop
代替
ETL
工具
,比如Informatica用于
ETL
过程吗? 在这里,我基本上是在谈论关系表结构。我知道
hadoop
可以用于从非结构化数据中提取信息。
浏览 7
提问于2014-05-29
得票数 1
1
回答
hadoop
和informatica相关吗?
、
我是
hadoop
技术的新手。通过阅读一些博客,我想知道
hadoop
和informatica是否相关?
浏览 4
提问于2014-11-04
得票数 0
2
回答
将数据直接从
Hadoop
/HDFS (本地/本地集群)加载到Redshift & Bigquery
、
、
、
、
有没有任何方法直接从
Hadoop
/HDFS (本地/本地集群)将数据加载到Redshift & Bigquery。我需要将1TB的数据加载到Redshift & Bigquery。
浏览 1
提问于2014-06-06
得票数 3
回答已采纳
2
回答
与
HADOOP
数据库Hbase关联的
ETL
?
、
、
嗨,有人能告诉我哪些
ETL
工具
可以与
hadoop
的数据库Hbase一起使用吗?我的意思是说,像oracle数据库中的数据是如何被用来拉取数据和在Informatica和SSIS这样的
工具
中工作的,有没有什么
ETL
工具
可以用于Hbase?请帮帮我。
浏览 0
提问于2011-03-25
得票数 1
1
回答
选择合适的
工具
替换IBM DataStage
ETL
工具
我们正在寻找现有DataStage
平台
的替代品。它有大约1500多个映射/数据存储作业在前提下。这些映射还具有一些复杂的转换和映射。它是一个完整的
ETL
架构的前提.如果需要用microsoft
平台
(SSIS或Azure数据工厂)替换(数据),那么可以使用SSIS
工具
替换哪些选项。备选方案: 如果选择SSIS
工具
,则需要将所有数据存储凭证(带有
ETL
转换)重写到SSIS,然后SSIS可以通过Azure数据工厂运行。可以重写Azure数据工厂中的所有
ETL
数据传输
浏览 2
提问于2020-02-09
得票数 1
1
回答
将数据从SQLDB复制到
hadoop
、
、
、
、
我正在研究一个用例,我们将把数据从SQL数据库(600TB ~100个表)转换成
hadoop
格式。我们在SQL DB中没有启用日志。我们决定将数据复制为datamart视图,并每周刷新该视图。我们确定了3种选择: 用于处理excludedKafka (informatica)
ETL
(Informatica)的AirFlow + Beam与optionnaly CDC Debezium (连接、流、沉入
hadoop
)。
浏览 1
提问于2020-11-17
得票数 0
1
回答
如何使用
Hadoop
、Hive和Sqoop从MS SQL Server检索和分析数据?
、
、
我想对数据库(MS SQL Server)中的数据进行分析。那么,如何在Sqoop/Hive的帮助下将数据传输到HDFS上呢?是否可以使用Hive/Sqoop?请给我提个建议,我们该怎么做?
浏览 0
提问于2011-12-05
得票数 0
回答已采纳
2
回答
Spark能否取代
ETL
工具
、
、
、
、
然后使用Informatica、Telend等
ETL
工具
对数据仓库/数据仓库的事实表和维度表进行增量加载。所有的连接都发生在数据库层(
ETL
将查询推到数据库中)- Spark可以取代
ETL
工具
并进行相同的处理并将数据加载到Redshift中吗?-这种架构的优点和缺点是什么?
浏览 1
提问于2016-11-26
得票数 10
1
回答
五旬斋的
工具
正在消亡吗?
、
我很难找到有用的五旬节
ETL
工具
信息,这个
工具
快死了吗?可供选择的
工具
/
平台
>
浏览 3
提问于2021-08-03
得票数 1
2
回答
将列与多个可能的值匹配
、
、
,it,bfsi,spark,
hadoop
,bigdata,
etl
,pentaho,611,devJohn,bangalore,software,it,bfsi,spark,
hadoop
,bigdata,
etl
,pentaho,823,dev 从现在起,我得到的结果是karthick,bangalore,software,it,bfsi,spa
浏览 0
提问于2018-10-29
得票数 1
回答已采纳
3
回答
是否有一些Pig实时用例可用?
、
同样好奇的是,Pig是否可以在
Hadoop
世界中用作
ETL
工具
。
浏览 1
提问于2016-07-17
得票数 0
1
回答
从大型机中提取数据到
hadoop
、
从大型机中提取数据到
hadoop
的可能方法是什么?是否有任何
ETL
工具
提供相同的内置功能?我希望从文件和数据库中提取数据。
浏览 1
提问于2014-05-05
得票数 0
1
回答
是什么让Apache Pig成为
ETL
工具
?
、
如果有人能给我解释一下是什么让Apache Pig成为
ETL
工具
,以及它的反面是什么,我会很高兴。我知道
ETL
意味着提取、转换和加载数据,Pig就是这么做的,但其他
平台
也是如此,比如Flink,Spark和R(你获取数据,执行一些操作,然后加载到其他地方),我找不到任何信息说这些
工具
也被认为是
ETL
也许我没有完全理解
ETL
是什么意思?谢谢。
浏览 2
提问于2015-03-11
得票数 0
3
回答
将作业从talend DI导出到talend大数据
、
、
、
、
我是talend
ETL
工具
的新手,我在talend DI(数据集成)
工具
中创建了工作流程,现在我想用
hadoop
切换/实现相同的任务,因为我使用的是talend大数据
工具
。
浏览 5
提问于2016-06-15
得票数 0
回答已采纳
2
回答
CDAP源插件从Sftp服务器读取数据
、
(FileSystem.java:2798) ~[org.apache.
hadoop
.
hadoop
-common-2.8.0.jar:na] at org.apache.
hadoop
.fs.FileSystem.access$200
浏览 4
提问于2019-11-04
得票数 1
1
回答
操作大数据和分析大数据之间的混淆,以及
Hadoop
在哪个类别上操作?
、
有点类似于RDMS中的
ETL
。 分析大数据:我们在回顾中分析数据,并使用MPP和MapReduce等技术绘制预测的分支。有点类似于RDMS中的报告。因此,据我所说,
Hadoop
用于分析大数据,我们只是处理数据以进行分析,但不对原始数据进行调整,因此并不是
ETL
的理想选择。但是最近我遇到了这篇文章,它提倡为
ETL
:使用
Hadoop
。
浏览 0
提问于2018-12-31
得票数 0
回答已采纳
1
回答
我们如何处理
Hadoop
DB中处理过的数据(输出)?
、
、
我是
Hadoop
的新手,如果我的问题太不成熟,我深表歉意。 我知道
Hadoop
用于分析大型数据集上的数据。最后,我们如何处理分析的数据,创建报告和演示文稿?但是,在基于
Hadoop
的数据库中是如何工作的呢?在客户端,如果请求特定的报告,这需要来自
Hadoop
DB的数据点,那么流程会是怎样的?我确信客户端不会直接在
hadoop
中运行Job来获取生成报告所需的数据,因为
hadoop
作业需要更多的时间来处理。我的问题是,通过在
hadoop
DB上运行MR作业,处理的数据(结
浏览 2
提问于2015-12-23
得票数 0
1
回答
将Java应用程序迁移到
Hadoop
:架构/设计障碍?
、
、
这里有一种情况:我负责构建基于java的
ETL
软件(EAI )的迁移。我必须将其迁移到
Hadoop
( apache版本)。现在,从技术上讲,这更像是重新启动,而不是迁移--因为我没有数据库可供迁移。这是关于利用
Hadoop
的,因此,转换阶段( '
ETL
')是并行的-iz-ed。这会让我的
ETL
软件 更快的转换parallel-iz-ed.Scalable处理更多的数据/大数据意味着增加更多的nodes.Reliable -
Hadoop
的冗余和可靠性将增加我
浏览 3
提问于2011-06-06
得票数 3
回答已采纳
1
回答
ETL
的Kylo和nifi用法
、
、
我们已经开始探索和使用Nifi for数据流作为一个基本的
ETL
工具
。了解了Kylo作为一个在Nifi上工作的数据采集特定
工具
。是否有任何使用Kylo的行业用法和模式,或者是否有任何文章给出了Kylo的用例/优先于自定义
Hadoop
组件,如Nifi/Spark?
浏览 4
提问于2018-03-15
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
ETL-KETTLE工具使用
ETL数仓工具Kettle初识
大数据平台架构+ETL
NoSQL为什么需要模式自由的ETL工具?
为什么NoSQL需要无架构的ETL工具?
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券