2回答
我试图使用awk过滤出文件中的数据。,it,bfsi,spark,hadoop,bigdata,etl,pentaho,611,devJohn,bangalore,software,it,bfsi,spark,hadoop,bigdata,etl,pentaho,823,dev
从现在起，我得到的结果是所以预
浏览 0提问于2018-10-29得票数 1
回答已采纳
我想通过使用cdap源代码插件来读取Sftp服务器可用的csv文件。 at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2809) ~[org.apache.hadoop.hadoop-comm
浏览 4提问于2019-11-04得票数 1
这里有一种情况:我负责构建基于java的ETL软件(EAI )的迁移。我必须将其迁移到Hadoop ( apache版本)。现在，从技术上讲，这更像是重新启动，而不是迁移--因为我没有数据库可供迁移。这是关于利用Hadoop的，因此，转换阶段( 'ETL')是并行的-iz-ed。这会让我的ETL软件
更快的转换parallel-iz-ed.Scalable处理更
浏览 3提问于2011-06-06得票数 3
回答已采纳
我得到了
hadoop jar camus-etl-kafka-0.1.0-SNAPSHOT.jar at com.linkedin.camus.etl<
浏览 2提问于2016-04-27得票数 0
我非常了解SSIS，Informatica，用于执行ETL过程&将数据加载到数据仓库。我们可以用Hadoop代替ETL工具，比如Informatica用于ETL过程吗?
在这里，我基本上是在谈论关系表结构。我知道hadoop可以用于从非结构化数据中提取信息。
浏览 7提问于2014-05-29得票数 1
假设我有一个基数组我想按照基数组的相同顺序排列第二个数组let object1 = [{Name: "Java", ResourceCount: 3}, {Name: "DotNet", Resourc
浏览 7提问于2019-10-29得票数 1
回答已采纳
Defaults to deflateetl.deflate.level=6 at org.apache.hadoop.mapreduce.JobSubmitter.writeNewSplits(JobSubmitter.java:301)
at org.apache.hadoop.mapreduce.JobSubmi
浏览 2提问于2015-11-16得票数 0
有没有任何方法直接从Hadoop/HDFS (本地/本地集群)将数据加载到Redshift & Bigquery。我需要将1TB的数据加载到Redshift & Bigquery。所以寻找有效的方法来做这件事。
谢谢
浏览 1提问于2014-06-06得票数 3
回答已采纳
1回答
binaries.at org.apache.hadoop.util.Shell.getWinUtilsPath(Shell.java:333)@Test val conf = new SparkConf()
val sc = new SparkConte
浏览 1提问于2014-07-02得票数 0
回答已采纳
我是的新手，我正在尝试将Server数据库中的表映射到MySQL数据库。我已经面对了很多问题，我设法解决了，即：
Am使用system.profile.properties.dataproc:dataproc.conscrypt.provider.enable = false来防止另一个问题中报告的SSL问题。$ETLMapper.map(ETLMapReduce.java:23
浏览 4提问于2019-07-11得票数 0
回答已采纳
2回答
宾得和哈多普
、、、
如果这个问题看起来很幼稚的话，我很抱歉，但是我对数据工程领域还很陌生，因为我现在是一个自学的人，但是我的问题是像宾得和Hadoop这样的ETL产品之间有什么区别呢？当我用这个代替那个的时候？
浏览 0提问于2018-04-25得票数 2
回答已采纳
2回答
Spark能否取代ETL工具
、、、、
现有的流程原始结构数据被复制到Redshift的登台层。然后使用Informatica、Telend等ETL工具对数据仓库/数据仓库的事实表和维度表进行增量加载。所有的连接都发生在数据库层( ETL将查询推到数据库中)- Spark可以取代ETL工具并进行相同的处理并将数据加载到Redshift中吗？-这种架构的优点和缺点是什么？
浏览 1提问于2016-11-26得票数 10
当我在cmd和pycharm中给pyspark时，我也面临着同样的问题，有没有人能帮我一下？提前谢谢。recent call last): spark = Spa
浏览 20提问于2020-12-02得票数 0
我是Hadoop的新手，如果我的问题太不成熟，我深表歉意。但是，在基于Hadoop的数据库中是如何工作的呢？在客户端，如果请求特定的报告，这需要来自Ha
浏览 2提问于2015-12-23得票数 0
1回答
现在，尝试以两个不同的用户身份通过hadoop fs <path to the hdfs location>访问HDFS路径：[ml1@HW04 ml1c<path to the hdfs location>"
[hph_etl@HW04 hph_etl]$ hadoop fs -ls <path to- hph_etl hph_etl<
浏览 0提问于2019-08-09得票数 0
回答已采纳
1回答
只是想得到一个Terraform问题的答案。我感兴趣的是在湖形成中使用受治理的表，并使用Terraform来分配资源。目前是否有可能形成这些地形？文档看起来很稀少。这是当前胶表的。它在任何地方都没有提到受支配的表。
浏览 7提问于2022-04-06得票数 2
回答已采纳
1回答
我正在将SSIS解决方案转换为Hadoop，以便在数据仓库中进行ETL处理。我的预期系统：问题是:在转换阶段，我需要从hadoop端(pig或mapreduce作业)在MySQL中查找数据。有两种解决办法：2：查询直接到MySQL。我担心MySQL服务器上会有很多连接。解决这
浏览 1提问于2013-10-04得票数 0
回答已采纳
2回答
我最近开始研究Hadoop环境。我需要做一些基本的ETL来填充几个表。目前，我正在使用sqoop将数据导入Hadoop，并使用Impala shell命令编写用于转换的SQL查询。但是这些天我听说了很多关于星火的事。在我的情况下，我会有什么好处写我的ETL在星火而不是黑斑羚壳？
谢谢S
浏览 2提问于2019-02-02得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
