使用数据管道( (s3://elasticmapreduce/samples/Store/ProductCatalog) )将数据从S3导入到Dynamo DB表的亚马逊网络服务文档引用了以下格式的S3首先，我如何将一个有400万行的CSV转换成这种格式？有没有什么实用的工具？
谢谢你的建议...我在谷歌上搜索得很好，但没有找到任何东西。
浏览 3提问于2016-08-02得票数 1
它们的功能似乎是一样的： 1 create table number double);
(name string,
location '/directory-path/file.csv'; 它们都将数据从HDFS上的目录拷贝到配置单元</
浏览 134提问于2016-02-18得票数 14
2回答
我需要你的一些帮助来解决一个关于从hive重新引用数据的问题。以下情况:我将CSV文件data.csv导入hadoop。现在，我发现了许多使用外部表在csv文件之上创建模式的代码片段。我的问题是，hive如何知道外部表的模式连接到data.csv。在示例中，我找不到对csv文件的引用。sample_1.csv在this hive example中的用法在哪里引用，或者hive如何知道来自sample
浏览 8提问于2020-05-03得票数 0
我知道在Hive中将表格保存为csv (或其他文本文件)时存在一个分隔符的已知问题。所以我想知道你们能不能帮我解决这个问题。有人能帮上忙吗？
浏览 0提问于2015-05-14得票数 10
我正在尝试考虑一些数据的ETL过程，这些数据很可能是以CSV格式从数据源接收的。将CSV文件直接加载到数据库中，然后像ELT过程一样进行转换有什么缺点吗？
浏览 1提问于2015-08-07得票数 0
我正在尝试将hdfs中的数据插入配置单元中的外部表。但是得到了低于错误。Usage: java FsShell [-put <localsrc> ...hadoop fs -put /myfolder/logs/pv_ext/2013/08/11/log/data/Sacramentorealestatetransactions.csvfile l
浏览 0提问于2018-07-03得票数 2
18回答
谁能告诉我Hive的外部表和内部表之间的区别。我知道不同之处在于丢弃桌子的时候。我不明白你所说的数据和元数据在内部被删除，只有元数据在外部表中被删除。有人能从节点的角度给我解释一下吗？
浏览 1提问于2013-06-11得票数 117
回答已采纳
我有两个环境，即Dev和stage。两者都安装了hive (2.1版)。在Dev上，我有指向hbase表的外部配置单元表。我得把这张蜂窝桌导出到舞台上。没有强制要求hbase表也要迁移。如果创建了包含数据的托管配置单元表，则将足够。有没有人能建议我怎么做？下面是场景的图示。任何预期场景的解决方案都将是有用的。将配置单元表的
浏览 1提问于2018-01-30得票数 1
1回答
如何从只有几个特定字段的XML文件中创建HIVE表？例如，我有一个包含1000个字段的XML文件，但我的HIVE表中只需要100个字段。除此之外。如何将这100个字段存储在不同的数据库和不同的表中？
浏览 0提问于2018-04-17得票数 1
1回答
我从HDFS中获取一个CSV文件，并将其传输到配置单元中的外部表。
但是我的CSV文件有分隔符“；”，在我的第二列中，我有“；”和信息。是否有任何配置单元属性允许我执行此操作或任何其他解决方案？
浏览 13提问于2021-09-02得票数 1
点击下面的链接，我对引用中的数据没有任何问题。我创建的外部表具有以下serde属性，但是由于某些原因，默认的escapeChar('\')正在被quoteChar替换，对于我的数据，它是doublequotes(")。org.apache.hadoop.hive.serde2.OpenCSVSerde' "escapeChar" = "\\"STORED AS TEXTFI
浏览 2提问于2017-10-06得票数 1
2回答
假设我有这两张桌子：create external table emp_feedback ( emp_name stringLOCATION '/user/内部 emp_id int,)
当我说:外部表</em
浏览 1提问于2018-02-02得票数 2
回答已采纳
1回答
记录中的配置单元"\n“值
、、、、
数据首先以csv文件(制表符分隔)的形式从sql server表加载到aws s3，然后在此文件的顶部创建配置单元外部表。从配置单元外部表中查询数据时遇到问题。我注意到csv在许多列字段中包含\n (在sql server中实际上是“null”)。现在，当我创建hive表时，出现在任何记录中的\n将hive带到新记录，并为该记录中的其余列生成NU
浏览 2提问于2016-11-08得票数 1
在Hue --> Hive Query Browser中，我在Hive中创建了一个外部表，并使用以下语句将数据从我的一个CSV文件加载到其中：我看到源文件"movies“从HDFS中消失，并移动到配置单元</
浏览 13提问于2016-09-12得票数 0
回答已采纳
该作业的输入和输出都是NullWritable。我必须使用这个框架，但我还必须将该作业中的数据写入HDFS。此外，我写的数据必须是可以通过Hive查询的。 有没有办法做到这一点？我知道如何在Java中通过hadoop文件系统API导航和操作文件。我遇到的主要问题是让这些文件可以通过Hive查询。
浏览 22提问于2019-08-24得票数 0
|-- MCODE: string (nullable = true)
|-- NewClosedDate: timestamp (nullable = true 我们还有一个非常大的Avro形式的外部配置单元表文件中的三列查找外部配置单元表：ACCT_NO - SUBID - MCODE。如果匹配，则使用CSV文件中的NewClosedDate更新accountlinks.account.closeddate。我已经编写了以下代码
浏览 15提问于2020-01-13得票数 0
2回答
假设，我从文件myFile.csv (位于HDFS中)创建了配置单元外部表"myTable“。谢谢。我想知道它与目录的工作方式是否相同:比方说，当"myDir“包含10个文件时，我从HDFS目录"myDir”创建配置单元分区。我应该更新配置<
浏览 1提问于2013-06-10得票数 6
回答已采纳
1回答
我已经在hive中创建了一个表。create table demo(no int, name string)
但是，当iam在该表中插入值时，会显示以下错误。如果可能，也请告诉我有关外部文件的信息？
浏览 0提问于2013-06-11得票数 3
回答已采纳
2回答
我必须创建一个自动进程来列出Hive中的所有外部表，并对这些表进行记录计数。
我应该把它当做日常工作来做。我尝试过对所有外部表名进行硬编码，但这是不被接受的，因为表每个月都会更改一次。
浏览 2提问于2018-05-15得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
