Impala无法删除外部表
Impala是一种高性能的分布式SQL查询引擎，用于在Hadoop生态系统中进行交互式数据分析。它可以快速查询大规模数据集，并且与Apache Hadoop生态系统的其他组件（如HDFS和Hive）无缝集成。
对于Impala无法删除外部表的问题，可能有以下几个原因和解决方法：
- 权限问题：确保当前用户具有足够的权限来删除外部表。可以通过授予用户相应的权限或使用具有足够权限的用户进行操作来解决此问题。
- 表正在被使用：如果外部表当前正在被其他查询或作业使用，Impala将无法删除它。在删除之前，确保没有其他进程正在使用该表。
- 表不存在：如果尝试删除的外部表在Impala中不存在，可能是因为表名拼写错误或者表在外部存储系统中已经被删除。在删除之前，确认表名的正确性并检查外部存储系统中是否存在该表。
- 元数据同步问题：如果Impala的元数据与外部存储系统的元数据不同步，可能导致无法删除外部表。可以尝试使用Impala的REFRESH命令来刷新元数据，以确保Impala中的元数据与外部存储系统保持同步。
总结起来，要解决Impala无法删除外部表的问题，需要确保用户具有足够的权限、表没有被使用、表存在且名称正确、元数据同步正常。如果问题仍然存在，可以进一步检查Impala和外部存储系统的日志以获取更多详细信息。
关于腾讯云的相关产品和产品介绍链接地址，可以参考腾讯云官方文档或联系腾讯云客服获取更详细的信息。
相关·内容
我使用一个S3位置和一个分区创建了一个带有Impala的表，但是在查询时没有填充任何数据。我该如何克服这个问题呢？
create table t(id int, name string) partitioned by (year int)
stored as avaro
location 's3a://impala-/dir1/';
浏览 0提问于2017-07-28得票数 0
我有一个非常大的拼板表，其中包含嵌套的复杂类型，如structs和数组。我已经按日期对其进行了分区，并希望将某些用户限制在最近一周的数据上。
通常这样做的方法是在桌面上创建一个有时间限制的视图，例如：
“”将视图time_limited_view创建为SELECT *，来自my_table WHERE partition_date >= '2020-01-01‘“
当查询Hive中的视图时，这将工作得很好。但是，如果我试图从Impala查询此视图，则会得到一个错误：
** AnalysisException:选择列表中的Expr 'my_table.struct_colu
浏览 3提问于2020-01-13得票数 1
回答已采纳
1回答
无法访问Impala中的配置单元表，该表对日期列创建了分区。使用dynamic partition column选项插入数据。现在，impala中不支持日期数据类型。我应该怎么做才能在impala中访问这个表。是否有在配置单元中创建时间戳分区的选项?如果有，方法是什么？
浏览 3提问于2019-05-20得票数 1
首先，抱歉，如果我的措辞不太好的话，我试着帮助自己，但我不清楚哪里不对。
我试图查询从另一个系统导出的Impala中的数据。到目前为止，它被导出为一个管道分隔的文本文件，通过创建带有正确分隔符设置的表，在文件中复制，然后运行refresh语句，可以导入该文本文件。
我们遇到了一些问题，有些字段有断行字符，这使得我们看起来有更多的数据，而且它不一定适合我创建的元数据。
有人建议，我们可以使用Parquet格式代替，这将处理内部线打破罚款。
我收到了一些数据，看起来有点像这样(我更改了用户名)：
-rw-r--r--+ 1 UserName Domain Users 20M Jan 17 10:
浏览 0提问于2019-01-23得票数 0
我在hdfs中有一个数据源，它的文件没有压缩，即使它们的名称以(*.csv.gz)结尾，而Impala无法识别它们没有压缩。有没有一种方法可以读取外部表中的这些文件，而不需要更改所有当前文件的名称？如果没有，那么在hdfs中更改所有当前文件名的最佳实践是什么？ 以下是该表的当前创建查询： CREATE EXTERNAL TABLE db.table1(
col1 type,
col2 type
)
ROW FORMAT DELIMITED FIELDS TERMINATED BY '\u0001'
WITH SERDEPROPERTIES ('field.
浏览 32提问于2021-07-18得票数 1
回答已采纳
总之，我是新手，很少尝试用例。我在hdfs中有一个文件，并且希望加载到黑斑马表中。
-文件在上的位置:hdfs://xxx/user/hive//
- TABLE ：创建表impala_test_table (File_Format STRING，Rank TINYINT，Splitable_ind STRING )行格式，行格式以'\，‘结束为文本文件；
-中的加载语法:在路径中加载数据‘hdfs://xxx/user/ hive //impala_test’到表impala_test_table中；P.S :我能够成功地用hive加载它。
path="/user/hive
浏览 0提问于2017-03-17得票数 1
1回答
你好，我想在HBase上创建数据库模式和一些表，例如，我想通过Impala这样做。
CREATE TABLE media.post
(RowKey string,
HashTag string,
PostID string,
PostImpact int,
PostSentiment string,
CreationDateTime timestamp);
当我这样做时，我创建了一个表，但是在HDFS上，而不是在HBase上，因此我无法通过HBase...is连接到它，甚至可以在HBase上运行这样的sql？
浏览 3提问于2016-05-26得票数 1
回答已采纳
我在这个链接上看到了影响的链接
从Impala 1.1开始，REFRESH语句只适用于现有表。对于新表，需要发出“失效元数据”语句。
对于后来版本的Impala来说，这仍然成立吗？
浏览 9提问于2017-02-15得票数 14
每当我试图在IMPALA中选择一个日期类型字段时，我就会从一个在单元格中创建的表中选择一个AnalysisException:不支持的类型' DATE‘。
有什么解决办法吗？
UPDATE --这是一个从hive创建表模式的示例和一个查询
模式：
创建表myschema.mytable(day_dt date，event string)
分区(day_id int)
存储为INPUTFORMAT“org.apache.hadoop.mapred.TextInputFormat”
OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.HiveIgn
浏览 1提问于2018-01-15得票数 2
回答已采纳
我在一个文件中有一个表列表：tables.txt
内容如下：
db.tab1
db.tab2
等等，现在我将它传递给一个函数，并计算每个表中的记录数。
def rec_count(table_name):
impala_cmd_cnt = "impala-shell -i %s -q 'select count(*) from %s'"%(impala_node,table_name)
impala_cmd_res = os.system(impala_cmd_cnt)
impala_cmd_res包含执行代码，即成功的执行代码为0，失败的代码
浏览 2提问于2018-10-17得票数 0
回答已采纳
1回答
这里，我让python实用程序使用Pyarrow库为单个数据集创建多个parquet文件，因为数据集的大小在一天内是很大的。这里的拼花文件包含10K的拼板行组，在每个分割的拼花文件中，最后我们将分裂的文件组合成一个文件来创建一个大的单一的拼花文件。这里，我创建了两个Impala表，其中包含一个合并文件和多个拆分文件。
当分割文件数据加载在Impala表中并试图查询它时，结果在几秒钟内就会更快地出现，但是当Impala表创建在单个合并的拼花文件上时。它将提供性能问题，与提到的分割文件Impala表。当试图计算Impala表上的统计数据时，我无法识别这两个表之间的差异。
有任何想法，为什么这种性能
浏览 0提问于2019-01-28得票数 0
回答已采纳
1回答
设置事务性表属性将导致外部表。
、、、、
我正在通过Impala创建一个托管表，如下所示：
CREATE TABLE IF NOT EXISTS table_name
STORED AS parquet
TBLPROPERTIES ('transactional'='false', 'insert_only'='false')
AS ...
这将导致不支持managed table的HIVE-ACID。但是，当我运行命令时，我仍然会得到一个外部表。为什么会这样呢？
浏览 2提问于2021-03-01得票数 0
回答已采纳
5回答
我对Hadoop (HDFS和Hbase)和Hadoop生态系统(Hive，Pig，Impala等)相当陌生。我对Hadoop组件(如NamedNode、DataNode、Job、Tracker )有很好的理解，以及它们如何协同工作，以高效的方式存储数据。
在试图理解数据访问层(如Hive )的基本原理时，我需要了解表的数据(在Hive中创建)究竟存储在哪里？我们可以在Hive中创建外部和内部表。由于外部表可以在HDFS或任何其他文件系统中，因此Hive不将此类表的数据存储在仓库中。内部桌子呢？此表将作为Hadoop集群上的一个数据节点上的目录创建。一旦我们从本地或HDFS文件系统中加载这些表
浏览 11提问于2015-10-28得票数 4
1回答
我正在尝试通过Dask Library连接到Impala DB，以便使用read_sql_table()从表中获取所有数据。需要连接字符串连接，我已经尝试使用连接字符串，我通常在Dbeaver连接，但它失败了，无法加载插件：'impala‘。 是否有人可以帮助我使用Dask库连接到Impala DB，或者让我知道Dask是否支持Impala连接？谢谢。
浏览 46提问于2021-11-09得票数 0
我必须将长Teradata脚本(10,000行长)翻译成Impala。我以前从没和黑斑羚做过这种事。
我必须使用的工具是黑斑羚壳或色调。
我还没有见过一个长超过50行的Impala代码的例子，无论是在黑斑羚壳还是在色调上。有人能给我举一个至少500行长的黑斑羚剧本的例子吗？
我可以处理语法的变化，我不需要在这方面的建议。我正在寻找在这些工具中编写长代码的陷阱或陷阱。
浏览 0提问于2018-07-10得票数 1
2回答
黑帕拉三角洲湖泊一体化
、、、、
我在Cloudera建立了德尔塔湖。它对火花和蜂巢很好。
我已经在互联网上搜索了足够多的东西，可以把达美湖和黑斑羚结合起来。
我没有找到多少信息。
如果你做过同样的事，谁能回答吗？
更新：
不需要Impala删除/更新Delta表。Impala将只用于从Delta (构建在Parquet之上)表中查询/选择数据。
希望这可以做到与良好的性能使用Delta连接器？
基本上，Impala将用于临时查询/仪表板/ BI，如果用户需要更新/删除，那么它将在用户创建的新表上完成(在这里可以使用Kudu)，而不是在完成select的原始表上。
希望这能澄清。请建议一下。如果有更多的信息请告诉我。是必需的。
浏览 11提问于2022-10-10得票数 0
回答已采纳
我有一个snappy.parquet文件，我想通过impala或beeline将它完整地移动到一个表中，通过以下方式创建表
CREATE EXTERNAL TABLE IF NOT EXISTS first_test LIKE PARQUET '/user/my_user/my_table/part-00000-c0544fc8-b709-4408-8e90-f0f9e4050691-c000.snappy.parquet'
由于某种原因无法工作，因为当我通过spark.read.parquet在spark中读取这个文件时，它显示为Fetched 0 row(s) in 0.3
浏览 30提问于2018-06-07得票数 0
回答已采纳
如何以编程方式查找所有需要INVALIDATE METADATA语句的Impala表(因为它们是在Hive中创建的，但尚不为Impala所知)或REFRESH (因为添加了列、添加了数据文件等)？
浏览 0提问于2018-08-28得票数 3
1回答
我有一个程序，它生成有关Impala表分区的所有数据。此程序将数据写入HDFS文本文件。
如何(物理上)删除以前属于分区的所有数据，并将其替换为以Parquet格式转换的新文本文件中的数据？
如果我物理地删除使用原始HDFS组成分区的旧Parquet文件，它会干扰Impala吗？
浏览 9提问于2017-04-20得票数 1
回答已采纳
1回答
我正在尝试将HIVE外部表上的几列从双小数点更改为小数点。我已经删除，重新创建了表，并运行了msck repair语句。但是，我无法从Hive或Impala中选择表，因为它返回以下错误：
Hive: ERROR processing query/statement. Error Code: 0, SQL state: File 'hdfs://ns-bigdata/user/warehouse/fact/TEST_FACT/key=2458773/000000_0' has an incompatible Parquet schema for column 'testi
浏览 4提问于2021-12-10得票数 0
回答已采纳
1回答
我将数据以下面的格式存储在hdfs中，并使用"alter table add partition“命令将这些数据插入到impala分区表中。
/user/impala/subscriber_data/year=2013/month=10/day=01 /user/impala/subscriber_data/year=2013/month=10/day=02
一切都运行得很好。
现在我有了一个新数据，其中月份和年份分别为10和01。现在我需要处理这些数据，并将这些数据附加到现有的hdfs目录中(year=2013/month=10/day=01)。
当我尝试处理并插入到hdfs目录中时
浏览 2提问于2014-11-19得票数 2
我能够通过Apache演练连接到Kudu，并且能够很好地列出表。但是，当我不得不从下面的"impala::default.customer“表中获取数据时，我尝试了不同的选项，但没有一种是适合我的。
Kudu中的表是通过Impala-Shell作为外部表创建的。
与库都的初始连接以及列出对象
ubuntu@ubuntu-VirtualBox:~/Downloads/apache-drill-1.19.0/bin$ sudo ./drill-embedded
Apache Drill 1.19.0
"A Drill is a terrible thing to waste.
浏览 3提问于2021-10-01得票数 0
我有一个CSV数据，每个字段都用双引号括起来。当我使用serde 'com.bizo.hive.serde.csv.CSVSerde‘创建配置单元表时，当在Impala中查询上面的表时，我得到错误SerDe not found。
我在/usr/lib/impala/lib文件夹中添加了CSV Serde JAR文件。
后来在Impala文档中研究发现，Impala不支持自定义SERDE。在这种情况下，我如何克服这个问题，以便我的CSV数据与引号是小心的。我想使用CSV Serde，因为它在值中使用逗号，这是一个合法的字段值。
非常感谢
浏览 0提问于2014-09-03得票数 6
我有一个需要加载到Hive Table中的示例文件
示例文件：'data'，'kumar's'，'big'data'，'Hive'，'impala-shell‘
我需要这样的输出: data，kumar's，big'data，Hive，impala-shell
我只需要外部引号被删除。
如果您有任何配置单元表定义或shell命令来删除外部引号，建议我
浏览 3提问于2017-09-29得票数 1
我在蜂巢有张桌子：
CREATE EXTERNAL TABLE sr2015(
creation_date STRING,
status STRING,
first_3_chars_of_postal_code STRING,
intersection_street_1 STRING,
intersection_street_2 STRING,
ward STRING,
service_request_type STRING,
division STRING,
section STRING )
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde
浏览 0提问于2018-12-03得票数 2
使用黑斑羚，我可以看到蜂巢的转移，使用任何由Hive创建的数据库，并查询由hive创建的任何表。当我试图在黑斑羚中创建一个表或做一个“无效元数据”时，我会得到
错误:无法打开本地主机的传输:26000(连接()失败:连接被拒绝)
具有以下配置。这是一个多节点集群配置*手工构建，即不使用Cloudera *
CentOS 6
CDH4.5
黑斑羚1.2.1
蜂巢MySQL Metastore
impalad运行在具有数据节点的多个节点上。
状态和目录在一个节点上运行，而该节点不是impalad节点。
在/etc/default/impala中，我已经将IMPALA_S
浏览 0提问于2013-12-12得票数 0
我正在使用Talend Open Studio进行数据集成。当我创建到impala数据库的新连接时，它可以工作，我甚至可以找到表，但我无法在当前作业中添加此组件，我收到以下错误：
Cannot apply drag and drop operation on this component currently.
如果我使用impala组件导入项目，它会提示缺少此组件。根据文档，我应该安装timpala组件，但我没有这个选项。
浏览 3提问于2021-11-25得票数 0
我在做hadoop、hive、impala和kudu的研发。已安装HADOOP、HIVE、IMPALA和KUDU服务器。
我已经在/etc/default -> impala文件中配置了--kudu_master_hosts=：。如下所示：
IMPALA_SERVER_ARGS=" \
-log_dir=${IMPALA_LOG_DIR} \
-catalog_service_host=${IMPALA_CATALOG_SERVICE_HOST} \
-state_store_port=${IMPALA_STATE_STORE_PORT} \
-u
浏览 2提问于2018-07-03得票数 0
1回答
重新启动Impala服务器后，我们无法看到表(即表没有出现).Anyone帮助我我们必须遵循什么顺序才能避免此问题。
谢谢，斯里尼瓦斯
浏览 0提问于2017-04-01得票数 0
我正在尝试通过impala jdbc通过URL在kudu上创建表
jdbc:impala://host:21050/default;AuthMech=0;UID=impala;
但出现错误:表所有者不能为null或空。
有什么帮助吗？
浏览 12提问于2021-05-31得票数 0
我使用mysql将hdfs表复制到sqoop中，然后使用"create external table“命令在impala中创建同名表。
现在，我有更多的数据要插入到impala表中，使用java api of Impala，即ImpalaService.jar。请帮助我在表中使用java api插入数据。
谢谢。
浏览 2提问于2014-05-14得票数 1
回答已采纳
有几个Impala表应该不断更新。我怀疑由于某些其他原因，更新脚本停止工作。在Impala中，有没有什么命令可以用来跟踪Impala表的更新状态，或者列出表更新的最新时间步长。
浏览 4提问于2016-04-26得票数 0
1回答
在使用Python时，每次执行只能运行一个命令。我正在使用Python2.7。
我想创建两个常见的表表达式，然后加入它们，但是我无法让它工作。
如果我使用Impala在色调中运行SQL，它就会失败，因为每次执行只能运行一个命令。
如果我在两个单独的表表达式中创建公共表表达式，然后在python中执行，然后尝试将两个cte连接到第三个执行中，我将得到无法解析“cte.”的错误。第一次执行完成后，CTE似乎不会停留在内存中。这里的工作是在Impala中创建临时表，而不是使用CTE。最后，我将使用星火数据帧并加入其中，但一个权限问题是阻止Spark在不久的将来从Impala表中读取。
浏览 3提问于2017-12-14得票数 0
回答已采纳
我使用python/cx_Oracle选择Oracle数据并插入到具有相同字段类型的Impala中
我在Oracle表中有number字段，它的示例数据是这样的。
0.1428571428571428571428571428571428571429
0
0.2111
2.1
0.04
因此，我试图创建sql字符串，以便像这样在Impala中执行插入数据。
sql4Impala = "insert into test01.ornek_2 values (%f, '%s', '%s', '%s', '%s')" % (
浏览 1提问于2015-11-12得票数 0
回答已采纳
2回答
我创建了Cloudera集群，并从oracle DB导入了一些示例测试文件。但是过了一段时间，我不得不更改节点的主机名。我遵循了cloudera网站上提到的指南，一切都很好。但是，当我尝试访问表(同时使用hive和impala)时，我在前面创建了以下错误:获取结果会遇到以下错误：
java.io.IOException: java.lang.IllegalArgumentException: java.net.UnknownHostException:旧主机名
然后，我在同一个DB下创建了另一个表(使用Hue>Metastore表)，并且我可以毫无问题地访问在新主机名下创建的这些新表。
浏览 2提问于2014-11-18得票数 2
回答已采纳
我正在寻找用于Postgres 9.5的Impala外国数据包装器。我试着从互联网上找出，只能有一个参考，但似乎fdw还没有完成，根据自述文件。
有人可以引导我到其他可用的Impala FDW，我可以用来连接Postgres到Impala？
浏览 3提问于2016-06-02得票数 0
2回答
我想写一个完整的表格到s3a的拼图格式。让我们将该表命名为abc_schem.thattable。我想使用Impala查询来选择* WHERE to_date(create_time) = 'YYYY-MM-DD‘
要将其写入Parquet S3的确切语法是什么？
浏览 0提问于2018-11-15得票数 0
2回答
使用impyla模块，我已经将impala查询的结果下载到pandas数据帧中，完成了分析，现在希望将结果写回到impala上的一个表中，或者至少写到一个hdfs文件中。
但是，我找不到任何关于如何做到这一点的信息，甚至找不到如何ssh到impala shell中并从那里写入表的信息。
我想做的是：
from impala.dbapi import connect
from impala.util import as_pandas
# connect to my host and port
conn=connect(host='myhost', port=111)
# c
浏览 8提问于2015-09-02得票数 10
回答已采纳
问题陈述：
I有一个Impala数据库，其中存在多个表
，我正在创建到Impala的Spark连接，并将这些表加载到spark中，以便进行像这样的验证，这很好：
spark.read.format("jdbc") .option("url"，"url") .option("dbtable"，"tablename") .load()
现在是下一步，我的实际问题是我需要找到create语句，该语句用于在Impala本身中创建表
，因为我不能像下面这样运行命令，因为它会产生错误，所以是否可以为Impala中的表获取sho
浏览 2提问于2020-08-13得票数 2
回答已采纳
2回答
我面对这个问题:我们有一个共享的用户，我们使用来自同一台机器的impala-shell进行impala查询。我不希望我的查询可见，我希望能够清除我的黑斑狼壳历史记录。我们通过以下方式访问impala： impala-shell 任何用户通过使用向上键都可以看到所有的queries.How我可以这样做吗？
浏览 17提问于2019-02-21得票数 0
回答已采纳
1回答
我们已经通过cdh6.2安装了集群。使用pyspark创建一个dataFrame，然后将其保存到hive。 已在仓库中正确创建该文件，但无法使用show tables在配置单元或impala中找到该文件。 它可以通过spark sql使用sql.(“show tables”)找到。但它只显示了以前由spark代码创建的表，这意味着它不能看到通过hive或impala控制台创建的表。 所以我认为可能spark代码没有收集到Hive Metastore服务器。 但我不知道如何将其设置到Hive Metastore服务器。
浏览 12提问于2019-05-15得票数 0
我想从impala表中删除记录。下面，我已经习惯于从表中删除记录。
这是我的问题：
DELETE FROM sample.employee_details WHERE sno=5 AND name='XYZ'AND age=26;
建议从表中删除记录的最佳方法。
浏览 19提问于2019-07-19得票数 1
回答已采纳
1回答
在Spark2.1中，我经常使用类似于
df = spark.read.parquet(/path/to/my/files/*.parquet)
加载一个文件夹的拼花文件，即使有不同的模式。然后使用SparkSQL对dataframe执行一些SQL查询。
现在我想试试Impala，因为我读了，它包含了如下句子：
Apache是一个开源的大规模并行处理(MPP) SQL查询引擎，用于存储在运行Apache的计算机集群中的数据.
读取Hadoop文件格式，包括text、LZO、SequenceFile、Avro、RCFile和Parquet。
因此，听起来它也适合我的用例(并且执行速度可
浏览 1提问于2018-01-19得票数 3
回答已采纳
1回答
我必须将一些Impala shell命令迁移到Hive。它们是非常简单的命令，但我对它们有点迷惑，因为我知道它们每一个都做了什么，但我不知道它们在Hive中的等效形式。
TABLE=$(impala-shell -i ${server} --delimited --quiet -q "select concat(db_normalized,'.',tb_normalized) from parametric_table where source='testSource' and product='testProduct' limit 1&
浏览 4提问于2021-07-19得票数 0
3回答
我将大量数据从S3加载到hdfs中，然后将数据插入到impala中的一个表中。
然后，我对这些数据运行了一个查询，希望将这些结果返回到S3中。
我使用的是Amazon EMR和impala 1.2.4。如果不能直接将查询结果返回到S3，有没有办法将数据返回到hdfs，然后如何从那里将数据发送回S3？
我已经修改了impala-shell -o filename选项，但这似乎只在本地linux文件系统上有效。
我认为这是一个常见的场景，但在任何地方都无法找到有关保存查询结果的任何信息。
感谢您的指点。
浏览 0提问于2015-07-20得票数 3
1回答
我有大的rdd，我想创建4个不同的rdd的基础上提供的标题列表，并通过创建4个parquest文件将其保存在impala表中。
如下所示：
a b c d e f g h
--------------------------------
abc 1 3 4 5 7 9 11
xyz 2 5 7 4 9 4 12
我有impala侧表的列的列表：
table 1 impala side :- a,b,c
table 2 impala side :- d, e, f
...
还需要为用户定义的主键的每个表
浏览 10提问于2018-07-21得票数 0
我需要关于从Hadoop datalake (Kerberos认证)导入数据到AWS的建议。Hive表中的所有表都应该放在s3中，然后需要加载到AWS RDS。我考虑过以下选项: 1) AWS Glue ? 2) Spark连接到hive metastore ? 3)从AWS连接到impala？
大约有50个表需要导入。如何维护模式？导入数据，然后在RDS中创建单独的模式是不是更好？
浏览 3提问于2018-03-10得票数 0
我曾尝试将Impala配置为在Alluxio上运行，但失败了。
以下是Impala的配置：
/etc/impala/conf/core-site.xml()
<configuration>
<property>
<name>fs.alluxio.impl</name>
<value>alluxio.hadoop.FileSystem</value>
<description>The Alluxio FileSystem (Hadoop 1.x and 2.x)</description>
浏览 5提问于2018-09-28得票数 0
3回答
我使用sqoop将数据从MySQL导入到hdfs，并将其作为片材文件，在该文件中由Impala使用。将MySQL日期类型转换为Impala时间戳存在问题。
执行compute stats table或select *时的Impala错误消息是：
File 'hdfs://....parquet'
has an incompatible type with the table schema for column 'day'.
Expected type: INT32. Actual type: INT64
将日期列的数据类型更改为BIGINT或STRING将使错
浏览 6提问于2016-01-08得票数 0
回答已采纳
1回答
我在我的问题陈述中使用了pyspark，在这里，我应该组合我的输出，并作为我的另一个模型的输入。但是在hdfs中，我的输出被分成几个部分，因此很难将它们组合在一起。
所以我想把输出结果直接存储到impala表中，我该怎么做呢？
浏览 0提问于2018-03-22得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
