我有一个Hbase表，我想实时执行CRUD操作，并使用PHP和Apache Spark进行读写
我该如何做到这一点呢？
浏览 8提问于2017-07-04得票数 0
我正在尝试使用Spark来写入HBase表。我正在使用来自link的HBase火花连接器的例子。我使用spark-shell调用启动以下命令 $ spark-shell --jars /opt/cloudera/parcels/CDH/jars/hbase-spark-2.1.0-cdh6.2.1toDS
personDS
浏览 19提问于2021-02-03得票数 1
回答已采纳
尝试使用kerberos auth在集群模式下对yarn上的HBaseTest进行spark设置---master yarn-cluster/apache/hbase/conf \myhbas
浏览 0提问于2016-01-19得票数 1
2回答
我试着从PySpark的HBase中读取一个表格。
testdata_rdd = sc.newAPIHadoopRDD("org.apache.hadoop.hbase.mapreduce.TableInputFormat","org.apache.hadoop.hbase.io.ImmutableBytesWritab
浏览 1提问于2016-07-27得票数 1
我应该把菲尼克斯的数据读到pyspark里。编辑:我使用的是火花HBase转换器：port="2181"keyConv = "org.apache.spark.examples.pythonconverters.ImmutableBytesWritableToStringConverter": "camel", "hbas
浏览 5提问于2015-09-15得票数 0
1回答
" % "1.2.0", "org.apache.hbase" % "hbase-common" % "test",
"org.apache.hadoop" %
浏览 8提问于2015-08-25得票数 3
1回答
我使用的火花1.3.0与hbase 1.0。一周后。使用java代码成功运行Hbase。但当使用Hbase与火花给予错误。我还检查了hbase外壳是否工作正常。这个错误发生了很长时间，否则也可以用火花工作。
我已经检查了hadoop和hbase集群的健康状况。at org.apache.spark.rdd.Ne
浏览 6提问于2015-06-05得票数 4
我有一个CDH为5.8.4的集群。我运行在一个spark streaming应用程序中，它通过使用cloudera spark-hbase连接器，即HBaseContext，从HBase读写数据。当我启动应用程序时，我将主体和kinit提供给spark-submit脚本。我发现应用程序在7天后崩溃，并显示与HBase上下文相关的票证kerberos过期错误。下面是executors
浏览 0提问于2017-10-27得票数 1
我正在尝试使用SparkSQL/DataFrames查询加载到HBase表中的数据。我的集群基于Cloudera CDH 6.2.0 (Spark版本2.4.0和HBase版本2.1.0)。遵循指南，我在Spark Service的HBase服务属性中选择了我的HBase服务。此操作将以下jars添加到我的</
浏览 2提问于2019-11-06得票数 2
我从Spark job获取JavaBytesEncoder上的NoClassDefFoundError，它只是从HBase表中读取数据。我使用的是hbase连接器库(https://github.com/apache/hbase-connectors)。Spark版本是2.4，Scala版本是2.11.8，并且在Cloudera集群上进行测试
浏览 73提问于2019-10-08得票数 2
我的HBase是1.1.3版本，我可以使用Hbase执行CRUD操作。我正在尝试使用Java在Hbase上执行CRUD操作，我使用Netbeans并完成了Properties>Libraries>add JAR/文件夹，并从Hbase/ lib中添加了整个lib文件夹。我是进口这些：
import org.
浏览 3提问于2016-02-17得票数 2
我正在尝试查询存储在HBase中的数据，以便在AWS EMR中使用Spark ML。我应该将数据作为RDD提取(如下所示)，还是应该使用Phoenix将数据作为Dataframe进行查询？我已经尝试过通过HBase RDD和Phoenix将数据导入到Spark中。然而，我在使用这两种方法时都遇到了问题。org.apache.hadoop.
浏览 24提问于2019-06-21得票数 0
1回答
尝试从Windows中的Eclipse程序连接到Windows。如何在类路径中设置hbase-site.xml？我们是否可以在hbase-site.xml中设置sqlContext，因为我使用sql
浏览 4提问于2016-11-18得票数 0
1回答
我们可以使用任何GUI Sql工具通过putty或odbc连接中的直线(直线命令)连接到蜂箱。但我们如何才能连接到Hbase呢？根据我的理解，我们有Shell格式或Java格式的Hbase。但是我们如何连接到Hbase呢？
浏览 1提问于2020-05-12得票数 1
1回答
我正在使用Spark连接到Hbase。我已经添加了所有的依赖项，但是我仍然得到了这个异常。请帮助我，我需要添加哪个JAR来解决这个问题。{SparkConf, SparkContext} import org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.hbase</em
浏览 2提问于2018-09-17得票数 0
1回答
丝上火花+固定hbase
、、、、
我提交了一个工作给纱线(在spark 2.1.1 + kafka 0.10.2.1)，它连接到一个安全的hbase集群。当我在“本地”模式(spark.master=local*)运行时，这个任务执行得很好。to obtain password from user
我正在遵循hortonworks关于向纱线集群提供有关HBase和keytab等信息的建议。有什么指示吗？登录到HBase的</
浏览 14提问于2017-05-30得票数 6
我使用Scala在本地创建和运行Spark应用程序。org.apache.spark" % "spark-sql_2.10" % "1.2.0"libraryDepe
浏览 8提问于2015-01-22得票数 20
回答已采纳
1回答
度量收集和分析体系结构
、、、、
我们正在研制支持家庭套件的IoT设备.HomeKit是为消费者设计的，不具备收集度量标准(功率、温度等)的能力，因此我们需要单独实现它。
假设我们有10000台设备。他们每5秒发送一次度量的集合。因此，每秒钟我们需要接收10000/5=2000年的集合。最终用户需要在指定的时间内(1周、月、年等)查看每个度量的图表。因此，该系统每天将收到17.28亿条记录。这里有很多问题。首先，不需要存储所有数据，因为用户只需要指定时间段的图表，因此需要一些
浏览 0提问于2018-11-26得票数 1
我是Scala，SBT和Intellij的新手。但是，我可以导入星火库，我的星火作业在本地模式下运行，没有任何问题。 <dependency>
<groupId>org.apache.hbase</
浏览 4提问于2016-11-02得票数 1
我使用Phoenix在Hbase中创建了以下表格。upsert into test_Table(test_date) values('2013-11-30'); import org.apache.hadoop.hbase.HBaseConfiguration
浏览 29提问于2017-05-10得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
