Zeppelin中没有名为'pyspark‘的模块
在Zeppelin中没有名为'pyspark'的模块。
Zeppelin是一个基于Web的交互式数据分析和可视化平台，它提供了一种灵活的方式来处理和展示数据分析和可视化工作流。它支持多种编程语言，包括Python、Scala、R等，而pyspark是一个用于在Python中使用Apache Spark的模块。
Apache Spark是一个快速、通用的大数据处理引擎，它提供了强大的数据处理能力和分布式计算功能。pyspark是Spark提供的Python API，使得使用Python进行大数据处理和分析变得简单和方便。
在Zeppelin中，通常可以使用%pyspark魔法命令来创建一个pyspark上下文，并使用pyspark模块来执行相关的操作。但是根据题目要求，Zeppelin中没有名为'pyspark'的模块，因此无法直接使用pyspark进行相关的操作。
在云计算领域，使用Spark进行大数据处理和分析是非常常见的。对于云原生应用开发，可以使用腾讯云的Tencent Spark，它是腾讯云基于Apache Spark打造的一项云原生大数据计算服务。您可以通过访问腾讯云的Tencent Spark产品介绍页面（https://cloud.tencent.com/product/spark）了解更多相关信息。
请注意，以上答案只是根据题目要求给出的参考答案，实际情况可能有所不同，建议根据具体情况和需求进行实际操作和选择。
相关·内容
我是Spark的新手，刚刚开始使用它。尝试从pyspark导入SparkSession，但抛出错误：“没有名为'pyspark‘的模块。”请看我下面的代码。# Import our SparkSession so we can use it# Create our SparkSession------------ ModuleNotFoundError回溯(最近一次调
浏览 33提问于2019-10-04得票数 1
回答已采纳
我在AWS EMR上使用齐柏林飞艇运行了这个网站()的代码。asof_join, schema="time int, id int, v1 double, v2 string").show()
并在运行最后一行时收到"ModuleNotFoundError:没有名为‘pandas’的模块“错误。："pyspark 3.0.0 spark 3.0.0 pyarrow 0.15.1 zeppelin 0.9.0“并将zeppe
浏览 69提问于2021-02-19得票数 0
回答已采纳
1回答
我有一个python包，它包含许多模块，内置到一个.egg文件中，我想在zeppelin笔记本中使用这个包。Acc到齐柏林文档，要将此包传递给齐柏林星火解释器，您可以通过conf/zeppelin-env.sh中的SPARK_SUBMIT_OPTIONS中的--file选项导出它。我对此有以下问题：
在pyspark中，与-py- file一起提供的.egg文件正在工作(例如，我能够在
浏览 3提问于2017-01-31得票数 7
我在Zeppelin中运行这段代码，得到以下错误信息from pyspark.sql import HiveContext
sc =从pyspark导入SparkContext ^
浏览 0提问于2016-11-29得票数 2
4回答
在齐柏林飞艇中，每行我都要提供每一行的解释器。有没有办法为整个会话设置解释器。花了0秒钟。
控制台:1:错误：'.将熊猫作为pd导入
花了0秒钟。
如何设置整个会话的解释器？
浏览 7提问于2015-11-20得票数 5
我有一个HDP 2.5集群，我正在使用ZEPPELIN的%pyspark解释器来生成代码。我想使用一个库来帮助在python、java和scala中使用Spark中的时间序列分析，这里指定了：
问题是我不知道如何导入和使用这个库到我的ZEPPELIN %pyspark解释器中。首先，我下载了名为“.jar -0.2.0-jar-with-Dependencies.jar”的jar文件。接下来，我将它
浏览 1提问于2016-11-30得票数 4
1回答
Sl Aug29 0:16 /opt/zeppelin-env/bin/python /tmp/zeppelin_pyspark-294731840633169153.py 46864 10603Sl Aug29 1:30 /opt/zeppelin-env/bin/python /tmp/zeppelin_pyspark-496770038104954
浏览 26提问于2018-08-31得票数 0
我是spark/zeppelin的新手，我想完成一个简单的练习，我将把一个csv文件从熊猫转换成Spark数据帧，然后注册表格，用sql查询它，并用Zeppelin可视化它。我使用的是Spark 1.6.1%pysparkprint spark_clean_df.dtypes4961)]
但是当我尝试使用%sql时，我得到了这个错误：
浏览 1提问于2016-06-02得票数 7
/bin/pyspark和一切都是好的。export MASTER=spark://127.0.0.1:7077
export SPARK_APP_NAME=my_zeppelin-mfPYTHONPATH=/Library/Framewo
浏览 4提问于2017-02-15得票数 5
回答已采纳
1回答
远程火花使用的是系统python2.7。
下载miniconda3，安装一些lib，scp miniconda3文件夹来激发主程序和奴隶。在火花主和从中将PYSPARK_PYTHON="/usr/local/miniconda3/bin/python"添加到spark-env.sh中。我登录到主人和奴隶，运行pyspark interpreter在每一个，并发现i
浏览 2提问于2018-09-05得票数 2
这是/etc/zeppelin/conf/zeppelin-env.sh文件中的默认值。spark.executorEnv.PYTHONPATH=/usr/lib/spark/python/lib/py4j-src.zip:/usr/lib/spark/python/:<CPS>{{PWD}}/pyspark.zipjar,/
浏览 16提问于2021-03-05得票数 0
回答已采纳
这是关于在Zeppelin笔记本上运行Spark/Scala的。为了更好地模块化和重组代码，我需要将现有的Scala类、包或函数导入到笔记本中，最好跳过创建jar文件(与PySpark中非常相似)。类似于：其中'myclass‘是在.scala文件中实现的。可能这个源代码需要驻留在Zeppelin的特定位置。
浏览 4提问于2018-07-14得票数 0
1回答
$ cd incubator-zeppelin/然后运行服务器：运行一个以%pyspark开头的简单笔记本时，我得到了一个关于找不到py4j的错误。现在我得到了这个错误： File "/tmp/<e
浏览 182提问于2015-06-14得票数 22
回答已采纳
用zeppelin写的代码，当我在那里启动pyspark时，它在shell中工作和导入都很好，但用同样的代码在zeppelin中就不行了。%pyspark File "/tmp/zeppelin_pyspark-4245945050627073162
浏览 0提问于2016-08-30得票数 4
回答已采纳
1回答
我正在运行emr-5.12.0，亚马逊2.8.3、Hive 2.3.2、Hue 4.1.0、Livy 0.4.0、Spark 2.2.1和Zeppelin 0.7.3分别作为我的主节点和核心节点。我正在尝试执行一个引导程序操作来配置集群的某些部分。其中之一包括以下行：
sudo sed -i '/zeppelin.pyspark.python/c\ \"zepplin.pyspark.python\" : \"pyth
浏览 4提问于2018-03-15得票数 0
1回答
我正在使用zeppelin notebook在AWS EMR上编写一些pyspark代码。boto3时，会出现以下错误Traceback (most recent call last): File "<stdin>", line 1, in <module>
Import
浏览 11提问于2020-03-11得票数 0
除了设置"zeppelin.pyspark.python“以使齐柏林飞艇解释器成为特定的Python可执行文件外，我还需要做什么？我正在使用连接到Spark+Mesos集群的Apache。齐柏林飞艇是新的，一般工作良好。
但是，我无法在应用于pyspark中的RDD的函数中导入numpy。当我使用Python子进程定位Python可执行文件时，它会显示代码是在系统的Python中运
浏览 0提问于2017-03-16得票数 4
回答已采纳
我正在尝试遵循讨论过的示例，我只是将代码复制到齐柏林飞艇的段落中。%pysparkfrom pyspark.sql import SQLContext但是，我得到了以下错误： File "&#x
浏览 2提问于2016-05-04得票数 0
回答已采纳
1回答
运行以下简单代码将给出pyspark interpreter not found错误a = 1+3
CLI中的Pyspark (使用spark 1.6.0和python 2.6.6基于此，我更
浏览 0提问于2016-07-05得票数 4
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
