如何在virtualenv中为pyspark运行spark-submit？
在virtualenv中为pyspark运行spark-submit，可以按照以下步骤进行操作：
- 首先，确保已经安装了virtualenv和pyspark。可以使用以下命令安装：
- 首先，确保已经安装了virtualenv和pyspark。可以使用以下命令安装：
- 创建一个新的虚拟环境并激活：
- 创建一个新的虚拟环境并激活：
- 在虚拟环境中安装pyspark的依赖项：
- 在虚拟环境中安装pyspark的依赖项：
- 设置SPARK_HOME环境变量，指向你的Spark安装目录。例如：
- 设置SPARK_HOME环境变量，指向你的Spark安装目录。例如：
- 在虚拟环境中创建一个Python脚本，例如
my_script.py，并编写你的Spark应用程序代码。 - 使用以下命令在虚拟环境中运行Spark应用程序：
- 使用以下命令在虚拟环境中运行Spark应用程序：
- 这里的
--master local[*]表示在本地模式下运行Spark应用程序，my_script.py是你的Python脚本文件名。
注意：在虚拟环境中运行Spark应用程序时，需要确保虚拟环境中的Python版本与Spark所需的Python版本兼容。
关于pyspark和spark-submit的更多信息，你可以参考腾讯云的相关文档和产品介绍页面：
相关·内容
我在yarn/spark上的python应用程序无法识别在工作节点上创建虚拟环境的requirements.txt文件，并继续使用全局环境。任何帮助解决这个问题的人都将不胜感激。
Spark版本: 2.0.1
从我想要在节点上重新创建的虚拟环境中运行pip freeze > requirements-test.txt后，提交脚本：
/usr/bin/spark-submit --master yarn --deploy-mode client --conf spark.pyspark.virtualenv.enabled=true --conf spark.pyspark.virtua
浏览 0提问于2017-07-20得票数 1
问题:我试图从我的本地机器运行一个spark-submit脚本到一个机器集群。集群所做的工作使用numpy。我目前得到以下错误：
ImportError:
Importing the multiarray numpy extension module failed. Most
likely you are trying to import a failed build of numpy.
If you're working with a numpy git repo, try `git clean -xdf` (removes all
files not under version
浏览 0提问于2017-09-07得票数 9
回答已采纳
我正在尝试在cloudera VM上的Pyspark中运行Python脚本
首先我运行pyspark
$ which pyspark
$ pyspark
在启动spark之后，我尝试了：
$ spark-submit /home/cloudera/test.py
告诉我“没有定义'spark‘的名字”
$ ./bin/spark-submit /home/cloudera/test.py
提示"SyntaxError:无效语法“
我知道网上有很多类似的问题，但我还是想不通。有人能帮帮忙吗？
浏览 0提问于2017-02-24得票数 0
1回答
我创建一个虚拟环境并运行PySpark脚本。如果我在MacOS上执行这些步骤，一切都会很好。但是，如果我在Linux (Ubuntu 16)上运行它们，则会选择不正确的Python版本。当然，我以前在Linux上做过export PYSPARK_PYTHON=python3，但仍然是同一个问题。下面我解释所有步骤：
1. edit profile :vim ~/.profile
2. add the code into the file: export PYSPARK_PYTHON=python3
3. execute command: source ~/.profile
那我就做：
p
浏览 0提问于2018-12-10得票数 0
回答已采纳
我正在处理Azure Databricks。目前我的Pyspark项目在'dbfs‘上。我配置了一个spark-submit作业来执行我的Pyspark代码(.py文件)。然而，根据Databricks文档，spark-submit作业只能在新的自动化集群上运行(可能是设计出来的)。
有没有办法在现有的交互式集群上运行我的Pyspark代码？
我还尝试在%sh单元格中的notebook中运行spark-submit命令，但没有使用。
浏览 4提问于2020-05-22得票数 0
在安装Spark之后，我尝试从安装文件夹运行PySpark：
opt/spark/bin/pyspark
但是我得到了以下错误：
opt/spark/bin/pyspark: line 24: /opt/spark/bin/load-spark-env.sh: No such file or directory
opt/spark/bin/pyspark: line 68: /opt/spark/bin/spark-submit: No such file or directory
opt/spark/bin/pyspark: line 68: exec: /opt/spark/bin/spa
浏览 5提问于2020-04-24得票数 1
1回答
调度电火花记事本
、、、、
我有一个ipython笔记本，其中包含集群上的一些PySpark代码。目前，我们正在使用oozie通过色调在Hadoop上运行这些笔记本。这种设置感觉不太理想，我们想知道是否有其他的选择。
我们首先将.ipynb文件转换为.py文件并将其移动到hdfs。与此文件一起，我们还创建了一个调用python文件的.sh文件。内容类似于：
#!/bin/sh
set -e
[ -r /usr/local/virtualenv/pyspark/bin/activate ] &&
source /usr/local/virtualenv/pyspark/bin/activate
浏览 4提问于2016-06-17得票数 2
回答已采纳
2回答
我试图运行以下PySpark流在木星笔记本。下面是我在笔记本中使用的代码的第一部分：
from pyspark import SparkContext
from pyspark.streaming import StreamingContext
from pyspark.streaming.kafka import KafkaUtils
sc = pyspark.SparkContext(master='local[*]',appName="PySpark streaming")
ssc = StreamingContext(sc, 2)
topic = &
浏览 0提问于2018-06-29得票数 1
回答已采纳
2回答
我有一个依赖于第三方库的pyspark代码。我想在我的集群上执行这段代码，它运行在mesos下。
我确实有我的python环境的压缩版本，它位于我的集群可访问的http服务器上。
我在指定我的spark-submit查询来使用这个环境时遇到了一些麻烦。我既使用--archives加载压缩文件，又使用--conf 'spark.pyspark.driver.python=path/to/my/env/bin/python'加上--conf 'spark.pyspark.python=path/to/my/env/bin/python'来指定内容。
这似乎不起作用.
浏览 9提问于2018-02-06得票数 3
如果我启动pyspark，然后运行以下命令：
import my_script; spark = my_script.Sparker(sc); spark.collapse('./data/')
一切都很好。然而，如果我试图通过命令行和spark-submit来做同样的事情，我会得到一个错误：
Command: /usr/local/spark/bin/spark-submit my_script.py collapse ./data/
File "/usr/local/spark/python/pyspark/rdd.py", line 352, in f
浏览 0提问于2014-11-04得票数 20
我遵循这个，在我的PySpark &纱线应用程序中跨执行器节点分发熊猫和吡箭依赖项。这是运行Pandas所必需的。
我正在创建这样的Conda虚拟环境：
conda create -y -n pyspark_conda_env -c conda-forge pyarrow pandas conda-pack
conda activate pyspark_conda_env
conda pack -f -o pyspark_conda_env.tar.gz
然后提交星火作业：
spark_job_config_path = '/tmp/spark_job_config.json&
浏览 3提问于2021-07-23得票数 0
在启动spark-submit / pyspark时，我们有一个使用--jars选项指定jar文件的选项。我们如何在pyspark中指定maven依赖项。在运行pyspark应用程序时，我们是否必须一直传递所有的jars，还是有一种更干净的方法？
浏览 3提问于2017-03-23得票数 5
当我运行pyspark时，我有一个需要附加的jar文件。如何对jar文件运行pyspark？下面是我尝试过的一些代码，我在这里做错了什么？
script.py的python代码类似于。我想将其作为pyspark应用程序运行。
print "Hello world"
下面可以正常运行，但不能在pyspark上运行
spark-submit --jars somejarfile2.1.0.jar script.py
尝试的代码：(运行，但不显示Hello world的输出)。
pyspark --jar somejarfile2.1.0.jar script.py
谢谢!
浏览 1提问于2015-09-24得票数 2
我有一个主脚本如下所示
from pyspark.sql.session import SparkSession
..............
..............
..............
import callmodule as cm <<<--- This is imported from another pyspark script which is in callmod.zip file
..............
..............
..............
--当我按照下面的方式提交spark命令时，它会出错:没有名为Callmodu
浏览 0提问于2020-12-22得票数 0
回答已采纳
我正试着在一个本地环境中运行一个pyspark作业。
在设置pipenv并成功安装模块(numpy)之后，该模块仍然对代码不可见。
使用pip而不是pipenv安装库是可行的。这里我漏掉了什么？
终端输出如下所示。
PS C:\Users\user\Desktop\spark\test> pipenv shell
Shell for C:\Users\user\.virtualenvs\test-sCQB0P3C already activated.
浏览 18提问于2021-05-16得票数 0
我想用pyspark运行graphframes。 我找到了这个answer，并按照它的说明操作，但它不起作用。 这是我的代码hello_spark.py import pyspark
conf = pyspark.SparkConf().set("spark.driver.host", "127.0.0.1")
sc = pyspark.SparkContext(master="local", appName="myAppName", conf=conf)
sc.addPyFile("/opt/spark/jars/s
浏览 86提问于2021-04-07得票数 0
回答已采纳
我想在本地运行一个PySpark作业，使用特定版本的Hadoop (假设Hadoop-AWS2.8.5)，因为有一些特性。
PySpark版本似乎与Spark版本相一致。
这里我使用的是PySpark 2.4.5，它似乎包装了一个Spark2.4.5。
使用PySpark选项spark-submit --local[4] ...提交spark-submit --local[4] ...作业时，遇到以下错误：
py4j.protocol.Py4JJavaError: An error occurred while calling o32.sql
除了以下java例外：
java.lang.NoC
浏览 7提问于2020-03-21得票数 2
回答已采纳
2回答
我正在使用AWS EMR创建Spark应用程序，但是spark-submit运行的是Python3而不是Python2，但是当我运行pyspark时，它是Python2。
如何强制spark-submit使用Python 2？
我试着去做
export PYSPARK_PYTHON=/usr/bin/python2
但它并没有起作用。
谢谢
浏览 41提问于2017-07-07得票数 0
回答已采纳
1回答
我正在提交在电子病历上并行运行的步骤。我这样做是通过在s3路径上使用pyspark代码保存python脚本。然后，我使用下面的boto代码提交与emr并行的步骤。这些步骤运行我在脚本文件中保存到s3的代码。相反，我想创建一个函数，如下面的"read_write“示例函数，以执行我在保存的python脚本中所做的相同操作。这样，我就不必在我试图并行运行的每一步中都将一个python脚本文件保存到s3。是否有一种方法可以将我想在步骤中运行的代码提交到下面的boto代码中，而不必将其保存到s3脚本文件中？我提供了类似于当前提交步骤以并行运行的示例代码。我还提供了与我想要做的类似的代码，在与b
浏览 5提问于2022-08-24得票数 0
我在GCP Dataproc上有一个可以在气流中触发的火花放电作业，如下所示：
config = help.loadJSON("batch/config_file")
MY_PYSPARK_JOB = {
"reference": {"project_id": "my_project_id"},
"placement": {"cluster_name": "my_cluster_name"},
"pyspark_job": {
浏览 13提问于2022-03-25得票数 4
回答已采纳
我有一个文件存储一些命令，如下所示：
sudo PYSPARK_DRIVER_PYTHON=/bin/python2.7 PYSPARK_PYTHON=/bin/python2.7 SPARK_CONF_DIR=/configuration/spark2 /spark2.1/bin/spark-submit --driver-memory 2g --executor-memory 4g --num-executors 100 --jars /lib/json-serde-1.3.7-jar-with-dependencies.jar
上面的命令只有在附加了文件名(例如file.py)时才会运行
浏览 0提问于2018-04-23得票数 0
我是Spark (Pyspark)的新手，当我运行spark-submit时，spark日志非常冗长。如何更改日志输出？
浏览 25提问于2020-01-21得票数 0
回答已采纳
2回答
我在一个木星笔记本上运行了一个本地Python脚本，它在我的机器上运行我的本地Spark集群上的作业：
sc = pyspark.SparkContext(appName="test")
sqlCtx = pyspark.SQLContext(sc)
如何将此更改为连接字符串，以便在AWS中运行我的EMR集群上的作业？
这是可能的，还是当SSH‘’ing进入远程集群时，我必须使用spark-submit函数？
浏览 0提问于2018-11-02得票数 0
回答已采纳
1回答
我用scala写了一个spark程序。现在我想在终端中运行我写的脚本。在pyspark中，我对python文件使用spark-submit。现在，我想对我的scala程序执行同样的操作。我不想使用Intellij或用spark-shell编写我的程序。我只想在编辑器中编写代码，并在终端中使用命令来运行它。这有可能吗？提前谢谢你
浏览 16提问于2018-08-17得票数 0
回答已采纳
4回答
我正在spark提交一个导入numpy的python文件，但是我得到了一个no module named numpy错误。
$ spark-submit --py-files projects/other_requirements.egg projects/jobs/my_numpy_als.py
Traceback (most recent call last):
File "/usr/local/www/my_numpy_als.py", line 13, in <module>
from pyspark.mllib.recommendation i
浏览 2提问于2015-04-05得票数 6
我正在尝试修改Pyspark源代码，以便模拟一个不确定的场景，以便测试一些配置更改。具体地说，我将rdd.py更改为休眠一段时间，以模拟工作节点停止，例如保存到s3。当我在Pyspark shell中运行代码时，我可以观察到更改的效果，但当我运行spark-submit时，我无法观察到更改的效果。即使我在本地运行，也会发生这种情况。
我不明白在shell中调用Pyspark的方式与通过spark-submit调用Pyspark的方式有什么区别。根据我所看到的，修改后的rdd.py已经部署到$SPARK_HOME/python/pyspark下的位置。
有人对此有什么见解吗？我正在运行spark
浏览 1提问于2018-02-01得票数 0
我一直在试着向库伯奈特人提交申请。我遵循的教程在，如建立火花形象等。
但是每当我试图运行命令spark-submit时，pod总是会抛出错误。这是命令中的日志：kubectl logs <spark-driver-pods>
Error: Unable to initialize main class org.apache.spark.deploy.SparkSubmit
Caused by: java.lang.NoClassDefFoundError: org/apache/log4j/spi/Filter
我试着用这样的方法：
spark-submit
...
--j
浏览 3提问于2021-05-29得票数 9
尝试使用以下命令在纱线集群上提交以下test.py Spark应用程序
PYSPARK_PYTHON=./venv/venv/bin/python spark-submit --conf spark.yarn.appMasterEnv.PYSPARK_PYTHON=./venv/venv/bin/python --master yarn --deploy-mode cluster --archives venv#venv test.py
注意:我没有使用本地模式，而是尝试使用virtualenv下的python3.7site-package来构建PyCharm中的代码。virtualenv提供
浏览 16提问于2020-02-26得票数 0
2回答
我是PySpark的新手。我使用下面的spark-submit进程在集群中的Hive中加载一个表。
/usr/hdp/2.5.0.0-1245/spark2/bin/spark-submit --driver-class-path /path/to/driver/sqljdbc4-3.0.jar --jars /path/to/driver/sqljdbc4-3.0.jar --deploy-mode cluster --master yarn /home/meter/myfile.py
每当我运行这个程序时，我就会收到无数的错误。喜欢
1. pyspark.sql.utils.analysi
浏览 1提问于2019-03-29得票数 2
在PySpark程序中，一旦将pyspark模块添加到path中，就可以导入from pyspark.sql import SparkSession并实例化SparkSession。 什么时候可以使用python3可执行文件(例如python3 myApp.py而不是spark-submit myApp.py？)提交pyspark作业？我已经在客户端模式下对其进行了本地测试，似乎运行良好。那么cluster模式呢？是什么原因使得在某些情况下需要使用spark-submit？ 使用集成开发环境可执行文件调用应用程序使得使用PyCharm之类的python3调试程序变得更容易(据我所知)。
浏览 62提问于2021-02-06得票数 0
当我使用导入自己的python文件运行spark-submit时会遇到问题。
spark-submit \
--master yarn \
--verbose \
--deploy-mode cluster \
--executor-memory 8g \
--driver-memory 10g \
--num-executors 100 \
--executor-cores 10 \
--py-files dgs://user/tmp/dependency.zip \
test.py
我在data.py文件夹中有两个python文件proccess.py和dependency。然后我zip
浏览 3提问于2020-06-23得票数 0
回答已采纳
我安装了anaconda的火花放电
$ conda install pyspark
之后，在我的jupyter笔记本中，它工作得很好，但是在教程中提到了https://mortada.net/3-easy-steps-to-set-up-pyspark.html，您必须设置环境变量，如
$ export SPARK_HOME=~/spark-2.2.0-bin-hadoop2.7
$ export PYSPARK_PYTHON=~/anaconda/bin/python
当我试图在我的jupyter笔记本中重新运行pyspark时，会出现下一个错误。
'/home/joga
浏览 0提问于2021-05-09得票数 0
我想运行一个在我的(本地)机器上运行良好的PySpark程序。
我有一个集群正在运行，安装了所有必要的依赖项(PyPI中的Spark、Python模块)。
现在，如何运行使用一些自定义模块的PySpark作业？我已经尝试了很多事情，也许半天，现在，没有任何结果。到目前为止，我找到的最好的命令是：
/home/hadoop/spark/bin/spark-submit --master yarn-cluster \
--py-files s3://bucket/custom_module.py s3://bucket/pyspark_program.py
但是，Python失败了，因为
浏览 7提问于2015-04-04得票数 1
回答已采纳
4回答
因此，当从pyspark运行时，我会输入(没有指定任何上下文)：
df_openings_latest = sqlContext.sql('select * from experian_int_openings_latest_orc')
。。而且效果很好。
但是，当我从spark-submit运行脚本时，就像
spark-submit script.py --我将以下内容放入
from pyspark.sql import SQLContext
from pyspark import SparkConf, SparkContext
conf = SparkConf().setA
浏览 2提问于2016-04-01得票数 18
回答已采纳
我正试图在我的iMac上安装apache，使用这2页上的说明：
在安装过程中，我无法运行
酿制木桶安装java
所以我就跑了
brew安装java
我想我成功地安装了所有的东西，包括apache-星火。但是，当我运行命令spark或pyspark时，我经常会遇到以下错误：
火花弹外壳：
/usr/local/Cellar/apache-spark/3.0.1/libexec/bin/spark-shell:第60行: /usr/local/Cellar/apache-spark/2.0.1/libexecexport/bin/spark-submit:没有这样的文件或目录
火星雨：
浏览 1提问于2021-01-18得票数 0
我用Pycharm IDE编写了以下非常简单的python脚本
from pyspark.sql import SparkSession
from pyspark.sql import Row
from pyspark.sql import SQLContext
from pyspark.sql.types import LongType, FloatType,IntegerType,StringType,DoubleType
from pyspark.sql.functions import udf
from pyspark.sql import functions as F
from py
浏览 20提问于2019-11-12得票数 0
1回答
我正尝试在Amazon AWS中运行一个简单的pyspark作业，它被配置为通过spark-default.conf文件使用Yarn。我对Yarn部署代码有点困惑。 我看到一些示例代码如下所示： conf = SparkConf()
conf.setMaster('yarn-client')
conf.setAppName('spark-yarn')
sc = SparkContext(conf=conf) 在这种情况下，当指定了'yarn-client‘时，我不确定我应该如何执行spark作业。我通常这样做： $spark-submit --depl
浏览 3提问于2020-01-27得票数 1
回答已采纳
我在一个文件中有一个pyspark代码，让我们称它为somePythonSQL.py我正在尝试使用ojdbc.jar依赖关系将其提交给Spark，因为pyspark实际上连接到一个oracle数据库。spark-submit --master yarn somePythonSQL.py --jars "/home/ojdbc7-12.1.0.2.jar“
但我得到了：
py4j.protocol.Py4JJavaError: An error occurred while calling o45.load.
: java.lang.ClassNotFoundException: ora
浏览 0提问于2021-05-01得票数 0
我在尝试运行字数统计示例时遇到以下错误。
不确定如何继续。下面是我正在运行的命令和错误。
/opt/spark/bin/spark-submit --jars spark-streaming_2.10-2.0.0.jar test_kafka.py broker.txt "localhost:2181:MyTopic"
Error:
Traceback (most recent call last):
File "/home/ubuntu/kafka/libs/test_kafka.py", line 21, in <module
浏览 9提问于2016-08-29得票数 3
2回答
我想在crontab中安排一个pyspark脚本，每5分钟运行一次。我已经使用以下命令成功地手动启动了脚本：
spark-submit script.py
问题是，当从crontab启动时，相同的命令似乎不起作用。日志不显示任何细节(它们被截断)
*/5 * * * * /path/script.sh
script.sh文件包含: spark-submit script.py
如果你对如何解决这个问题有任何想法，请告诉我。
浏览 0提问于2015-02-25得票数 1
1回答
对火花放电进行鼻试验
、、、
如何使用nose运行用Python编写的Apache应用程序的单元测试？
使用nose时，通常只需调用命令
nosetests
若要在Python包的tests目录中运行测试，请执行以下操作。需要使用spark-submit命令而不是通常的Python-可执行文件来运行Pyspark脚本，以启用pyspark-module的导入。我如何将nosetests和pyspark结合起来，为我的Spark应用程序运行测试？
浏览 2提问于2014-10-31得票数 5
回答已采纳
2回答
如何编写一个PySpark脚本，将spark-submit命令行记录到日志输出中？
例如，当我运行：spark-submit script.py arg1 arg2 --flag arg3 --out output
除了运行它的任务之外，我还希望这个命令将命令行记录到一个名为output.log的日志文件中，这样我就可以轻松地跟踪我是如何运行它的。
浏览 1提问于2017-07-24得票数 0
我有一个PySpark代码/应用程序。运行它的最佳方法是什么(利用PySpark的最大功率)，使用python interpreter还是使用spark-submit
因此，的回答几乎是相似的，但并没有详细解释。我很想知道为什么？
任何帮助都是非常感谢的。提前谢谢。
浏览 1提问于2018-12-20得票数 0
回答已采纳
我目前正在通过本地模式运行PySpark。我希望能够通过S3高效地输出拼花文件到。这个PySpark实例使用的是本地磁盘，而不是HDFS，因为它是通过spark-submit --master local[*]提交的。
我可以在不启用目录提交器的情况下成功地写入我的S3实例。但是，这需要将暂存文件写入S3并重命名它们，这是缓慢和不可靠的。我希望斯派克将我的本地文件系统写成临时存储，然后复制到S3。
我的PySpark conf中有以下配置：
self.spark.conf.set("spark.sql.execution.arrow.pyspark.enabled", "
浏览 8提问于2021-12-24得票数 0
回答已采纳
我一直在测试一个使用Ipython笔记本的脚本，并将吡火花传递给它。我想要完成的一切都做得很好。
我还在命令行中没有笔记本的情况下运行它，使用pyspark并工作。
使用1.3.1版
当使用火花提交作为作业提交时
spark-submit --master local[*] myscript.py
我得到了以下错误：
x_map = rdd.map(lambda s: (s[1][1],s[1][3])).distinct().toDF().toPandas()
AttributeError: 'PipelinedRDD' object has no attribute &#
浏览 11提问于2015-09-03得票数 2
回答已采纳
如果该命令运行超过1分钟，我希望停止它，然后继续运行下一个命令。
for((part=0;part<=100;part++));
do
spark-submit \
--verbose \
--master yarn \
--deploy-mode cluster \
--conf spark.pyspark.python=myenv/bin/python3 \
python_demo.py $part
done
命令spark-submit将把我的代码提交给纱线。在成功提交之后，它将运行到代码ython_demo.py停止为止。但现在我想继续提交，如果一个是成功提交。
现在，she
浏览 5提问于2020-07-20得票数 0
回答已采纳
1回答
我已经按照将我的PyCharm设置为与本地spark安装相链接
from pyspark import SparkContext, SQLContext, SparkConf
from operator import add
conf = SparkConf()
conf.setMaster("spark://localhost:7077")
conf.setAppName("Test")
sc = SparkContext(conf=conf)
sqlContext = SQLContext(sc)
df = sqlContext.createDataFram
浏览 2提问于2016-03-17得票数 3
1回答
无法找到本地文件
、、
我已经编写了一个非常简单的python脚本来测试我的星火流想法，并计划在我的本地机器上运行它，让它变得有点混乱。下面是命令行：
spark-submit spark_streaming.py localhost 9999
但是终端机给了我一个错误：
Error executing Jupyter command '<the/spark_streaming.py/file/path>': [Errno 2] No such file or directory
我不知道为什么会发生这种情况，而且我确信.py文件确实存在。
编辑:使用python而不是spark-subm
浏览 2提问于2017-10-16得票数 1
1回答
无法在mac中安装spark
、、、、
我在安装了java的macbook中使用了python 3.6，并下载了spark 2.3.1，但spark无法成功安装。顺便说一句，我成功地使用了pip3安装pyspark。我不知道这是怎么回事！我在终端上附加了我的bash_profile和我的错误！
在bash_profile中
export java_HOME="/Library/Java/JavaVirtualMachines/jdk1.8.0_181.jdk/Contents/HOme/"
export SPARK_HOME="/Library/Frameworks/Pytho
浏览 2提问于2018-10-15得票数 2
1回答
我安装了一个pycharm应用程序，并配置了解释器。在我通过pip在pycharm内部安装了spark-nlp包，并尝试运行程序后，它显示它缺少对pyspark包形式的依赖。当我安装pyspark时，它抱怨有一堆包丢失了。venv不是应该自动解决所有需求吗？
浏览 3提问于2020-02-12得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
