你的位置:首页 > 软件开发 > 操作系统 > 如何在windows下安装配置pyspark notebook

如何在windows下安装配置pyspark notebook

发布时间:2016-08-05 12:00:02
第一步:安装anacondaanaconda自带一系列科学计算包下载链接:http://pan.baidu.com/s/1b4jWlg 密码:fqq3接着配置环境变量:如我安装在D盘下 试一下命令行启动,确保ipython从anaconda启动 第二步:安装spa ...

如何在windows下安装配置pyspark notebook

第一步:安装anaconda

anaconda自带一系列科学计算包

如何在windows下安装配置pyspark notebook

下载链接:http://pan.baidu.com/s/1b4jWlg 密码:fqq3

接着配置环境变量:如我安装在D盘下  如何在windows下安装配置pyspark notebook

 

试一下命令行启动,确保ipython从anaconda启动

 如何在windows下安装配置pyspark notebook

第二步:安装spark(需要提前安装JDK)

到官网下载spark安装包

http://spark.apache.org/downloads.html

我下的是这个版本:

如何在windows下安装配置pyspark notebook

解压缩之后,不要忘记添加环境变量

如何在windows下安装配置pyspark notebook

配置如下系统变量

如何在windows下安装配置pyspark notebook

如何在windows下安装配置pyspark notebook

 

这一步很重要  拷贝 E:\spark\python\pyspark  到 D:\anaconda\Lib\site-packages 目录下

 

第三步:修改spark\conf下的spark-env文件(不知道是否必要)

加入如下三行

export PYSPARK_PYTHON=/D:/anaconda

原标题:如何在windows下安装配置pyspark notebook

关键词:Windows

*特别声明:以上内容来自于网络收集,著作权属原作者所有,如有侵权,请联系我们: admin#shaoqun.com (#换成@)。

可能感兴趣文章

我的浏览记录