,,,,最近在学习的火花机器学习,由于在机器学习方面Python语言表现不俗,故我选择使用Python语言作为火花机器学习的开发语言,也为后续的深度学习打下基础,故下面是在windows8.1下搭建eclipse4.4.2 + Python2.7.14 + Spark2.1.0的开发环境,具体过程如下:
1。windowsPython
1.1。Python Python
https://www.python.org/downloads/release/python-2714/
windows8.1 64
1.2。Python
1 2下
3 d: \ Python27 \下
4下
5读完
1.3。
1.3.1。
<强> 强> <强> 强>
<>之前路径=% %路径;D: \ Python27
<强> 强> <强> 强> <强> 强>
1.3.2。
<强> 强> <强> 强> <强> 强> <强> 强> <强> 强> <强> 强>
<强> 强>
1.3.3。Python
<强> 强>
<强> 强>
,
2. windowseclipse
Eclipse4.4.2
<强> Eclipse 强> <强> JDK 强> <强> 强>
3。EclipsePvDev
3.1。PvDev
1 eclipse帮助→InstallNew软件……,,Add 名称:pydev中,,Locationhttps://dl.bintray.com/fabioz/pydev/5.2.0Eclipse4.4.25.2.0Eclipsehttp://pydev.org/updates
,
2 pydevnext
3下
4 iaccept……NextEclipse
3.2。PvDev
pydev中Python
1 eclipsewindows→偏好只,,
2 pydev中→翻译- Python解释器又是;Newpython。exeOK
3好
,,,,,,,,4好
4。Python
1 eclipsefile→新建→项目…PyDev中→PyDevProject
2 PyDevPackageTest1
3 __init__。py
5。PythonSpark
5.1。火花
http://spark.apache.org/downloads.htmlspark-2.1.0-bin-hadoop2.7.tgzF \ BigData \火花\ spark-2.1.0-bin-hadoop2.7
5.2。火花
1 spark_homef: \ BigData \ \ spark-2.1.0-bin-hadoop2.7%SPARK_HOME % \火花binPath