Windows10 搭建 PySpark (基于 Spark-3.0.0-bin-hadoop2)

两种搭建方法:

  1. 使用 pip 安装

    pip install pyspark

    如果安装过程中出现超时,可以下载 pyspark-3.0.0.tar 后离线安装。

  2. 离线安装

  3. 解压 pyspark-3.0.0.tar
  4. 进入解压后的目录,找到 setup.py 文件。
  5. 运行命令 python setup.py install 并等待安装完成。

此方法可以一次性解决所有环境问题。