前言
PySpark一直使用的是Linux默認(rèn)的Python2.7.5版本，感覺(jué)超級(jí)不爽，于是想升個(gè)級(jí)，可怎么升??？于是又開(kāi)始了萬(wàn)年的Google
操作步驟
- 安裝Python3.X參考
- 配置全局變量
sudo vim /etc/profile
export PATH=/usr/bin/python3:$PATH
source /etc/profile
-
打開(kāi)CDH Web配置spark-env.sh文件如下：
即添加：
export PYSPARK_PYTHON=/usr/bin/python3
export PYSPARK_DRIVER_PYTHON=/usr/bin/python3
-
重啟CDH過(guò)時(shí)服務(wù)
然后就就可以開(kāi)心的玩?？?
參考
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索：z360901061
微信掃一掃加我為好友
QQ號(hào)聯(lián)系： 360901061
您的支持是博主寫(xiě)作最大的動(dòng)力，如果您喜歡我的文章，感覺(jué)我的文章對(duì)您有幫助，請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧，狠狠點(diǎn)擊下面給點(diǎn)支持吧，站長(zhǎng)非常感激您！手機(jī)微信長(zhǎng)按不能支付解決辦法：請(qǐng)將微信支付二維碼保存到相冊(cè)，切換到微信，然后點(diǎn)擊微信右上角掃一掃功能，選擇支付二維碼完成支付。
【本文對(duì)您有幫助就好】元
