昨天下载了pyspark库下载了好多次,无论是在pycharm中还是通过pip都下载不了,后面在命令窗口不知道怎么给下载上了,但是却用不了,最后通过Alt+Enter在pycharm中给下载上了,也能用了,但是却显示乱码,请问是怎么回事呀

讨论数量: 8

环境问题吧,中文可能也有影响

file

6个月前 评论
bushi_gemen (楼主) 6个月前
Jason990420
  • Platform: WIN10
  • python: 3.12.4
  • JAVA: 1.8.0_421 (jre-8u421-windows-x64.exe)
  • pyspark: 3.5.2
  • 环保局变量: JAVA_HOME=C:\Program Files\Java\jre1.8.0_421
  • 环保局变量: path=%PATH%;C:\Program Files\Java\jre1.8.0_421\bin
from pyspark import SparkConf, SparkContext

conf = SparkConf().setMaster("local[*]").setAppName("test_spark_app")
sc = SparkContext(conf=conf)
print(sc.version)
sc.stop()
Setting default log level to "WARN".
To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).
24/08/16 17:06:28 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
3.5.2
6个月前 评论
bushi_gemen (楼主) 6个月前
bushi_gemen (楼主) 6个月前
Jason990420

更新如上, 其他没什么特别的.

6个月前 评论
bushi_gemen (楼主) 6个月前

在源码文件顶部加以下代码,指定字符集,如果还是乱码,则再设置一下 pycharm 控制台输出也用UTF-8字符集。

# -*- coding: utf-8 -*-

另外,想成为一个专业的程序员,首先源码文件夹和文件名不要用中文,原因自己问AI。

6个月前 评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容,与人为善,比聪明更重要!