не в состоянии представить искры питон скрипт

Question

Я использую следующий сценарий представить питон скрипт

#!/usr/bin/python 

from pyspark.mllib.classification import LogisticRegressionWithSGD 
from pyspark.mllib.regression import LabeledPoint 
from numpy import array 
from pyspark import SparkContext as sc, SparkConf 

data = sc.textFile("hdfs:/dataset/parkinsons.data") 

получил эту ошибку:

data = sc.textFile("hdfs:/dataset/parkinsons.data") 
TypeError: unbound method textFile() must be called with SparkContext instance as first argument (got str instance instead) 

Answer 1

Вы должны создать SparkContext сначала, например:

from pyspark import SparkContext 

sc = SparkContext(appName="TestApp") 
data = sc.textFile("hdfs:/dataset/parkinsons.data")