Вопрос:

Как интегрировать Pyspark на ноутбуке Jupyter

python pyspark

461 просмотра

1 ответ

133 Репутация автора

Я следовал инструкциям по интеграции pyspark с jupyter, но после того, как я это сделал, я смог запустить pyspark только из командной строки.

В основном, когда я использую ipython в моей команде, он работает, но когда я перехожу на jupyter, он говорит

'"Jupyter "' is not recognized as an internal or external command,
operable program or batch file.

пожалуйста, ТАК люди, я действительно истощен сейчас, пожалуйста, помогите

примечание: я следовал этому руководству, чтобы сделать мою интеграцию.

до сих пор я следовал этой команде:

  set PYSPARK_DRIVER_PYTHON=ipython 
  set PYSPARK_DRIVER_PYTHON_OPTS = notebook 
  pyspark 

он открывает pyspark в самом cmd

Автор: Anurag Pandey Источник Размещён: 22.08.2016 08:28

Ответы (1)


1 плюс

113270 Репутация автора

Решение

setКоманда Windows не принимает пробелы перед =знаком.

исправить это так:

set PYSPARK_DRIVER_PYTHON=ipython 
set PYSPARK_DRIVER_PYTHON_OPTS=notebook 
pyspark

Система хочет запустить "Jupyter %PYSPARK_DRIVER_PYTHON_OPTS%"исполняемый файл, но вместо этого пытается запустить «Jupyter»

следовательно ошибка, которую вы получаете.

Автор: Jean-François Fabre Размещён: 22.08.2016 08:45
Вопросы из категории :
32x32