Как установить zeppelin на windows

Installing Zeppelin in Windows

We would need cygwin for this.
Install the basic Cygwin and specifically install wget,tar,qawk,bzip2,subversion,vim

Run the installer
After Cygwin gets installed, get the setup file and install the below:

> C:/Users/user/Downloads/setup-x86_64.exe -q -P  wget,tar,qawk,bzip2,subversion,vim

Cygwin should give capabilities to install everything like ubuntu.We need to get the tar.gz file from the Apache Mirror installs for Zeppelin

(NOTE: Do make sure that your Spark, Hadoop and Scala installations are working properly)

• Check the java -version

• Create a folder "zeppelin" in any path you want.

• In cygwin terminal type the below things:

$ wget http://www-eu.apache.org/dist/zeppelin/zeppelin-0.6.2/zeppelin-0.6.2-bin-all.tgz
$ gzip -d zeppelin-0.6.2-bin-all.tgz
$ tar -xvf zeppelin-0.6.2-bin-all.tar
export JAVA_HOME="/cygdrive/c/Program Files/Java/jdk1.8.0_91"

• Go to cmd prompt

D:\zeppelin\zeppelin-0.6.2-bin-all\bin>zeppelin.cmd
------------- verbose -----------------------------

• Open the link: http://127.0.0.1:8080/#
• Zeppelin notebook UI should be visible.

Disclaimer: I am not a Windows or Microsoft fan, but I am a frequent Windows user and it’s the most common OS I found in the Enterprise everywhere. Therefore, I decided to try Apache Zeppelin on my Windows 10 laptop and share my experience with you. The behavior should be similar in other operating systems.

Introduction

It is not a secret that Apache Spark became a reference as a powerful cluster computing framework, especially useful for machine learning applications and big data processing. Applications could be written in several languages as Java, Scala, Python or R. Apache Zeppelin is a Web-based tool that tries to cover according to the official project Website all of our needs (Apache Zeppelin):

• Data ingestion
• Data discovery
• Data analytics
• Data visualization and collaboration

The interpreter concept is what makes Zeppelin powerful, because you can theoretically plug in any language/data-processing-backend. It provides built-in Spark integration, and that is what I have tested first.

Apache Zeppelin Download

You can download the latest release from this link: download

I downloaded the version 0.6.2 binary package with all interpreters.

Since this version, the Spark interpreter is compatible with Spark 2.0 and Scala 2.11

According to the documentation, it supports Oracle JDK 1.7 (I guess it should work with 1.8) and Mac OSX, Ubuntu 14.4, CentOS 6.X and Windows 7 pro SP1 (And according to my tests also with Windows 10 Home).

Too much bla bla bla, let’s get started.

Zeppelin Installation

After download open the file (I used 7 Zip) and extract it to a proper location (in my case just the c drive to avoid possible problems)

Set the JAVA_HOME system variable to your JDK bin folder.

Set the variable HADOOP_HOME to your Hadoop folder location. If you don’t have the HADOOP binaries you can download my binaries from here: Hadoop-2.7.1

I am not really sure why Hadoop is needed if Zeppelin supposed to be autonomous but I guess Spark looks for the winutils.exe if you are using Windows. I posted about it in my previous post: Apache Spark Installation on Windows 10

This is the error I found in the Zeppelin logs (ZEPPELIN_DIR\logs –> there is a file for the server log and a separated file for each interpreter):

Zeppelin Configuration

There are several settings you can adjust. Basically, there are two main files in the ZEPPELIN_DIR\conf :

• zeppelin-env
• zeppelin-site.xml

In the first one you can configure some interpreter settings. In the second more aspects related to the Website, like for instance, the Zeppelin server port (I am using the 8080 but most probably yours is already used by another application)

If you don’t touch the zeppelin-env file, Zeppelin use the built-in Spark version, which it has been used for the results posted in this entry.

Start Zeppelin

Open a command prompt and start Zeppelin executing the zeppelin.cmd in Drive:\ZEPELLIN_DIR\bin\zeppelin.cmd

Then, open your favorite browser and navigate to localhost:8080 (or the one you set in the zeppelin-site.xml)

You should see the starting page. Verify that the indicator in the top-right-side of the windows is green, otherwise your server is down or is not running properly)

If you have not configured Hive, before start trying the tutorials included in the release, you should need to set the value of the zeppelin.spark.useHiveContext to false. Apart from the config files, Zeppelin has an interpreter configuration page. You can find it by clicking on your user “anonymous” –> Interpreter

Scroll-down to the bottom where you’ll find the Spark config values:

Press on the edit button and change the value to false in order to use the SQL context instead of Hive.

Press the Save button to persist the change:

Now let’s try the Zeppelin Tutorial

From the Notebook menu click on the Zeppelin Tutorial link:

The first time you open it, Zeppelin ask you to set the Interpreter bindings:

Just scroll-down and save them:

Some notes are presented with different layouts. For more about the display system visit the documentation online.

Other possible annoying error

I was getting the following error when tried to run some notes in the Zeppelin Tutorial:

I found a suggested solution in the following stack overflow question: link

An URI syntax exception trying to find the folder spark-warehouse in the Zeppelin folder. I struggled a little bit with that. The folder was not created in my Zeppelin directory, I thought it was a permissions problem, so I created it manually and assigned 777 permissions.

It still failed. In the link above a forum user suggested to use triple slashes to define the proper path file:///C:/zeppelin-0.6.2-bin-all/spark-warehouse

But I still don’t know where to place this configuration. I couldn´t do it in the spark shell, also not while creating a spark session (zeppelin does it for me) and the conf/spark-defaults.conf doesn´t seem to be a good idea for Zeppelin because I was using the spark built-in version.

Finally, I remembered that is possible to add additional spark setting in the interpreter configuration page and I just navigated there and created it:

Just as additional info, you can verify the settings saved in this page in the file Drive:\ZEPELLIN_DIR\conf\interpreter.json

After these steps, I was able to run all of the notes from the Zeppelin tutorials.

Note that the layout from the tutorial is telling you more or less the order in which you have to execute the notes. The note “Load data into table” must be executed before you play the notes below. I guess that is the reason it spans over the whole width of the page, because it must be executed before you visualize or analyze the data, while the notes below could be executed in parallel, or in any order. I mean, this layout is not a must but it helps to keep an execution order.

I hope this helps you on your way to learn Zeppelin!

Apache Zeppelin — это мощный аналитический инструмент, позволяющий создавать и визуализировать различные типы данных. Он предоставляет возможность работы с большим объемом данных, а также интегрируется с различными средами разработки, такими как Python, R, Scala и многими другими.

Установка Zeppelin на операционную систему Windows — довольно простая задача, если вы следуете пошаговой инструкции. В этой статье мы рассмотрим, как правильно установить Zeppelin на Windows и настроить его для эффективной работы.

Первым шагом является загрузка Zeppelin с официального сайта проекта. После загрузки вам потребуется установить Java Development Kit (JDK), так как Zeppelin работает на платформе Java. Далее нужно установить и настроить переменные среды JAVA_HOME и PATH для использования Zeppelin.

После установки и настройки Java, можно обновить файл конфигурации Zeppelin, указав необходимые параметры для работы инструмента. Затем следует запустить Zeppelin и открыть его в веб-браузере. По умолчанию Zeppelin работает на порту 8080.

Теперь у вас есть полностью установленный и настроенный Apache Zeppelin на Windows! Вы можете начать создавать и визуализировать различные типы данных, проводить анализ и использовать мощные возможности этого инструмента для вашего проекта или задачи.

Подготовка компьютера

Перед установкой Zeppelin на Windows необходимо выполнить несколько предварительных шагов.

• Убедитесь, что на вашем компьютере установлена Java Development Kit (JDK). Если JDK не установлена, загрузите и установите ее с официального сайта Oracle.
• Проверьте версию JDK, которая установлена на вашем компьютере. Zeppelin поддерживает JDK версии 7 или выше. Установите или обновите JDK, если ваша версия устарела.
• Убедитесь, что у вас установлен Apache Hadoop. Если у вас нет Hadoop, вы можете загрузить его и установить с официального сайта Apache.
• Установите и настройте переменные среды JAVA_HOME и HADOOP_HOME. Эти переменные среды должны указывать на каталоги, где установлены JDK и Hadoop соответственно.
• Загрузите дистрибутив Apache Zeppelin с официального сайта Zeppelin.

По завершении всех предварительных шагов вы будете готовы приступить к установке Zeppelin на Windows и начать использовать этот мощный инструмент для анализа данных и разработки интерактивных заметок.

Установка Java Development Kit

Для успешной установки и работы Zeppelin необходимо установить Java Development Kit (JDK). В данном разделе представлена пошаговая инструкция по установке JDK на операционную систему Windows.

Шаг 1. Перейдите на официальный сайт Oracle (https://www.oracle.com/java/technologies/javase-jdk11-downloads.html) и найдите раздел «Java SE Development Kit 11».

Шаг 2. В таблице загрузки найдите подходящую версию JDK для своей системы (Windows x64 или Windows x86) и нажмите на ссылку «jdk-11.xx.x_windows-x64_bin.exe» для 64-разрядной системы или «jdk-11.xx.x_windows-x86_bin.exe» для 32-разрядной системы.

Шаг 3. После скачивания файла запустите его и следуйте инструкциям мастера установки.

Шаг 4. В окне установки выберите директорию, в которую вы хотите установить JDK, и нажмите кнопку «Next».

Шаг 5. В следующем окне установки убедитесь, что установлен флажок «Change destination folder» и нажмите кнопку «Next».

Шаг 6. В окне выбора компонентов оставьте все настройки по умолчанию и нажмите кнопку «Next».

Шаг 7. Далее вам будет предложено выбрать директорию для установки пакета дополнительных файлов. Оставьте все настройки по умолчанию и нажмите кнопку «Next».

Шаг 8. В окне выбора стиля установки оставьте работу Java как предоставляемое приложение по умолчанию и нажмите кнопку «Next».

Шаг 9. В окне установки будет отображена информация о выбранной вами конфигурации для установки. Если все верно, нажмите кнопку «Install».

Шаг 10. После завершения процесса установки вам будет предложено удалить загруженный установщик. Оставьте флажок «Remove temporary files» и нажмите кнопку «Next».

Шаг 11. Нажмите кнопку «Finish», чтобы завершить процесс установки.

Теперь JDK успешно установлена на вашу операционную систему Windows. Дальше можно приступать к установке и настройке Zeppelin.

Настройка переменных среды

После установки Apache Zeppelin на Windows, необходимо настроить переменные среды, чтобы иметь доступ к исполняемым файлам и утилитам Zeppelin.

1. Откройте окно «Свойства системы», нажав правой кнопкой мыши на значок «Компьютер» на рабочем столе или в меню «Пуск».

2. В окне «Свойства системы» выберите вкладку «Дополнительные параметры системы».

3. Нажмите кнопку «Переменные среды», чтобы открыть окно «Редактирование переменных среды».

4. В разделе «Системные переменные» найдите переменную «Path» и выберите ее, затем нажмите кнопку «Изменить».

5. В открывшемся окне «Изменение системной переменной» нажмите кнопку «Добавить».

6. Введите путь к директории с исполняемыми файлами Zeppelin в поле «Значение переменной» (например, C:\zeppelin\bin) и нажмите кнопку «ОК».

7. Повторите шаги 5 и 6 для добавления пути к директории с утилитами Zeppelin (например, C:\zeppelin\cli).

8. Нажмите кнопку «ОК» во всех открытых окнах, чтобы сохранить изменения.

Теперь переменные среды настроены корректно, и вы можете использовать команды Zeppelin в командной строке или в других программах, поддерживающих его использование.

Загрузка и установка Zeppelin

После выбора версии, нужно скачать исполняемый файл Zeppelin. Обычно это zip-архив, который нужно разархивировать в любую удобную для вас папку на компьютере.

После разархивирования, откройте папку с Zeppelin и найдите в ней файл с расширением .bat. Это файл для запуска Zeppelin. Щелкните по нему дважды, чтобы запустить приложение.

После запуска Zeppelin откроется веб-интерфейс, который будет доступен по адресу http://localhost:8080. Введите этот адрес в своем веб-браузере, чтобы перейти к интерфейсу Zeppelin.

На этом этапе вы успешно установили Zeppelin на свой компьютер. Теперь можно начать использовать его для анализа данных и работы с ноутбуками.

Получение Zeppelin

Для установки Zeppelin на Windows необходимо выполнить следующие шаги:

1. Перейдите на официальный сайт Apache Zeppelin по адресу https://zeppelin.apache.org/.
2. На главной странице найдите раздел «Download» и перейдите в него.
3. В разделе «ASF Mirrors» выберите зеркало загрузки, представленное в виде ссылки. Обычно зеркала размещены в разных странах, выберите тот, который наиболее близок к вашему местоположению.
4. На странице зеркала выберите версию Zeppelin, которую вы хотите скачать. Рекомендуется выбирать самую последнюю стабильную версию.
5. Скачайте архив с Zeppelin на ваш компьютер.

Теперь вы готовы переходить к следующему шагу — установке Zeppelin на Windows.

Распаковка архива с Zeppelin

После успешной загрузки архива Zeppelin на ваш компьютер, необходимо распаковать его для дальнейшей установки и использования.

1. Найдите скачанный архив с расширением .zip или .tar.gz, в зависимости от выбранной версии Zeppelin.

2. Нажмите правой кнопкой мыши на архиве и выберите опцию «Извлечь все», либо откройте архив и перетащите все файлы и папки в отдельную папку на вашем компьютере.

3. Если архив содержит подпапку, извлеките все файлы и папки из неё и поместите их в корневую папку.

4. При распаковке убедитесь, что путь к папке с Zeppelin не содержит русские буквы или пробелы. Желательно использовать путь без пробелов и специальных символов, например: C:\zeppelin или C:\Programs\zeppelin.

После успешного завершения распаковки, вы готовы перейти к следующему шагу установки Zeppelin.

Apache Zeppelin — это мощная среда для анализа данных и создания интерактивных отчетов. Она предоставляет возможность написания кода на различных языках программирования, включая Python, Scala и SQL, а также визуализацию результатов в удобочитаемом виде. Если вы хотите начать работать с Zeppelin, в этой статье мы расскажем вам, как установить его на операционной системе Windows.

Перед установкой Zeppelin вам понадобится Java Development Kit (JDK). Убедитесь, что у вас уже установлена последняя версия JDK. Затем скачайте последнюю версию Zeppelin с официального сайта и распакуйте архив.

Далее откройте командную строку и перейдите в папку с распакованным Zeppelin. Запустите Zeppelin, введя команду «bin\zeppelin.cmd». После запуска Zeppelin будет доступен по адресу «http://localhost:8080» в вашем браузере.

Теперь у вас есть полностью функциональная версия Zeppelin на вашем компьютере. Вы можете начать создавать свои аналитические отчеты, визуально представлять данные и делиться результатами своих исследований с коллегами. Установка Zeppelin на Windows не займет много времени и с помощью этого простого гайда вы сможете начать использовать этот мощный инструмент для работы с данными.

Подготовка к установке

Перед началом установки Zeppelin на Windows необходимо выполнить несколько предварительных шагов:

1. Проверьте системные требования:

Убедитесь, что ваш компьютер соответствует минимальным системным требованиям для установки Zeppelin. Это включает в себя операционную систему Windows, Java Development Kit (JDK) версии 8 или выше, и установленный Apache Maven.

2. Установите JDK:

Если у вас еще нет JDK, установите его на ваш компьютер. Вы можете загрузить JDK с официального сайта Oracle и следовать инструкциям по установке.

3. Установите Apache Maven:

Apache Maven — это инструмент для автоматизации сборки проектов на Java. Убедитесь, что у вас установлена последняя версия Maven. Вы можете загрузить установщик Maven с официального сайта Apache и следовать инструкциям по установке.

4. Скачайте Zeppelin:

Перейдите на официальный сайт Apache Zeppelin и загрузите последнюю версию Zeppelin в формате tar.gz.

После успешного выполнения этих шагов вы будете готовы перейти к самой установке Zeppelin на Windows.

Скачивание и установка Java JDK

Прежде чем установить Zeppelin, вам необходимо установить Java Development Kit (JDK), так как Zeppelin работает на платформе Java. В этом разделе вы узнаете, как скачать и установить JDK.

1. Перейдите на официальный сайт Oracle по адресу https://www.oracle.com/java/technologies/javase-jdk14-downloads.html.
2. На странице скачивания выберите нужную версию JDK для Windows и нажмите на ссылку для скачивания.
3. Прочтите и принимайте лицензионное соглашение Oracle.
4. Выберите версию JDK для скачивания в соответствии с архитектурой вашей операционной системы (32-битная или 64-битная).
5. Начнется скачивание JDK в виде исполняемого файла. Сохраните файл на вашем компьютере.
6. После скачивания дважды щелкните на исполняемом файле для запуска инсталлятора JDK.
7. В инсталляторе следуйте инструкциям и укажите путь для установки JDK.
8. Дождитесь завершения процесса установки.

Поздравляю! Теперь у вас установлена Java JDK. Теперь вы готовы продолжить установку Zeppelin.

Скачивание и установка Apache Maven

Для корректной работы Apache Zeppelin необходимо установить Apache Maven. В этом разделе будет описан процесс скачивания и установки Maven на операционную систему Windows.

Шаги установки:

1. Перейдите на официальный сайт Apache Maven: https://maven.apache.org;
2. На главной странице сайта найдите раздел «Download» и выберите последнюю стабильную версию Maven;
3. Скачайте установочный файл для операционной системы Windows;
4. После скачивания запустите установочный файл Maven;
5. Выберите опцию «Установить для всех пользователей» и нажмите «Next»;
6. Укажите путь для установки Maven, например: «C:\Program Files\Apache\maven»;
7. Выберите компоненты, которые вы хотите установить, и нажмите «Next»;
8. Выберите настройки прокси (при необходимости) и нажмите «Next»;
9. Проверьте настройки установки и нажмите «Install», чтобы начать установку Maven;
10. После установки нажмите «Finish», чтобы завершить процесс установки.

После завершения установки, Maven будет готов к использованию вместе с Apache Zeppelin.

Скачивание и установка Git

Для скачивания и установки Git на Windows, следуйте инструкциям:

1. Откройте официальный сайт Git по адресу https://git-scm.com/download/win.
2. Нажмите на кнопку «Скачать для Windows».
3. Скачанный файл будет иметь имя вида «Git-2.33.0-64-bit.exe» (версия может отличаться).
4. Откройте скачанный файл и следуйте инструкциям установщика:
• Выберите язык установки (обычно используется English).
• Нажмите «Next» во всех последующих окнах с настройками.
• Дождитесь окончания установки.
• Оставьте все параметры по умолчанию и нажмите «Finish».

После завершения установки Git будет доступен в командной строке вашей операционной системы. Вы можете проверить его установку, выполнив команду:

git --version

Если в результате вы видите версию Git, то установка прошла успешно.

Клонирование Zeppelin репозитория

Процесс установки Zeppelin на Windows начинается с его клонирования из официального репозитория.

1. Откройте командную строку (cmd) на вашем компьютере.
2. Перейдите в каталог, где вы хотите сохранить Zeppelin, с помощью команды cd.
3. Склонируйте репозиторий Zeppelin, выполнив команду:
   git clone https://github.com/apache/zeppelin.git
4. Дождитесь окончания процесса, когда все файлы и папки из репозитория будут скопированы на ваш компьютер.

После завершения всех шагов вы успешно склонировали репозиторий Zeppelin на ваш компьютер и готовы приступить к его установке и настройке.