Публикации по теме 'apache-zeppelin'


Запрос нашего озера данных в S3 с помощью Zeppelin и Spark SQL
До недавнего времени большинство компаний использовали традиционный подход для хранения всех данных компании в хранилище данных. Рост Интернета привел к увеличению количества источников данных и огромных объемов данных, которые нужно было хранить, что потребовало постоянного масштабирования этих хранилищ данных. Они не были предназначены для обработки петабайтов данных, поэтому компании были вынуждены использовать платформы больших данных (такие как Hadoop), способные преобразовывать..

Вопросы по теме 'apache-zeppelin'

Проблема с реестром TempTable в Zeppelin SqlContext
Я пытаюсь получить доступ к некоторым данным json, используя sqlContext.jsonFile в zeppelin... следующий код выполняется без ошибок: import sys.process._ val sqlCon = new org.apache.spark.sql.SQLContext(sc) val jfile =...
4719 просмотров

Сбой процесса сборки Apache zeppelin в zeppelin-web с беседкой
Я пытаюсь собрать zeppelin локально с окнами и babun/cygwin. Этот сайт направил меня в правильном направлении , но я сталкиваюсь со следующей ошибкой, когда сборка попадает в веб-приложение: [ERROR] Failed to execute goal...
3062 просмотров

Проблемы при установке Zeppelin на CentOS 6 с помощью Vagrant
Мы пытаемся запустить экземпляр Zeppelin для песочницы/оценки в 4-узловом кластере CentOS 6 с Vagrant и имеем некоторые проблемы с зависимостями в процессе сборки. Вот скрипт высокого уровня, который мы запускаем. (Попытались запустить это как...
1271 просмотров
schedule 03.10.2022

Кластер Apache Zeppelin + EMR (Spark) для открытия межсетевого экрана
Я пробовал использовать apache zeppelin с кластером EMR (Spark). У меня есть некоторые требования для использования кластера apache zeppelin + EMR с открытым брандмауэром. На рабочем месте стоит статический ip, который заблокирован межсетевым...
1084 просмотров
schedule 04.03.2024

Zeppelin Pyspark на HDP 2.3 выдает ошибку
Я пытаюсь настроить zeppelin для работы с HDP 2.3 (Spark 1.3). Я успешно установил zeppelin через Ambari, и служба zeppelin работает. Но когда я пытаюсь запустить любую команду %pyspark , я получаю следующую ошибку. Я читал несколько блогов,...
2016 просмотров

Как подавить печать значений переменных в цеппелине
Учитывая следующий фрагмент: val data = sc.parallelize(0 until 10000) val local = data.collect println(s"local.size") Zeppelin выводит все значение local на экран ноутбука. Как можно изменить это поведение?
8206 просмотров
schedule 30.11.2022

Как записать содержимое переменной Flink на экран в Zeppelin?
Я пытаюсь запустить следующие простые команды в Apache Zeppelin. %flink var rabbit = env.fromElements( "ARTHUR: What, behind the rabbit?", "TIM: It is the rabbit!", "ARTHUR: You silly sod! You got us all worked up!", "TIM: Well, that's no...
1149 просмотров
schedule 11.01.2023

Есть ли у Apache Zeppelin intellisense?
Поддерживает ли Apache Zeppelin intellisense/автозаполнение в пользовательском интерфейсе ноутбука? если да, то как мне его использовать? Я пытался искать в Интернете, но не смог найти источник, который работает. Этот...
10780 просмотров
schedule 29.05.2023

Можно ли настроить скин на Zeppelin?
Можно ли настроить скин на Zeppelin? Другими словами, заменить логотип Zeppelin на что-то другое?
6574 просмотров
schedule 27.10.2022

Как создать блокнот с абзацем, загруженным кодом, с помощью REST API zeppelin
Я хочу создать блокнот zeppelin через REST API zeppelin. Я не хочу создавать пустой блокнот, вместо этого я хочу создать блокнот с некоторым кодом Scala. Какие параметры мне нужно передать для создания такой записной книжки? Или можно ли...
1363 просмотров
schedule 24.05.2022

Apache Zeppelin выдает ошибку с искрой на разных машинах
У меня есть локальная установка кластера искры с одним главным и одним подчиненным компьютером. Я установил Zeppelin на другую машину и попытался запустить несколько команд из Zeppelin, чтобы запустить мастер-машину. Для этого я создал интерпретатор...
1025 просмотров
schedule 22.12.2022

R: установить пакет repr
Я новичок в R и пытаюсь использовать следующий Apache Zeppelin с установкой интерпретатора R: https://github.com/elbamos/Zeppelin-With-R/tree/rinterpreter-0.5.5 Однако, как говорится в руководстве, одним из предварительных требований является...
1502 просмотров
schedule 18.12.2022

Ошибка при выполнении абзацев Zeppelin в Spark на кластере Linux в Azure HdInsight
Я следовал этому руководству для настройки Zeppelin в кластере Spark (версия 1.5.2) в HDInsight в Linux. Все работало нормально, мне удалось успешно подключиться к ноутбуку Zeppelin через туннель SSH. Однако, когда я пытаюсь запустить любой абзац,...
516 просмотров

Цеппелин отключен
Я скачал бинарный пакет zeppelin и запустил его. Однако он отключен. Вот журнал: INFO [2016-01-12 14:37:56,592] ({main} QuartzScheduler.java[initialize]:305) - Scheduler meta-data: Quartz Scheduler (v2.2.1) 'Defau ltQuartzScheduler' with...
1023 просмотров
schedule 23.02.2023

Zeppeline — Как настроить Zeppeline для подключения к удаленному sparkmaster?
У меня есть искровой кластер из 5 узлов на отдельном наборе хостов. Я установил zeppeline на отдельный хост и подключил интерпретатор искры для выполнения запросов к искровому кластеру. Zeppeline версии 1.6 - Установлен на рабочий стол Я...
6219 просмотров
schedule 21.10.2022

Zeppelin — проблемы Spark 1.6 с зависимостями
Недавно зависимости были перенесены с рабочего листа на интерпретатор, как показано на снимке экрана ниже: К сожалению, при применении зависимостей, как показано ниже: Ошибка возникает при вызове искрового контекста: или другой...
577 просмотров
schedule 05.10.2022

Цеппелин терпит неудачу; Класс UTF8String.class отличается в библиотеках Vora и Spark 1.5.2.
Установил Вора 1.1. Патч 1 для HDP 2.3 со Spark 1.5.2, для SLES 11 SP3. Это не совсем та конфигурация, что указана в Note 2213226, но шелл-версия Вора вроде нормально работает с тестом 2.7 Инструкции по установке (последняя не прописывала версии HDP...
208 просмотров
schedule 20.10.2022

Как запустить блокнот zeppelin из командной строки (автоматически)
Как запустить блокнот из командной строки? В дополнение к 1, как мне передать аргументы командной строки в блокнот? т.е. получить доступ к аргументам командной строки из кода ноутбука?
5547 просмотров
schedule 25.03.2024

Переводчик dep не найден
Я пытаюсь использовать в Zeppelin интерпретатор dep. Я использую объявление% dep в своем блокноте zeppelin. Тем не менее, я получаю сообщение об ошибке «dep интерпретатор не найден». Интерпретатор% dep настроен в разделе интерпретатора...
2081 просмотров

Как использовать результат интерпретатора jdbc и интерпретатора cassandra в одном абзаце в Apache Zeppelin
Я пытаюсь сделать блокнот в apache zeppelin, объединив результаты двух разных интерпретаторов. Один - jdbc, а другой - cassandra. Как я могу объединить результат обоих интерпретаторов в одном абзаце.
460 просмотров
schedule 28.03.2023