Публикации по теме 'apache-zeppelin'
Запрос нашего озера данных в S3 с помощью Zeppelin и Spark SQL
До недавнего времени большинство компаний использовали традиционный подход для хранения всех данных компании в хранилище данных.
Рост Интернета привел к увеличению количества источников данных и огромных объемов данных, которые нужно было хранить, что потребовало постоянного масштабирования этих хранилищ данных. Они не были предназначены для обработки петабайтов данных, поэтому компании были вынуждены использовать платформы больших данных (такие как Hadoop), способные преобразовывать..
Вопросы по теме 'apache-zeppelin'
Проблема с реестром TempTable в Zeppelin SqlContext
Я пытаюсь получить доступ к некоторым данным json, используя sqlContext.jsonFile в zeppelin...
следующий код выполняется без ошибок:
import sys.process._
val sqlCon = new org.apache.spark.sql.SQLContext(sc)
val jfile =...
4719 просмотров
schedule
06.06.2023
Сбой процесса сборки Apache zeppelin в zeppelin-web с беседкой
Я пытаюсь собрать zeppelin локально с окнами и babun/cygwin. Этот сайт направил меня в правильном направлении , но я сталкиваюсь со следующей ошибкой, когда сборка попадает в веб-приложение:
[ERROR] Failed to execute goal...
3062 просмотров
schedule
27.02.2023
Проблемы при установке Zeppelin на CentOS 6 с помощью Vagrant
Мы пытаемся запустить экземпляр Zeppelin для песочницы/оценки в 4-узловом кластере CentOS 6 с Vagrant и имеем некоторые проблемы с зависимостями в процессе сборки. Вот скрипт высокого уровня, который мы запускаем.
(Попытались запустить это как...
1271 просмотров
schedule
03.10.2022
Кластер Apache Zeppelin + EMR (Spark) для открытия межсетевого экрана
Я пробовал использовать apache zeppelin с кластером EMR (Spark). У меня есть некоторые требования для использования кластера apache zeppelin + EMR с открытым брандмауэром. На рабочем месте стоит статический ip, который заблокирован межсетевым...
1084 просмотров
schedule
04.03.2024
Zeppelin Pyspark на HDP 2.3 выдает ошибку
Я пытаюсь настроить zeppelin для работы с HDP 2.3 (Spark 1.3). Я успешно установил zeppelin через Ambari, и служба zeppelin работает.
Но когда я пытаюсь запустить любую команду %pyspark , я получаю следующую ошибку.
Я читал несколько блогов,...
2016 просмотров
schedule
18.09.2022
Как подавить печать значений переменных в цеппелине
Учитывая следующий фрагмент:
val data = sc.parallelize(0 until 10000)
val local = data.collect
println(s"local.size")
Zeppelin выводит все значение local на экран ноутбука. Как можно изменить это поведение?
8206 просмотров
schedule
30.11.2022
Как записать содержимое переменной Flink на экран в Zeppelin?
Я пытаюсь запустить следующие простые команды в Apache Zeppelin.
%flink
var rabbit = env.fromElements(
"ARTHUR: What, behind the rabbit?",
"TIM: It is the rabbit!",
"ARTHUR: You silly sod! You got us all worked up!",
"TIM: Well, that's no...
1149 просмотров
schedule
11.01.2023
Есть ли у Apache Zeppelin intellisense?
Поддерживает ли Apache Zeppelin intellisense/автозаполнение в пользовательском интерфейсе ноутбука?
если да, то как мне его использовать?
Я пытался искать в Интернете, но не смог найти источник, который работает. Этот...
10780 просмотров
schedule
29.05.2023
Можно ли настроить скин на Zeppelin?
Можно ли настроить скин на Zeppelin? Другими словами, заменить логотип Zeppelin на что-то другое?
6574 просмотров
schedule
27.10.2022
Как создать блокнот с абзацем, загруженным кодом, с помощью REST API zeppelin
Я хочу создать блокнот zeppelin через REST API zeppelin. Я не хочу создавать пустой блокнот, вместо этого я хочу создать блокнот с некоторым кодом Scala.
Какие параметры мне нужно передать для создания такой записной книжки? Или можно ли...
1363 просмотров
schedule
24.05.2022
Apache Zeppelin выдает ошибку с искрой на разных машинах
У меня есть локальная установка кластера искры с одним главным и одним подчиненным компьютером. Я установил Zeppelin на другую машину и попытался запустить несколько команд из Zeppelin, чтобы запустить мастер-машину. Для этого я создал интерпретатор...
1025 просмотров
schedule
22.12.2022
R: установить пакет repr
Я новичок в R и пытаюсь использовать следующий Apache Zeppelin с установкой интерпретатора R: https://github.com/elbamos/Zeppelin-With-R/tree/rinterpreter-0.5.5
Однако, как говорится в руководстве, одним из предварительных требований является...
1502 просмотров
schedule
18.12.2022
Ошибка при выполнении абзацев Zeppelin в Spark на кластере Linux в Azure HdInsight
Я следовал этому руководству для настройки Zeppelin в кластере Spark (версия 1.5.2) в HDInsight в Linux. Все работало нормально, мне удалось успешно подключиться к ноутбуку Zeppelin через туннель SSH. Однако, когда я пытаюсь запустить любой абзац,...
516 просмотров
schedule
01.02.2023
Цеппелин отключен
Я скачал бинарный пакет zeppelin и запустил его. Однако он отключен. Вот журнал:
INFO [2016-01-12 14:37:56,592] ({main} QuartzScheduler.java[initialize]:305) - Scheduler meta-data: Quartz Scheduler (v2.2.1) 'Defau
ltQuartzScheduler' with...
1023 просмотров
schedule
23.02.2023
Zeppeline — Как настроить Zeppeline для подключения к удаленному sparkmaster?
У меня есть искровой кластер из 5 узлов на отдельном наборе хостов. Я установил zeppeline на отдельный хост и подключил интерпретатор искры для выполнения запросов к искровому кластеру.
Zeppeline версии 1.6 - Установлен на рабочий стол
Я...
6219 просмотров
schedule
21.10.2022
Zeppelin — проблемы Spark 1.6 с зависимостями
Недавно зависимости были перенесены с рабочего листа на интерпретатор, как показано на снимке экрана ниже:
К сожалению, при применении зависимостей, как показано ниже:
Ошибка возникает при вызове искрового контекста:
или другой...
577 просмотров
schedule
05.10.2022
Цеппелин терпит неудачу; Класс UTF8String.class отличается в библиотеках Vora и Spark 1.5.2.
Установил Вора 1.1. Патч 1 для HDP 2.3 со Spark 1.5.2, для SLES 11 SP3. Это не совсем та конфигурация, что указана в Note 2213226, но шелл-версия Вора вроде нормально работает с тестом 2.7 Инструкции по установке (последняя не прописывала версии HDP...
208 просмотров
schedule
20.10.2022
Как запустить блокнот zeppelin из командной строки (автоматически)
Как запустить блокнот из командной строки?
В дополнение к 1, как мне передать аргументы командной строки в блокнот? т.е. получить доступ к аргументам командной строки из кода ноутбука?
5547 просмотров
schedule
25.03.2024
Переводчик dep не найден
Я пытаюсь использовать в Zeppelin интерпретатор dep.
Я использую объявление% dep в своем блокноте zeppelin.
Тем не менее, я получаю сообщение об ошибке «dep интерпретатор не найден».
Интерпретатор% dep настроен в разделе интерпретатора...
2081 просмотров
schedule
03.06.2024
Как использовать результат интерпретатора jdbc и интерпретатора cassandra в одном абзаце в Apache Zeppelin
Я пытаюсь сделать блокнот в apache zeppelin, объединив результаты двух разных интерпретаторов. Один - jdbc, а другой - cassandra. Как я могу объединить результат обоих интерпретаторов в одном абзаце.
460 просмотров
schedule
28.03.2023