Вопросы по теме 'giraph'
Проблема с запуском задания жирафа (classnotfoundexception)
Я пытаюсь собрать пример SimpleShortestPathsComputation, включенный в Giraph, и запустить его из своего домашнего каталога. По сути, я просто пытаюсь настроить пример SimpleShortestPaths и запустить его без каких-либо хлопот (не совсем уверен, как...
1062 просмотров
schedule
26.07.2022
Hortonworks HDP2.0 + жираф
У меня hortonworks HDP2.0 работает в песочнице (недавно установленной) на платформе Windows 8.1. Мне нужно узнать, как заставить жирафа работать с HDP 2.0.
Я думаю, что жираф в настоящее время не установлен с HDP 2.0 по умолчанию. Может ли...
1020 просмотров
schedule
17.07.2022
Какая версия CDH с помощью Cloudera Manager автоматически устанавливает JDK1.7?
Я использую Cloudera Manager с CDH4.2.2 для своего кластера 3+1. При запуске установки с помощью менеджера cloudera он автоматически загружает и устанавливает JDK1.6. Я хочу использовать JDK1.7 с CDH для удобства. Возможно ли или есть какая-либо...
192 просмотров
schedule
24.08.2022
Компиляция проекта, использующего старую версию Giraph с помощью Maven
У меня есть проект, который был разработан другой группой и использует старую версию Giraph.
Проект сделан на основе самого проекта Giraph; Структура проекта и файлы точно такие же, как и у Giraph, за исключением того, что некоторые исходники...
187 просмотров
schedule
13.06.2023
ClassNotFoundException, запускающий GiraphRunner на модифицированном SimpleShortestPathsVertex
Я относительно новичок в Giraph, и я пытаюсь заставить мой цикл редактирования-компиляции-развертывания Giraph работать с нашим кодом. Я могу запускать различные примеры, вдохновленные...
853 просмотров
schedule
05.05.2023
Примеры кратчайшего пути Giraph
У меня проблема с запуском данного примера SimpleShortestPathsComputation с файлом tiny_graph.txt. Я всегда застреваю в процессе уменьшения части после части карты. У меня всегда показывает 100% карты и 0% редуцированные и постоянно там висит....
451 просмотров
schedule
06.03.2023
Учебник Giraph Пример задания ShortestPath не работает
Я изучаю краткое руководство по Apache Giraph: http://giraph.apache.org/quick_start.html и успешно настроили псевдораспределенный кластер hadoop и успешно выполнили примеры заданий mapreduce.
Однако при переходе к разделу Giraph я установил...
882 просмотров
schedule
28.04.2023
java.lang.IncompatibleClassChangeError: Найден интерфейс org.apache.hadoop.mapreduce.JobContext, но класс был ожидаемым примером установки
Я запускаю пример из http://giraph.apache.org/quick_start.html#qs_section_2 После успешной установки Giraph я создаю файл /tmp/tiny_graph.txt и запускаю
$HADOOP_HOME/bin/hadoop jar...
1514 просмотров
schedule
09.06.2022
Предполагаемый размер кучи кластера Giraph 4096 МБ превышает текущий доступный объем кучи кластера, равный 0 МБ. Прерывание задания
Я запускаю Giraph с помощью Hadoop 2.5.2 в кластере из 5 узлов. Но когда я пытаюсь запустить пример SimpleShortestPathsComputation, я получаю эту ошибку:
Исключение в потоке "main" java.lang.IllegalStateException: предполагаемая куча кластера...
165 просмотров
schedule
13.01.2023
Гремлин - Жираф - GraphX? На ТитанДб
Мне нужна помощь, чтобы подтвердить свой выбор... и узнать, можете ли вы дать мне некоторую информацию. Моя база данных хранения — TitanDb с Cassandra. У меня очень большой график. Моя цель — использовать Mllib на последнем графе.
Моя первая...
4713 просмотров
schedule
11.06.2023
PageRankBenchmark — Уменьшить на 0% — пример Giraph
Я тестирую свою установку Giraph кластера с одним узлом, используя пример PageRankBenchmark, следующим образом:
$HADOOP_HOME/bin/hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/giraph-examples-1.1.0-for-hadoop-2.4.0-jar-with-dependencies.jar...
227 просмотров
schedule
29.07.2023
Как задать простой формат списка ребер для Apache Giraph
Я пытаюсь запустить графики Стэнфордской программы сетевого анализа (SNAP) на Apache Giraph с помощью Hadoop. Ссылка приведена ниже http://snap.stanford.edu/snap/ .
В настоящее время я пытаюсь запустить график facebook, который находится в...
535 просмотров
schedule
24.08.2022
Путать между хаупом, жирафом и твистером
Я работаю над большими данными, и мой проект состоит из графиков с текстовыми данными. Мне нужно рассчитать сходство между вершинами, вероятностью перехода, количеством связанных компонентов, вектором рейтинга страницы и случайным блужданием в одном...
353 просмотров
schedule
25.07.2022
Ошибка OutOfMemory при чтении байтов с ребер в пряже
Я использую алгоритм BFS в пряже и создаю собственное значение для данных в моей вершине (данные вершины). Но после того, как я сделал это, что-то пошло не так в процессе чтения краев.
Я прослеживаю ошибку до следующих строк кода:
В...
378 просмотров
schedule
26.05.2024
Приложение Giraph зависает на супершаге 4, все рабочие активны, но без прогресса
Я выполняю поиск BFS через сайт Википедии (испанское издание). Я преобразовал дамп ( https://dumps.wikimedia.org/eswiki/20160601 ) в файл, который может быть прочитан с помощью Giraph.
BFS ищет пути, и все в порядке, пока не застрянет в какой-то...
188 просмотров
schedule
29.05.2024
Giraph, Hadoop, Spark и Cassandra
Могу ли я использовать Giraph, если у меня есть кластеры Spark и Cassandra, но нет кластеров Hadoop?
В настоящее время я использую GraphX и вместо этого хотел бы использовать Giraph. Возможно ли это, учитывая, что у меня есть кластеры Spark и я...
315 просмотров
schedule
24.01.2023
Hadoop 1.2.1 работает в локальном режиме, несмотря на установленное значение mapred.job.tracker
Я пытаюсь отправить задание жирафа в кластер hadoop 1.2.1. В кластере есть главный узел узла имени, главный узел уменьшения карты и четыре подчиненных узла. Задание завершается со следующим исключением:
java.util.concurrent.ExecutionException:...
280 просмотров
schedule
31.08.2023
Значения вершин массива для Apache Giraph
Мне нужно обработать граф, который имеет массивы (двойные) для их значения вершины, а не одного двойного. Таким образом, входной формат будет следующим: vertex_Id(строка)\t vertex_value (массив)\t соседей. Глядя на документацию, кажется, что нет...
79 просмотров
schedule
11.02.2023
Обработка графов OLAP — Giraph против Tinkerpop3 GraphComputer
Мой вариант использования — это граф из нескольких сотен миллионов вершин (скажем, от 100M до 1B). Каждая вершина имеет набор из 10 свойств, которые в основном представляют собой оценки, вычисляемые на основе весов ребер вершины и оценок смежных...
463 просмотров
schedule
16.01.2024
Выполняю свою работу на Giraph
Итак, я успешно выполнил SimpleShortestPathComputation на своем компьютере с помощью сценария, показанного здесь:
#VARIABLES
user_dir=/user/hduser
jar=giraph-examples/target/giraph-examples-1.1.0-for-hadoop-2.4.0-jar-with-dependencies.jar...
220 просмотров
schedule
27.06.2023
