Гоблин - как получить публикацию из Facebook

Я некоторое время изучал Gobblin и в настоящее время испытываю трудности с использованием Gobblin для получения сообщений с Facebook. Я не смог найти ни одного примера подключения в Интернете или, возможно, я искал его неправильно.

Я рассматриваю интеграцию restfb в Gobblin, однако в Gobblin есть класс RestAPI с соединителем, источником и экстрактором, и я изо всех сил пытаюсь найти способ объединить их вместе. Не могли бы вы помочь мне с простым руководством о том, как реализовать это или указать мне правильную инструкцию? Заранее большое спасибо.


java facebook-graph-api data-ingestion restfb gobblin
person Leo    schedule 15.11.2016    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Я работаю над тем же, я извлек свои данные с помощью API-интерфейса graph-facebook с использованием кода Java. Недавно я начал использовать gobblin для извлечения данных. В начале я запустил gobblin в режиме отладки, чтобы понять, как работает поток, я думаю, вам обязательно стоит попробовать это сделать. Теперь я получаю свои данные в виде объекта json и использую преобразователи, строители, писатели, доступные для передачи данных в HDFS. Если вам нужны какие-то указания о том, как запустить gobblin в режиме отладки, вы можете прокомментировать ниже, я буду рад помочь.

person ashutosh srivastava    schedule 07.12.2016
comment
Я переключился на Spark для этого, так как Gobblin все еще относительно новый, а сообщество молодое, я также не так хорош в программировании, поэтому я выбрал легкий путь. Тем не менее, я все еще сожалею, что не могу использовать всю мощь Гоблина. Пожалуйста, дайте мне руководство, как вы видите лучше всего, и если бы вы могли поделиться своей работой, это было бы самым совершенным. Спасибо. - person Leo; 07.12.2016