Как интегрировать Palantir Foundry с Amazon S3 или HDFS

Чтобы интегрировать данные с другой платформы, вам понадобится источник и синхронизация в подключении к данным. Для их создания вам потребуются разрешения платформы, не все пользователи могут это сделать, поскольку это может включать политики управления данными организации.

Предполагая, что у вас нет источника с допустимой конфигурацией для S3. Вам нужно будет создать его. В разделе «Подключение данных» нажмите «Источники», а затем нажмите «Новый источник». Затем вы можете сделать это двумя способами:

• Используйте предварительно созданный источник S3: нажмите File System в новом раскрывающемся списке New Source и следуйте инструкциям мастера.
• Используйте настраиваемый коннектор, например magritte-rest: нажмите Custom в том же раскрывающемся списке.

Для магритт-остального:

• Выберите один из доступных агентов или облачный захват в зависимости от ваших предпочтений.
• Дайте ему имя и сохраните его в папку.
• Добавьте конфигурацию, например:

type: magritte-rest
url: 'https://foobar.organization.s3.amazonaws.com'

Теперь, чтобы создать синхронизацию, используйте конфигурацию, подобную этой:

type: rest-source-adapter
method: GET
path: the/path/in/s3/yourdata
outputFileType: csv

Также поддерживаются другие типы выходных файлов (json, zip, ...)

Palantir обычно предоставляет во внутренней сети компании-заказчика форум вопросов и ответов, чтобы помочь разработчикам и решить проблемы.

Кроме того, они также обеспечивают поддержку на месте, и на домашней странице рабочей области Foundry есть раздел «Обучение и обучение», в котором представлены примеры и учебные пособия для начала работы.