Публикации по теме 'data-engineering-101'
Инжиниринг данных и управление рабочим процессом с префектом
Prefect — это система управления рабочими процессами на основе Python с открытым исходным кодом, которая позволяет определять, планировать и отслеживать конвейеры данных. Вот руководство для начинающих по использованию Prefect для обработки данных:
Монтаж
Чтобы установить Prefect, вы можете использовать pip:
pip install prefect
Определение рабочих процессов
Рабочие процессы в Prefect определяются с помощью кода Python. Рабочий процесс состоит из задач, которые являются отдельными..