Перейти к основному содержимому
Перейти к основному содержимому

Шаблоны Google Dataflow

ClickHouse Supported

Шаблоны Google Dataflow предоставляют удобный способ выполнения предустановленных, готовых к использованию конвейеров данных без необходимости написания пользовательского кода. Эти шаблоны разработаны для упрощения распространённых задач обработки данных и созданы с использованием Apache Beam, используя коннекторы, такие как ClickHouseIO, для бесшовной интеграции с базами данных ClickHouse. Запуская эти шаблоны на Google Dataflow, вы можете достичь высокомасштабируемой, распределённой обработки данных с минимальными усилиями.

Зачем использовать шаблоны Dataflow?​

  • Простота использования: Шаблоны устраняют необходимость кодирования, предлагая преднастроенные конвейеры, адаптированные к конкретным случаям использования.
  • Масштабируемость: Dataflow обеспечивает эффективное масштабирование вашего конвейера, обрабатывая большие объёмы данных с помощью распределённой обработки.
  • Экономия средств: Платите только за ресурсы, которые вы используете, с возможностью оптимизации затрат на выполнение конвейера.

Как запустить шаблоны Dataflow​

На сегодняшний день официальный шаблон ClickHouse доступен через Google Cloud Console, CLI или Dataflow REST API. Для подробных пошаговых инструкций обратитесь к Руководству по запуску конвейера Google Dataflow из шаблона.

Список шаблонов ClickHouse​