Создание вашего первого Kafka ClickPipe
В этом руководстве мы проведем вас через процесс создания вашего первого Kafka ClickPipe.
Перейдите к источникам данных
Выберите кнопку Источники данных в левом меню и нажмите на "Настроить ClickPipe".
Настройка источника данных
Заполните форму, предоставив вашему ClickPipe имя, описание (опционально), ваши учетные данные и другие детали подключения.
Настройка реестра схем (опционально)
Для потоков Avro требуется действительная схема. См. Реестры схем для получения дополнительной информации о том, как настроить реестр схем.
Настройка обратной частной конечной точки (опционально)
Настройте обратную частную конечную точку, чтобы позволить ClickPipe подключаться к вашему кластеру Kafka с использованием AWS PrivateLink. См. нашу документацию по AWS PrivateLink для получения дополнительной информации.
Настройка вашей целевой таблицы
На следующем шаге вы можете выбрать, хотите ли вы загружать данные в новую таблицу ClickHouse или использовать существующую. Следуйте инструкциям на экране, чтобы изменить имя вашей таблицы, схему и настройки. Вы можете видеть предварительный просмотр ваших изменений в реальном времени в примере таблицы сверху.
Вы также можете настроить расширенные настройки, используя предоставленные элементы управления.
Настройка разрешений
ClickPipe создаст специального пользователя для записи данных в целевую таблицу. Вы можете выбрать роль для этого внутреннего пользователя, используя пользовательскую роль или одну из предопределенных ролей:
Полный доступ: с полным доступом к кластеру. Это может быть полезно, если вы используете материализованное представление или словарь с целевой таблицей.Только целевая таблица: с разрешениямиINSERTтолько для целевой таблицы.
Завершение настройки
Нажатие на "Создать ClickPipe" создаст и запустит ваш ClickPipe. Теперь он будет отображаться в разделе Источники данных.
