ClickHouse Connector Sink en tant que Custom Connector sur Confluent Cloud

• ClickHouse Connector Sink
• Confluent Cloud et Custom Connectors.

​

Le connector Kafka officiel de ClickHouse en tant que Custom Connector

• Le nom du topic Kafka doit être identique à celui de la table ClickHouse. Pour le modifier, utilisez un transformateur (par exemple ExtractTopic).
• Un plus grand nombre de partitions n’améliore pas toujours les performances ; consultez notre prochain guide pour plus de détails et de conseils d’optimisation.

​

Installer le connecteur

'Connector Class' - 'com.clickhouse.kafka.connect.ClickHouseSinkConnector'
'Connector type' - Sink
'Sensitive properties' - 'password'. This will ensure entries of the ClickHouse password are masked during configuration.

{
  "database": "<DATABASE_NAME>",
  "errors.retry.timeout": "30",
  "exactlyOnce": "false",
  "schemas.enable": "false",
  "hostname": "<CLICKHOUSE_HOSTNAME>",
  "password": "<SAMPLE_PASSWORD>",
  "port": "8443",
  "ssl": "true",
  "topics": "<TOPIC_NAME>",
  "username": "<SAMPLE_USERNAME>",
  "key.converter": "org.apache.kafka.connect.storage.StringConverter",
  "value.converter": "org.apache.kafka.connect.json.JsonConverter",
  "value.converter.schemas.enable": "false"
}

• Les Custom Connectors doivent utiliser des endpoints accessibles via l’internet public. Les adresses IP statiques ne sont pas prises en charge.
• Vous pouvez redéfinir certaines propriétés des Custom Connectors. Consultez la liste complète dans la documentation officielle.
• Les Custom Connectors sont disponibles uniquement dans certaines régions AWS
• Consultez la liste des limitations des Custom Connectors dans la documentation officielle