Snowflake High Performance connector for Kafka: Testar o conector

Este tópico descreve as etapas para testar o próprio conector Snowflake High Performance connector for Kafka.

Teste e uso do conector Kafka

A Snowflake recomenda testar o conector Kafka com uma pequena quantidade de dados antes de usar o conector em um sistema de produção.

  1. Verifique se o Kafka e o Kafka Connect estão funcionando.

  2. Verifique se você criou o tópico Kafka apropriado.

  3. Create (or use an existing) message publisher. Make sure that the messages published to the topic have the right format (JSON, Avro, Protobuf).

  4. Create a configuration that specifies the topic to subscribe to and the Snowflake table to write to.

  5. Grant the minimum privileges required on the Snowflake objects (database, schema) to the role that will be used to ingest data.

  6. Publique um conjunto de dados de exemplo para o tópico Kafka configurado.

  7. Aguarde alguns segundos para que os dados se propaguem pelo sistema e, em seguida, verifique a tabela do Snowflake para confirmar se os registros foram inseridos.