Spanish English German Portuguese
Spanish English German Portuguese

Kafka Connect Databricks Delta Lake Connector

Kafka Connect Databricks Delta Lake Connector

att_0_for_1846903047.png

Conector para enviar desde GlobalSuite ficheiros, evidências, documentos e objetos de armazenamento para Databricks Delta Lake ou para o sistema de destino definido.

Etiquetas: Data Warehouse | Cloud | Sink | Armazenamento

Ferramenta ou sistema

Databricks Delta Lake

Fabricante da ferramenta

Databricks

Fornecedor do conector

Confluent, Inc

Nome do conector

Kafka Connect Databricks Delta Lake Connector

Tipo de conector

Sink

Etiquetas

Data Warehouse | Cloud | Sink | Armazenamento

Informação que gere

ficheiros, evidências, documentos e objetos de armazenamento

Detalhes

O conector Kafka Connect Databricks Delta Lake Connector permite enviar desde GlobalSuite para Databricks Delta Lake informações relacionadas com ficheiros, evidências, documentos e objetos de armazenamento.

É útil quando Databricks Delta Lake deve atuar como sistema de destino, exploração, arquivo ou monitorização para casos de retenção de evidências, troca de ficheiros com terceiros, arquivo documental e exploração analítica posterior.

Características

  • Envio controlado de ficheiros, evidências, documentos e objetos de armazenamento desde GlobalSuite para Databricks Delta Lake ou para o repositório de destino definido.

  • Gestão de caminhos, pastas, contentores ou prefixos para organizar a informação por processo ou período.

  • Compatibilidade com usos de arquivo, troca de evidências, backup documental ou exploração posterior.

  • Definição de formatos, filtros e critérios de seleção para limitar o volume importado ou exportado.

  • Rastreabilidade sobre quais ficheiros foram processados, quando e com que resultado.

Benefícios chave

  • Facilita a conservação de evidências e documentação em repositórios corporativos já governados.

  • Reduz cargas manuais de ficheiros e melhora a organização por processo, terceiro, controlo ou período.

  • Apoia políticas de retenção, auditoria e backup documental com menor esforço operacional.

  • Permite compartilhar informações com áreas internas ou terceiros usando localizações controladas.

  • Melhora a preparação de dados para relatórios, data lake ou análises posteriores.

Instalação

Nota de configuração: Antes de ativar a integração, valida credenciais, permissões, alcance funcional e um teste de dados com a área responsável.

  1. Acede ao Marketplace de GlobalSuite® e seleciona Kafka Connect Databricks Delta Lake Connector.

  2. Configura o destino em Databricks Delta Lake: URL ou endpoint, credenciais, permissões e ambiente.

  3. Define que informações serão enviadas: ficheiros, evidências, documentos e itens de armazenamento, filtros, formato e periodicidade.

  4. Mapeia os campos de GlobalSuite com a estrutura esperada pelo sistema de destino.

  5. Executa um teste, verifica a receção no destino e ativa a integração.

Mais informações

https://www.databricks.com/product/delta-lake-on-databricks

Uso recomendado no GlobalSuite

Utiliza este conector quando precisares de enviar informações de GlobalSuite para Databricks Delta Lake, por exemplo para retenção de evidências, troca de ficheiros com terceiros, arquivo documental e exploração analítica posterior. Antes de o publicar, valida com a equipa proprietária do sistema de destino o formato esperado, permissões, frequência e critérios de qualidade.