Pular para o conteúdo
Lucas Lessa
Café com Features
Voltar para as notícias
DatabricksBetaImpacto: Médio

Conector do GitLab disponível no Lakeflow Connect

Ingira dados de repositórios, projetos, grupos e CI/CD do GitLab diretamente para o Databricks com o novo conector gerenciado.

O que mudou

Para que serve

Imagine que você precisa centralizar métricas de desenvolvimento, dados de pipelines de CI/CD e informações de segurança do GitLab junto com seus dados analíticos. Com o conector gerenciado do GitLab no Lakeflow Connect, você consegue:

  • Trazer dados de repositórios, grupos, projetos, CI/CD e segurança para o Databricks.
  • Realizar ingestão incremental de forma automatizada.
  • Governar os dados diretamente com o Unity Catalog.

Como usar

A configuração inicial e a criação do pipeline utilizam o Catalog Explorer e interfaces suportadas do Lakeflow Connect. O administrador do workspace deve primeiro habilitar o recurso na página de Previews e configurar a autenticação OAuth U2M.

Limitações e requisitos

  • O recurso está em Beta.
  • Exige que o administrador do workspace habilite o Lakeflow Connect para o GitLab na página de Previews.
  • Suporta apenas autenticação do tipo OAuth U2M (OAuth M2M e autenticação básica não são suportados).
  • Tabelas com colunas em formato VARIANT não suportam SCD Tipo 2.
  • Alterações automáticas de esquema suportam adição e remoção de colunas, mas mudanças de tipo de dado e renomeação de colunas não são suportadas (exigem atualização completa).
  • Filtragem de linhas via API não é suportada.
Ver nota oficial do Databricks

GitLab connector is available in Beta

Resumo e explicação gerados por IA a partir da release note oficial. Em caso de dúvida, a documentação oficial da plataforma prevalece.

Relacionadas