Ingira métricas do GA4 com o novo conector do Lakeflow Connect

O Lakeflow Connect adicionou um conector gerenciado para o Google Analytics Aggregated em estágio Beta. Com ele, você transfere métricas consolidadas do Google Analytics 4 (GA4) diretamente para o Databricks por meio da Google Analytics Data API.

Para começar a utilizar o recurso, administradores do workspace precisam habilitá-lo na página de Previews. O processo de ingestão exige três etapas de configuração: preparar o acesso no Google Analytics, registrar a conexão com credenciais no Catalog Explorer do Unity Catalog e, por fim, provisionar o pipeline de ingestão via API ou Declarative Automation Bundles (DABs).

Para que serve

Imagine que seu time precisa analisar tendências de conversão, tráfego de canais e audiência consolidada sem precisar construir scripts manuais para extrair relatórios da API do Google Analytics.

Com o conector, você pode:

• Ingerir relatórios pré-definidos de atividade de usuários, aquisição, engajamento, monetização, demografia e tecnologia.
• Criar relatórios customizados escolhendo métricas, dimensões e níveis de agregação específicos.
• Configurar ingestão incremental para atualizar apenas períodos recentes.
• Manter o histórico de dados com suporte a Slowly Changing Dimensions (SCD) tipo 2.

Limitações e requisitos

• Estágio: Disponível em Beta; requer ativação prévia por administrador na página de Previews.
• Interface: Não há suporte para criação de pipelines pela interface visual (UI). A definição deve ser feita via API ou Declarative Automation Bundles (DABs).
• Autenticação: Suporta Service Account OAuth 2.0 (máquina para máquina, recomendado) e OAuth 2.0 de usuário para máquina (U2M). Chaves de API e usuário/senha básicos não são suportados.
• Filtros e colunas: É possível selecionar e desselecionar colunas via API, mas não há suporte a filtros de linha pela API.
• Evolução de esquema: O conector adiciona e remove colunas automaticamente. Alterações de tipo de dado ou renomeação de colunas não são suportadas automaticamente e exigem recarga completa (full refresh).
• Orquestração e governança: Integrado ao Unity Catalog e agendável via Lakeflow Jobs.
• Dados brutos: Para eventos granulares não agregados exportados para o BigQuery, deve-se usar o conector Google Analytics Raw Data em vez deste.

Como aplicar num pipeline

Os relatórios agregados entram diretamente em tabelas Delta gerenciadas no Unity Catalog na camada Bronze ou Silver. Em seguida, pipelines orquestrados pelo Lakeflow Jobs combinam essas métricas de marketing com dados transacionais do negócio em tabelas Gold de conversão e receita.