Novidades do Lakeflow Designer: Guardrails, joins múltiplos e Genie Code
A atualização de setembro do Lakeflow Designer traz validação de regras com Guardrails, joins de três ou mais tabelas, criação de operadores via Genie Code e mais.
O que mudou
Para que serve
Imagine que você precisa construir fluxos de preparação visual de dados e agora conta com novos recursos para validar qualidade, juntar várias fontes e automatizar tarefas. O Lakeflow Designer expande as capacidades do canvas visual.
- Validar dados contra regras de nulos, valores únicos e aceitos com o operador Guardrails.
- Combinar três ou mais tabelas em um único operador de Join.
- Criar operadores personalizados usando descrições em linguagem natural com o Genie Code.
- Importar múltiplos arquivos de uma só vez como operadores de origem.
Como usar
Para criar um novo fluxo de preparação visual de dados no Databricks com Unity Catalog:
- Clique em New na barra lateral e selecione Visual data prep.
- Adicione operadores de origem arrastando arquivos ou conectando tabelas.
- Configure novos operadores como Guardrails ou Join diretamente no painel lateral.
- Utilize o Genie Code na barra lateral para gerar funções Python e configurações descritas por texto.
Limitações e requisitos
- Requer um workspace Databricks com Unity Catalog habilitado.
- É necessário ter permissão
CAN USEem pelo menos um recurso de computação de uso geral (serverless ou all-purpose).
- lakeflow designer
- unity catalog
- pipelines
- data prep
- genie code
Lakeflow Designer September Release
Resumo e explicação gerados por IA a partir da release note oficial. Em caso de dúvida, a documentação oficial da plataforma prevalece.
Relacionadas
- DatabricksBeta
Conector do SurveyMonkey chega ao Lakeflow Connect no Databricks
O Lakeflow Connect agora conta com conector nativo para o SurveyMonkey em Beta, permitindo ingestão incremental de pesquisas, respostas e contatos com governança no Unity Catalog.
lakeflow connect · surveymonkey - DatabricksBeta
Lakeflow Connect adiciona conector do Oracle Eloqua em Beta
O Lakeflow Connect agora oferece um conector gerenciado em Beta para o Oracle Eloqua, permitindo ingestão incremental de dados de marketing governados pelo Unity Catalog.
lakeflow connect · oracle eloqua - DatabricksBeta
Ingira métricas do GA4 com o novo conector do Lakeflow Connect
O Lakeflow Connect ganha conector gerenciado em Beta para o Google Analytics 4, permitindo ingestão incremental de relatórios agregados via API com governança no Unity Catalog.
lakeflow connect · google analytics