bytevyte
bytevyte
Language
EN DE ES FR PT IT
ai-beats-pt —

Databricks permite acesso de motores externos ao Unity Catalog via APIs abertas

Unity Catalog

A Databricks aumentou a interoperabilidade do seu Unity Catalog ao lançar APIs abertas e tornar o credential vending geralmente disponível. Essas atualizações permitem que ambientes de computação de terceiros interajam com Delta tables gerenciadas. Ferramentas como Apache Spark, Flink e DuckDB agora podem executar operações de dados completas, incluindo a criação e atualização de tabelas, diretamente no catálogo. O sistema utiliza um novo padrão aberto para commits de catálogo para manter a integridade transacional e suportar gravações simultâneas em diferentes plataformas.

A atualização remove barreiras técnicas associadas a sistemas proprietários de governança de dados. Ao abrir o Unity Catalog, a Databricks permite que as empresas utilizem uma única camada de governança enquanto escolhem motores de processamento específicos para diferentes tarefas. A segurança para pipelines de longa duração é gerenciada por meio de OAuth machine-to-machine (M2M) e atualização automatizada de credenciais.

Detalhes técnicos do Credential Vending

O credential vending está agora geralmente disponível para acesso seguro a dados. Este sistema emite tokens temporários de acesso limitado para motores de computação externos, o que substitui a necessidade de credenciais estáticas permanentes. A Databricks também lançou uma prévia pública deste recurso para Volumes. Esta extensão fornece acesso governado a tipos de dados não estruturados, incluindo arquivos de vídeo e imagem.

O uso de APIs abertas no ambiente Unity Catalog proporciona mais flexibilidade para sistemas de IA corporativos. À medida que as organizações constroem modelos de IA mais avançados, elas exigem acesso seguro a dados governados em múltiplos motores. A Databricks planeja adicionar controles de acesso baseados em atributos (ABAC) em lançamentos futuros. Esses controles permitirão que administradores definam políticas de segurança em nível de linha e coluna para leituras de dados externos.

Novos recursos de desempenho também estão disponíveis. O Predictive Optimization aumenta a velocidade das consultas em até 20 vezes e reduz as despesas de armazenamento em 50 por cento. Essas melhorias visam reduzir o custo total de gerenciamento de grandes conjuntos de dados, mantendo o acesso amplo ao Unity Catalog.

A estrutura expandida do Unity Catalog integra Delta tables em fluxos de trabalho mais diversos. A Databricks está usando padrões abertos para commits transacionais para tornar sua camada de governança um conector padrão para stacks de dados. As organizações podem usar DuckDB para tarefas de dados locais ou Flink para streaming, mantendo a segurança e a auditoria centralizadas no Unity Catalog.

Embora nos esforcemos pela precisão, o bytevyte pode cometer erros. Os usuários são aconselhados a verificar todas as informações de forma independente. Não aceitamos qualquer responsabilidade por erros ou omissões.

✔Human Verified

Share