Abril de 2023

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em abril de 2023.

Databricks Marketplace (Visualização Pública): um mercado aberto para dados, análises e IA

27 de abril de 2023

Agora você pode usar o Databricks Marketplace para descobrir, acessar e implantar centenas de produtos de dados em seus fluxos de trabalho de IA e análise. O Databricks Marketplace aproveita o Compartilhamento Delta para fornecer compartilhamento seguro e contínuo de produtos de dados gratuitos e comerciais em qualquer nuvem ou região. Confira O que é o Databricks Marketplace?.

Configurar o formatador Python

25 de abril de 2023

Para arquivos e notebooks no Databricks Repos, agora você pode configurar o formatador Python com base na especificação do *Black*. Consulte Python biblioteca de formatadores pretos.

Os arquivos do espaço de trabalho estão em disponibilidade geral (GA)

24 de abril de 2023

Agora você pode trabalhar com arquivos que não são de notebook no Azure Databricks. Os arquivos de workspaces estão ativados por padrão em todos os workspaces. Consulte O que são Arquivos de workspace?.

Os scripts de inicialização com escopo de cluster agora podem ser armazenados em arquivos de espaço de trabalho

24 de abril de 2023

Agora você pode armazenar scripts de inicialização com escopo de cluster em arquivos de área de trabalho, independentemente da versão do Databricks Runtime usada pela sua infraestrutura de computação. A Databricks recomenda armazenar todos os scripts de inicialização com escopo de cluster em arquivos do espaço de trabalho. Consulte Armazenar scripts de inicialização em arquivos do espaço de trabalho.

Criar um escopo de segredo com suporte do Azure Key Vault com um service principal

19 de abril de 2023

Agora você pode criar um escopo de segredo com suporte do Azure Key Vault usando um principal de serviço. Consulte Gerenciar escopos secretos

Novos privilégios do Compartilhamento Delta permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor

18 de abril de 2023

Os novos privilégios USE SHARE, USE RECIPIENT, USE PROVIDER e SET SHARE PERMISSION permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor que, de outra forma, exigiriam a função de administrador do metastore ou a propriedade do objeto. Esses privilégios permitem limitar o número de usuários que têm a poderosa função de administrador do metastore. Consulte privilégios que se aplicam somente ao Delta Sharing ou ao Databricks Marketplace.

Databricks Connect V2 (Visualização Pública)

17 de abril de 2023

A partir do Databricks Runtime 13.0, Databricks Connect se baseia em Spark Connect, permitindo que os desenvolvedores usem o poder do Databricks e seu IDE de escolha para desenvolver e depurar interativamente seu código em qualquer Azure Databricks workspace.

Nova interface de usuário de métricas de cluster

14 de abril de 2023

Os clusters que usam o Databricks Runtime 13.0 e superior têm acesso à nova interface do usuário de métricas de cluster. Esse recurso substitui Ganglia como a ferramenta de monitoramento de métricas de cluster. A nova interface do usuário de métricas de cluster inclui uma exibição ao vivo do desempenho do cluster e exibições históricas personalizadas minuto a minuto. Para obter mais informações, consulte Exibir métricas de computação.

O Databricks Runtime 13.0 está em disponibilidade geral.

14 de abril de 2023

O Databricks Runtime 13.0 e o Databricks Runtime 13.0 ML agora estão em disponibilidade geral.

Consulte Databricks Runtime 13.0 (EoS) e Databricks Runtime 13.0 para Aprendizado de Máquina (EoS).

Controle o acesso ao console da conta por intervalos de endereços IP (Visualização Pública)

17 de abril de 2023

Azure Databricks console da conta agora dá suporte a listas de controle de acesso IP para controlar o acesso ao console da conta por faixas de endereços IP, semelhante ao suporte atual para listas de acesso IP em workspaces. Use uma interface do usuário do console de conta ou uma API REST para gerenciar o acesso. Consulte Configurar listas de acesso IP para o console da conta.

Quando Azure Databricks bloqueia uma solicitação, Azure Databricks gera um novo evento nos logs de auditoria no nível da conta com o serviço accounts e o evento accountIpAclsValidationFailed. Consulte Referência ao log de diagnóstico.

O provedor Databricks Terraform foi atualizado para a versão 1.14.3

14 de abril de 2023

A versão 1.14.3 adiciona suporte ao exportador para databricks_sql_alert, adiciona suporte para notificações no databricks_pipelinee muito mais. Para obter mais detalhes, consulte o log de alterações da versão 1.14.3.

Entradas de log de diagnóstico para as configurações administrativas alteradas no espaço de trabalho

14 de abril de 2023

Agora há eventos de log de auditoria para alterações em determinadas configurações de administrador nos logs de diagnóstico do espaço de trabalho. Dentro do serviço accounts, os novos nomes de ação de evento são deleteSetting e setSetting. Consulte Referência ao log de diagnóstico. Nem todas as configurações geram eventos auditáveis.

Para a chave inicial gerenciada pelo cliente para discos gerenciados, o Azure Databricks agora encerra os recursos de computação.

10 de abril de 2023

Anteriormente, a adição inicialmente de uma chave gerenciada pelo cliente para discos gerenciados reinicia todos os recursos de computação em execução (clusters, pools). Os recursos de computação agora são encerrados, não reiniciados, o que significa que você deve ligá-los novamente manualmente após a conclusão da atualização. Azure Databricks impede que os clusters sejam executados ou iniciados ao adicionar uma chave. Planeje o tempo de inatividade e encerre todos os recursos de computação antes de adicionar a chave para evitar o encerramento automático, que pode causar problemas para alguns tipos de cargas de trabalho.

Para um workspace que já tem uma chave gerenciada pelo cliente para discos gerenciados, se você girar a chave, não precisará encerrar os recursos de computação.

O provedor Databricks Terraform foi atualizado para as versões 1.14.1 e 1.14.2

4-6 de abril de 2023

A versão 1.14.1 exclui funções em chamadas de lista de API SCIM para reduzir a carga no serviço SCIM do Databricks e muito mais. A versão 1.14.2 adiciona uma tarefa de arquivo SQL ao recurso databricks_job, corrige vários bugs e muito mais. Para obter mais detalhes, consulte o log de alterações da versão 1.14.1 e 1.14.2.

Configurações combinadas do usuário SQL e configurações gerais do usuário

3-5 de abril de 2023

As configurações do usuário do SQL foram combinadas com as configurações gerais do usuário do workspace para criar uma experiência unificada para usuários do workspace. Todas as configurações do usuário SQL agora são acessadas em Configurações:

• A guia Senha agora é a guia Conta e Senha.
• A aba Fragmentos de Consulta é visível para os usuários com a permissão do SQL do Databricks.

As visualizações antigas do notebook foram descontinuadas.

4 de abril de 2023

A criação e edição de visualizações herdadas do notebook foram preteridas e serão removidas do produto em breve. As visualizações herdadas existentes continuarão a ser renderizadas. Os detalhes serão exibidos nas notificações dentro do produto.

Criar ou modificar tabela a partir da página de upload de arquivos suporta uploads de arquivos JSON

3 de abril de 2023

A página Criar ou modificar uma tabela a partir do upload de um arquivo agora tem suporte para uploads de arquivos JSON. Para obter mais informações, confira Criar ou modificar uma tabela usando o upload de arquivos .