Junho de 2022

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em junho de 2022.

ALTER TABLE alterações de permissão para o Catálogo do Unity

30 de junho de 2022

No Catálogo do Unity, houve uma atualização dos privilégios necessários para executar instruções ALTER TABLE. Anteriormente, OWNERSHIP de uma tabela era exigido para executar todos os comandos ALTER TABLE. Agora, OWNERSHIP só é necessário na tabela para alterar o proprietário, conceder permissões na tabela, alterar o nome dela e modificar uma definição de exibição. Para todas as outras operações de metadados em uma tabela (por exemplo, atualizar comentários, propriedades ou colunas), é possível fazer atualizações com a permissão MODIFY na tabela.

Veja ALTER TABLE e ALTER TABLE.

O período de Suporte Estendido do Databricks Runtime 6.4 chega ao fim.

30 de junho de 2022

O suporte do Suporte Estendido do Databricks Runtime 6.4 terminou em 30 de junho. Consulte ciclos de vida de suporte do Databricks.

Término do suporte do Databricks Runtime série 10.2

22 de junho de 2022

O suporte para Databricks Runtime 10.2 e Databricks Runtime 10.2 para Machine Learning terminou em 22 de junho. Consulte ciclos de vida de suporte do Databricks.

Driver ODBC do Databricks 2.6.24

22 de junho de 2022

Lançamos a versão 2.6.24 do driver ODBC do Databricks (download). Esta versão adiciona suporte para configurar a tradução de consulta para sintaxes CTAS, permite que os usuários substituam SQL_ATTR_QUERY_TIMEOUT no conector e atualiza a biblioteca OpenSSL.

Essa versão também corrige os seguintes problemas:

• O conector não permite o uso de certificados de servidor e certificados intermediários que não tenham uma entrada de CDP (ponto de distribuição de CRL).
• Ao usar um proxy, o conector define o nome do host incorreto para a SNI (Indicação de Nome do Servidor) do SSL.

O provedor do Databricks Terraform agora está em GA

22 de junho de 2022

O provedor Databricks Terraform agora está geralmente disponível.

O Terraform permite automatizar totalmente a implantação para suas plataformas de dados com os processos de IaC (infraestrutura como código) existentes do Terraform.

Você pode usar o provedor Terraform do Databricks para definir ativos em Azure Databricks workspaces, como clusters e trabalhos, e para impor o controle de acesso por meio de permissões para usuários, grupos e entidades de serviço.

O provedor Databricks Terraform fornece um registro completo de auditoria das implantações. Você pode usar o provedor do Databricks Terraform como espinha dorsal para suas estratégias de recuperação de desastres e continuidade dos negócios.

O provedor do Databricks Terraform também dá suporte ao Catálogo do Unity (Versão Prévia), permitindo que você implante esse importante recurso de governança com facilidade e em escala.

Databricks Runtime 11.0 e 11.0 ML estão em Disponibilidade Geral; Photon 11.0 está em Prévia Pública

16 de junho de 2022

O Databricks Runtime 11.0 e o Databricks Runtime 11.0 ML estão em disponibilidade geral. O Databricks Runtime 11.0 Photon está em Versão Prévia Pública.

Consulte Databricks Runtime 11.0 (EoS) e Databricks Runtime 11.0 para Machine Learning (EoS).

Alterar para Repos diretório de trabalho padrão no Databricks Runtime 11.0

16 de junho de 2022

O diretório de trabalho do Python para notebooks em um repositório padrão é o diretório que contém os notebooks. Por exemplo, em vez de /databricks/driver, o diretório de trabalho padrão é /Workspace/Repos/<user>/<repo>/<path-to-notebook>. Isso permite que a importação e a leitura de arquivos em Repos funcionem por padrão em clusters do Databricks Runtime 11.0.

Isso também significa que a gravação no diretório de trabalho atual falha com uma mensagem de erro Read-only filesystem. Se você quiser continuar gravando no sistema de arquivos local para um cluster, grave em /tmp/<filename> ou /databricks/driver/<filename>.

Término do suporte do Databricks Runtime série 10.1

14 de junho de 2022

O suporte para Databricks Runtime 10.1 e Databricks Runtime 10.1 para Machine Learning terminou em 14 de junho. Consulte ciclos de vida de suporte do Databricks.

O DLT agora dá suporte ao SCD tipo 2

13 a 21 de junho de 2022: versão 3.74

Seus pipelines DLT agora podem usar o SCD tipo 2 para capturar mudanças nos dados de origem e manter o histórico completo de atualizações nos registros. Isso aprimora o suporte DLT existente para SCD tipo 1. Confira as APIs AUTO CDC: Simplifique a captura de alterações de dados com pipelines.

Criar pipelines DLT diretamente na interface do usuário do Azure Databricks

13 a 21 de junho de 2022: versão 3.74

Agora você pode criar um pipeline DLT no menu Create na barra lateral da interface do usuário do Azure Databricks.

Selecione o canal DLT ao criar ou editar um pipeline

13 a 21 de junho de 2022: versão 3.74

Agora você pode configurar o canal para o pipeline DLT nos diálogos Criar pipeline e Editar configurações de pipeline. Anteriormente, a configuração do canal exigia a edição das configurações na configuração JSON do pipeline.

Comunicar-se entre tarefas em seus trabalhos de Azure Databricks com valores de tarefa

13 de junho de 2022

Agora você pode comunicar valores entre tarefas em seus trabalhos de Azure Databricks com valores de tarefa. Por exemplo, você pode usar valores da tarefa para transmitir a saída de um modelo de machine learning para tarefas subsequentes na mesma execução do trabalho. Confira o taskValues subutility (dbutils.jobs.taskValues).

Habilitar a alternância de contas na interface do usuário do Databricks

8 de junho de 2022

Se pertencerem a mais de uma conta, os usuários agora poderão alternar entre contas na interface do usuário do Databricks. Para usar o alternador de contas, clique no endereço de email na parte superior da interface do usuário do Databricks e passe o mouse sobre Alternar conta. Em seguida, selecione a conta para a qual você quer navegar.