O que há de novo no Azure Synapse Analytics?
Esta página é atualizada continuamente com uma revisão recente das novidades do Azure Synapse Analytics e dos recursos atualmente em versão prévia. Para acompanhar as últimas novidades e recursos do Azure Synapse, confira o Blog do Azure Synapse Analytics e vídeos complementares no YouTube.
Para atualizações mais antigas, examine as postagens anteriores do Blog do Azure Synapse Analytics ou as atualizações anteriores no Azure Synapse Analytics.
Importante
O Microsoft Fabric foi anunciado!
- Saiba mais sobre essa nova e emocionante versão prévia e descubra O que é o Microsoft Fabric?
- Introdução aos tutoriais de ponta a ponta no Microsoft Fabric.
- Consulte Novidades no Microsoft Fabric?
Recursos atualmente em versão prévia
A tabela a seguir lista os recursos do Azure Synapse Analytics que estão atualmente em versão prévia. As versões prévias dos recursos estão classificadas em ordem alfabética.
Observação
Os recursos em versão prévia no momento estão disponíveis em termos de uso complementares. Examine os termos legais que se aplicam aos recursos do Azure que estão em versão beta, versão prévia ou que ainda não foram lançados em disponibilidade geral. O Azure Synapse Analytics fornece versões prévias para dar a você a oportunidade de avaliar e compartilhar comentários com o grupo de produtos nos recursos antes que eles se tornem GA (disponibilidade geral).
| Recurso | Saiba mais |
|---|---|
| Tabelas do Delta Lake do Apache Spark em pools de SQL sem servidor | A capacidade para que pools de SQL sem servidor acessem tabelas do Delta Lake criadas em bancos de dados do Spark está em versão prévia. Para saber mais, confira Tabelas de metadados compartilhadas do Azure Synapse Analytics. |
| Armazenamento de pool elástico do Apache Spark | Os pools do Spark do Azure Synapse Analytics agora dão suporte ao armazenamento de pool elástico na versão prévia. O armazenamento de pool elástico permite que o mecanismo do Spark monitore o armazenamento temporário do nó de trabalho e anexe mais discos, se necessário. Nenhuma ação é necessária e, como resultado, você deverá ver menos falhas de trabalho. Para saber mais, consulte Armazenamento de pool elástico do Azure Synapse Analytics. |
| Suporte à linguagem R do Apache Spark | O suporte interno de R do Apache Spark agora está em versão prévia. |
| Azure Synapse Data Explorer | O Azure Synapse Data Explorer proporciona uma experiência de consulta interativa para desbloquear insights de dados telemétricos e de log. Conectores para o Azure Data Explorer estão disponíveis para o Synapse Data Explorer. Para obter mais informações, consulte Azure Synapse Data Explorer (versão prévia). |
| Procurar pastas do ADLS Gen2 em um workspace do Azure Synapse Analytics | Agora você pode procurar um contêiner ou uma pasta do ADLS Gen2 (Azure Data Lake Storage Gen2) no espaço de trabalho do Azure Synapse Analytics no Synapse Studio. Para saber mais, confira Procurar uma pasta do ADLS Gen2 com ACLs no Azure Synapse Analytics. |
| Capturar dados alterados do armazenamento analítico do Cosmos DB | O armazenamento analítico do Azure Cosmos DB agora dá suporte à captura de dados de alterações (CDC) para a API do Azure Cosmos DB para NoSQL e a API do Azure Cosmos DB para MongoDB. Para obter mais informações, consulte Captura de Dados de Alterações do seu armazenamento analítico do Cosmos DB e DevBlog: Captura de Dados de Alterações (CDC) com o armazenamento analítico do Azure Cosmos DB . |
| Assistente de Distribuição | O Assistente de Distribuição é uma nova versão prévia do recurso em pools de SQL dedicados Gen2 do Azure Synapse que analisa consultas e recomenda as melhores estratégias de distribuição para tabelas a fim de aprimorar o desempenho de consultas. Para saber mais, confira Assistente de Distribuição no SQL do Azure Synapse. |
| Treinamento distribuído de rede neural profunda | Saiba mais sobre novas bibliotecas de treinamento distribuído, como Horovod, Petastorm, TensorFlow e PyTorch nos Tutoriais de aprendizado profundo. |
| Inserir painéis do ADX | Os painéis do Azure Data Explorer podem ser inseridos em um iFrame e hospedados em aplicativos de terceiros. |
| Rejeitar opções para arquivos de texto delimitados | As opções de rejeição para CREATE EXTERNAL TABLE em arquivos delimitados estão em versão prévia. |
| Spark Advisor para Notebook do Azure Synapse | O Assistente do Spark para Notebook do Azure Synapse analisa o código executado pelo Spark e exibe conselhos em tempo real para Notebooks. O assistente do Spark oferece recomendações para otimização de código com base em padrões comuns internos, executa a análise de erros e localiza a causa raiz das falhas. |
| Vida Útil na rede virtual (VNet) gerenciada | Reserve computação para a TTL (vida útil) no período de TTL da rede virtual gerenciada, economizando tempo e melhorando a eficiência. Para obter mais informações sobre essa versão prévia, consulte Anúncio da versão prévia pública da TTL (Vida Útil) na rede virtual gerenciada. |
| Identidades gerenciadas atribuídas pelo usuário | Agora é possível usar identidades gerenciadas atribuídas pelo usuário com serviços vinculados para autenticação em Pipelines e Fluxos de Dados do Synapse. Para saber mais, confira Credenciais no Azure Data Factory e no Azure Synapse. |
Recursos geralmente disponíveis
A tabela a seguir lista os recursos do Azure Synapse Analytics com transição da versão prévia para a GA (Disponibilidade Geral) nos últimos 12 meses.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Abril de 2022 | Gravação Otimizada do Apache Spark | Otimizar gravação é um recurso Delta Lake no Azure Synapse que reduz o número de arquivos gravados pelo Apache Spark 3 (3.1 e 3.2) e visa aumentar o tamanho do arquivo individual dos dados gravados. |
| Março de 2023 | Disponibilidade geral do Link do Synapse do Cosmos DB para Azure Data Explorer | O Azure Data Explorer dá suporte à ingestão de dados totalmente gerenciada do Azure Cosmos DB usando um feed de alterações. Agora oferecemos suporte a contas do Cosmos DB por trás de um Ponto de Extremidade Privado Gerenciado ou Ponto de Extremidade de Serviço. Para saber mais, confira Ingerir dados do Azure Cosmos DB no Azure Data Explorer. |
| Março de 2023 | Distribuição multicoluna em pools de SQL dedicados | Agora você pode distribuir tabelas por Hash em várias colunas para uma distribuição mais uniforme da tabela base, reduzindo a distorção de dados ao longo do tempo e melhorando o desempenho de consultas. Para obter mais informações sobre esse recurso em disponibilidade geral, confira as três opções: CREATE MATERIALIZED VIEW, opções de distribuição CREATE TABLE ou opções de distribuição CREATE TABLE AS SELECT. |
| Março de 2023 | Implantar o SQL do Synapse sem servidor com o SSDT | A tão esperada compatibilidade do SqlPackage com os pools de SQL do Azure Synapse Analytics sem servidor já estão disponíveis no SqlPackage 161.8089.0. Os pools de SQL sem servidor permitem as ações de extração e publicação. |
| Fevereiro de 2023 | Disponibilidade geral de Painéis do ADX | Agora em disponibilidade geral, os painéis do Azure Data Explorer usando a interface do usuário web do Azure Data Explorer permitem explorar seus dados de ponta a ponta, começando com a ingestão de dados, executando consultas e, por fim, criando painéis. |
| Fevereiro de 2023 | Compatibilidade com ordenações UTF-8 e japonesas para pools de SQL dedicados | A compatibilidade com UTF-8 e as ordenações japonesas agora estão em disponibilidade geral para pools de SQL dedicados. |
| Fevereiro de 2023 | Runtime do Azure Synapse para Apache Spark 3.3 | O Runtime do Azure Synapse para Apache Spark 3.3 agora está em disponibilidade geral. Com base em nossos testes do parâmetro de comparação do setor TPC-H de 1 TB, é provável que você observe um desempenho até 77% maior. |
| Dezembro de 2022 | Injeção da rede virtual expressa de IR do SSIS | Os métodos padrão e expresso para injetar o ISSIS IR (Integration Runtime) em uma VNet agora estão em disponibilidade geral. Para obter mais informações, confira Disponibilidade geral da injeção de Rede Virtual Expressa para SSIS no Azure Data Factory. |
| Novembro de 2022 | Ingerir dados do Azure Stream Analytics no Synapse Data Explorer | A capacidade de usar um trabalho do Streaming Analytics para coletar dados de um hub de eventos e enviá-los ao cluster do Azure Data Explorer agora está em disponibilidade geral. Para obter mais informações, confira Ingerir dados do Azure Stream Analytics no Azure Data Explorer e Saída do ADX do Azure Stream Analytics. |
| Novembro de 2022 | Link do Azure Synapse para SQL | O Link do Azure Synapse está disponível para o público geral para ambos o SQL Server 2022 e o Banco de Dados SQL do Azure. O recurso Link do Azure Synapse para SQL oferece replicação de dados quase em tempo real com pouco e sem código dos repositórios operacionais baseados em SQL no Azure Synapse Analytics. Fornece relatórios de BI sobre dados operacionais quase em tempo real, com impacto mínimo no repositório operacional. Para saber mais, acesse O que é o Link do Azure Synapse para SQL? |
| Outubro de 2022 | Disponibilidade geral do conector de CDA do SAP | O conector de dados para CDC (captura de dados de alterações) da SAP agora está disponível em disponibilidade geral. Para obter mais informações, consulte Anúncio da Visualização Pública da solução de CDA da SAP no Azure Data Factory e no Azure Synapse Analytics e solução de CDA da SAP no Azure Data Factory. |
| Setembro de 2022 | Sintaxe MERGE T-SQL | A sintaxe MERGE T-SQL tem sido uma adição altamente solicitada à biblioteca T-SQL do Azure Synapse. Como acontece no SQL Server, a sintaxe MERGE encapsula INSERTs/UPDATEs/DELETEs em uma só instrução de alto desempenho. Disponível em pools de SQL dedicados na versão 10.0.17829 e superior. Para obter mais informações, confira o blog do comunicado da sintaxe MERGE T-SQL. |
| Julho de 2022 | Apache Spark™ 3.2 para Synapse Analytics | O Apache Spark™ 3.2 para Synapse Analytics já está em disponibilidade geral. Examine as notas oficiais sobre a versão e as diretrizes de migração entre o Spark 3.1 e 3.2 para avaliar as possíveis alterações nos aplicativos. Para saber mais, veja o suporte à versão do Apache Spark e o Azure Synapse Runtime para Apache Spark 3.2. Destaques sobre o que melhorou no Spark 3.2 na Atualização de julho de 2022 do Azure Synapse Analytics. |
| Julho de 2022 | Apache Spark no Recurso de Cache Inteligente do Azure Synapse | O Cache Inteligente para Spark armazena automaticamente cada leitura dentro do espaço de armazenamento em cache alocado, detectando alterações de arquivos subjacentes e atualizando os arquivos para fornecer os dados mais recentes. Para saber mais, veja como Habilitar/desabilitar o cache do pool do Apache Spark. |
| Junho de 2022 | Ferramenta Map Data | A ferramenta Map Data é um processo guiado para ajudar você a criar mapeamentos de ETL e fluxos de dados de mapeamento dos dados de origem para o Synapse sem gravar código. Para saber mais sobre a ferramenta Map Data, leia Map Data no Azure Synapse Analytics. |
| Junho de 2022 | Funções definidas pelo usuário | As UDFs (funções definidas pelo usuário) agora estão em disponibilidade geral. Para saber mais, leia Funções definidas pelo usuário em fluxos de dados de mapeamento. |
Comunidade
Esta seção resume as novas oportunidades da comunidade do Azure Synapse Analytics e o programa de influenciadores do Azure Synapse da Microsoft.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Abril de 2022 | Espaço MVP do Azure Synapse | Destaques de março da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse. |
| Março de 2023 | Espaço MVP do Azure Synapse | Destaques de fevereiro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse. |
| Fevereiro de 2023 | Espaço MVP do Azure Synapse | Destaques de janeiro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse. |
| Janeiro de 2023 | Espaço MVP do Azure Synapse | Destaques de dezembro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse. |
| Dezembro de 2022 | Espaço MVP do Azure Synapse | Destaques de novembro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse deste mês. |
| Novembro de 2022 | Programa Influenciador do Azure Synapse | O programa Influenciador do Azure Synapse fornece eventos exclusivos e sessões de Q&A, como “Pergunte aos Especialistas” com a equipe de produto da Microsoft, onde os membros podem interagir diretamente com especialistas em produtos fazendo perguntas sobre vários tópicos rotativos. Obtenha comentários de membros da comunidade de influenciadores do Azure Synapse Analytics. |
| Outubro de 2022 | Espaço MVP do Azure Synapse | Destaques de outubro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP Azure Synapse deste mês. |
| Setembro de 2022 | Espaço MVP do Azure Synapse | Destaques de setembro da série de blogs MVP do Microsoft Azure Synapse no Espaço MVP do Azure Synapse deste mês. |
| Maio de 2022 | Programa Influenciador do Azure Synapse | Inscreva-se no programa gratuito Influenciadores do Azure Synapse e conecte-se com uma comunidade de usuários do Azure Synapse que se dedicam a ajudar outras pessoas a aproveitar mais a análise na nuvem. Registre-se agora na próxima sessão de Pergunte aos Especialistas do programa Influenciadores do Azure Synapse. A participação é gratuita e todos são bem-vindos para participar e ingressar na discussão sobre tópicos relacionados ao Synapse. Você pode assistir a eventos de Pergunte aos Especialistas gravados anteriormente no canal do Azure Synapse no YouTube. |
Apache Spark para Azure Synapse Analytics
Esta seção resume os novos recursos e funcionalidades recentes do Apache Spark para Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Abril de 2022 | Delta Lake - Mesclagem em Ordem Aleatória Baixa | A Otimização da Mesclagem em Ordem Aleatória Baixa para tabelas Delta agora está disponível nos pools do Apache Spark 3.2 e 3.3. Agora você pode atualizar uma tabela Delta com condições avançadas usando o comando de MESCLAGEM do Delta Lake. |
| Março de 2023 | Nova capacidade de gerenciamento de biblioteca: instalação em linha | %pip e %conda agora estão disponíveis no Apache Spark para Synapse! %pip e %conda são comandos que podem ser usados no Azure Notebooks para instalar pacotes Python. Para mais informações, confira como Gerenciar pacotes Python com escopo de sessão por meio de comandos %pip e %conda. |
| Março de 2023 | Aumenta o desempenho do Spark do Azure Synapse Analytics em até 77% | Mais regiões estão tendo aumento de desempenho das cargas de trabalho do Azure Synapse Spark, incluindo mais recentemente Coreia Central, Índia Central e Sudeste da Austrália. |
| Março de 2023 | Notebook Spark para Azure Synapse – Teste de unidade | Saiba como testar e criar casos de teste de unidade para trabalhos do Spark desenvolvidos com o Notebook do Synapse. |
| Março de 2023 | Ciclo de desativação do Apache Spark 2.4 e 3.1 | O runtime do Azure Synapse para Apache Spark 2.4 e 3.1 entrou no ciclo de desativação. O Apache Spark 2.4 será desativado em 29 de setembro de 2023 e o Apache Spark 3.1 será desativado a partir de 26 de janeiro de 2024. Nesse período, você deverá realocar suas cargas de trabalho para o runtime mais recente do Apache Spark. Leia mais em Runtimes do Apache Spark no Azure Synapse e veja o guia de migração do Spark. |
| Fevereiro de 2023 | Runtime do Azure Synapse para Apache Spark 3.3 | O Runtime do Azure Synapse para Apache Spark 3.3 agora está em disponibilidade geral. Com base em nossos testes do parâmetro de comparação do setor TPC-H de 1 TB, é provável que você observe um desempenho até 77% maior. |
| Janeiro de 2023 | Spark Advisor para Notebook do Azure Synapse | O Assistente do Spark para Notebook do Azure Synapse analisa o código executado pelo Spark e exibe conselhos em tempo real para Notebooks. O assistente do Spark oferece recomendações para otimização de código com base em padrões comuns internos, executa a análise de erros e localiza a causa raiz das falhas. |
| Janeiro de 2023 | Melhorar a utilização do pool do Spark com o Synapse Genie | O Synapse Genie Framework melhora a utilização do pool do Spark executando vários notebooks Synapse na mesma instância do pool do Spark. Leia mais sobre esse utilitário controlado por metadados escrito em Python. |
| Novembro de 2022 | Runtime do Azure Synapse para Apache Spark 3.3 | O Runtime do Azure Synapse para Apache Spark 3.3 está em versão prévia no momento. Para obter mais informações, consulte a postagem no blog da versão prévia do Apache Spark 3.3. Com base em nossos testes do parâmetro de comparação do setor TPC-H de 1 TB, é provável que você observe um desempenho até 77% maior. |
| Setembro de 2022 | Novos códigos de erro informativos do Livy | Os códigos de erro mais precisos descrevem a causa da falha e substituem os códigos de erro genéricos anteriores. Anteriormente, todos os erros de trabalhos com falha do Spark eram mostrados com um código de erro genérico que exibia LIVY_JOB_STATE_DEAD. |
| Setembro de 2022 | Novas técnicas de otimização de consulta no Apache Spark para o Azure Synapse Analytics | Leia as conclusões do trabalho da Microsoft para obter benefícios consideráveis de desempenho em todo o painel sobre a carga de trabalho TPC-DS de referência, bem como uma redução significativa no tempo de geração do plano de consulta. |
| Agosto de 2022 | Armazenamento de pool elástico do Apache Spark | Os pools do Spark do Azure Synapse Analytics agora dão suporte ao armazenamento de pool elástico na versão prévia. O armazenamento de pool elástico permite que o mecanismo do Spark monitore o armazenamento temporário de cluster do nós de trabalho e anexe discos adicionais, caso necessário. Nenhuma ação é necessária e, como resultado, você deverá ver menos falhas de trabalho. Para saber mais, confira Blog: armazenamento de pool elástico do Spark do Azure Synapse Analytics está disponível para versão preliminar pública. |
| Agosto de 2022 | Gravação Otimizada do Apache Spark | Gravação Otimizada é uma versão prévia do recurso do Delta Lake no Synapse que reduz o número de arquivos gravados pelo Apache Spark 3 (3.1 e 3.2) e visa aumentar o tamanho do arquivo individual dos dados gravados. Para saber mais, confira A necessidade de otimizar a gravação no Apache Spark. |
Integração de dados
Esta seção resume os novos recursos e funcionalidades recentes da integração de dados do Azure Synapse Analytics. Saiba como Carregar dados no Azure Synapse Analytics usando um pipeline do Synapse ou ADF (Azure Data Factory).
| Mês | Recurso | Saiba mais |
|---|---|---|
| Abril de 2022 | Capturar os dados alterados do armazenamento analítico do Cosmos DB (visualização pública) | O armazenamento analítico do Azure Cosmos DB agora dá suporte à captura de dados de alterações (CDC) para a API do Azure Cosmos DB para NoSQL e a API do Azure Cosmos DB para MongoDB. Para obter mais informações, consulte Captura de Dados de Alterações do seu armazenamento analítico do Cosmos DB e DevBlog: Captura de Dados de Alterações (CDC) com o armazenamento analítico do Azure Cosmos DB . |
| Março de 2023 | Aprofundamento: segurança do gatilho de eventos de armazenamento de pipelines do Synapse | Esta postagem no blog da equipe de Engenharia de Sucesso do Cliente é um aprofundamento no segurança do gatilho de eventos de armazenamento de pipelines do Azure Synapse. O ADF e o Synapse Pipelines oferecem um recurso que permite que a execução do pipeline seja disparada com base em vários eventos, como criação ou exclusão de blobs de armazenamento. Isso pode ser usado pelos clientes para implementar a orquestração de pipeline controlada por eventos. |
| Janeiro de 2023 | A extração incremental de CDA do SQL agora dá suporte a colunas numéricas | Habilitar a extração incremental de CDA do SQL Server em fluxos de dados permite que você processe apenas linhas que foram alteradas desde a última vez em que o pipeline foi executado. Os tipos de coluna incremental com suporte agora incluem colunas de data/hora e numéricas. |
| Dezembro de 2022 | Injeção da rede virtual expressa | Os métodos padrão e expresso para injetar o ISSIS IR (Integration Runtime) em uma VNet agora estão em disponibilidade geral. Para obter mais informações, confira Disponibilidade geral da injeção de Rede Virtual Expressa para SSIS no Azure Data Factory. |
| Outubro de 2022 | Disponibilidade geral do conector de CDA do SAP | O conector de dados para CDC (captura de dados de alterações) da SAP agora está disponível em disponibilidade geral. Para obter mais informações, consulte Anúncio da Visualização Pública da solução de CDA da SAP no Azure Data Factory e no Azure Synapse Analytics e solução de CDA da SAP no Azure Data Factory. |
| Setembro de 2022 | Exibição de gráfico de Gantt | Você já pode ver suas execuções de atividades com um gráfico de Gantt no monitoramento do Integration Runtime no Azure Data Factory. |
| Setembro de 2022 | Aprimoramentos de monitoramento | Lançamos um novo pacote de aprimoramentos na experiência de monitoramento de acordo com os comentários da comunidade. |
| Setembro de 2022 | Otimização de número máximo de colunas no fluxo de dados de mapeamento | Para fontes de dados de texto delimitado, como CSVs, uma nova configuração de número máximo de colunas permite definir o número máximo de colunas. |
| Setembro de 2022 | Conversão de NUMBER em inteiro no conector de fonte de dados Oracle | Nova propriedade para converter o tipo NUMBER do Oracle em um tipo inteiro correspondente na origem por meio da nova propriedade convertDecimalToInteger. Para obter mais informações, confira o conector de fonte Oracle. |
| Setembro de 2022 | Suporte para envio de um corpo com o método DELETE da solicitação HTTP na atividade da Web | Novo suporte para o envio de um corpo (opcional) quando o método DELETE é usado na atividade da Web. Para obter mais informações, confira as Propriedades de tipo disponíveis para a atividade da Web. |
| Agosto de 2022 | Os fluxos de dados de mapeamento agora dão suporte à transformação de Conversão visual | É possível usar a transformação de conversão para modificar facilmente os tipos de dados de colunas individuais em um fluxo de dados. |
| Agosto de 2022 | Tempo limite de atividade padrão alterado para 12 horas | O tempo limite de atividade padrão agora é de 12 horas. |
| Agosto de 2022 | Aprimoramentos de facilidade de uso do construtor de expressões de pipeline | Atualizamos nossa interface do usuário do construtor de expressões para facilitar a criação de pipelines. |
| Agosto de 2022 | Nova interface do usuário para mapeamento de tipos de conjuntos dados embutidos no fluxo de dados | Atualizamos nossa interface do usuário da fonte de fluxo de dados para facilitar a localização do tipo de conjunto de dados embutido. |
| Julho de 2022 | Vida Útil na rede virtual (VNet) gerenciada | Reserve computação para a TTL (vida útil) no período de TTL da rede virtual gerenciada, economizando tempo e melhorando a eficiência. Para obter mais informações sobre essa versão prévia, consulte Anúncio da versão prévia pública da TTL (Vida Útil) na rede virtual gerenciada. |
| Junho de 2022 | Versão prévia do conector de CDA da SAP | Um novo conector de dados para CDC (captura de dados de alterações) da SAP agora está disponível em versão prévia. Para obter mais informações, consulte Anúncio da Visualização Pública da solução de CDA da SAP no Azure Data Factory e no Azure Synapse Analytics e solução de CDA da SAP no Azure Data Factory. |
| Junho de 2022 | Opção de junção difusa na Transformação de Junção | O uso de correspondência difusa com um controle deslizante de pontuação limite de similaridade foi adicionado à Transformação de Junção nos Fluxos de Dados de Mapeamento. |
| Junho de 2022 | GA da ferramenta Map Data | Temos o prazer de anunciar que a ferramenta Map Data agora estão Geralmente Disponíveis. A ferramenta Map Data é um processo guiado para ajudar você a criar mapeamentos de ETL e fluxos de dados de mapeamento dos dados de origem para o Synapse sem gravar código. |
| Junho de 2022 | Executar novamente um pipeline com novos parâmetros | Agora é possível alterar os parâmetros de pipelines ao executar novamente um pipeline na página de Monitoramento, sem precisar retornar ao editor de pipeline. Para saber mais, leia Executar novamente pipelines e atividades. |
| Junho de 2022 | GA de Funções definidas pelo usuário | As UDFs (funções definidas pelo usuário) nos fluxos de dados de mapeamento agora estão em GA (disponibilidade geral). |
Modelos de base de dados e Designer de Banco de Dados
Esta seção resume os novos recursos e funcionalidades recentes dos modelos de base de dados e do designer de banco de dados.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Julho de 2022 | Procurar modelos do setor | Procure modelos do setor e adicione tabelas para criar seu próprio banco de dados do lake. Saiba mais sobre maneiras de procurar modelos do setor e introdução ao Início Rápido: criar um novo banco de dados do lake aproveitando modelos de base de dados. |
Experiência do desenvolvedor
Esta seção resume as novas melhorias de qualidade de vida e recursos recentes para desenvolvedores no Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Maio de 2023 | Como usar o Azure DevOps com workspaces do Synapse para criar correções frequentes em ambientes de produção | Postagem no blog sobre como implantar uma correção do workspace do Synapse de desenvolvimento em um workspace do Synapse de produção sem afetar negativamente projetos de desenvolvimento em andamento. |
| Dezembro de 2022 | MSSparkUtils é um conjunto de ferramentas no Synapse Spark | O MSSparkUtils é um pacote interno para ajudá-lo a executar facilmente tarefas comuns chamadas utilitários do Microsoft Spark, incluindo a capacidade de compartilhar resultados entre notebooks. |
| Setembro de 2022 | CICD do Synapse para publicar artefatos de workspace | A integração do Synapse Studio com um sistema de controle do código-fonte, como o Git do Azure DevOps ou o GitHub, foi mostrada como um dos recursos preferenciais do Synapse Studio para colaborar e fornecer controle do código-fonte para o Azure Synapse. O marketplace do Visual Studio tem uma tarefa de implantação de workspace do Synapse para automatizar a publicação. |
| Julho de 2022 | Compatibilidade de Synapse Notebooks com IPython | O kernel oficial para notebooks Jupyter é o IPython que já tem suporte nos notebooks do Azure Synapse. Para obter mais informações, consulte se o Synapse Notebooks agora é totalmente compatível com IPython. |
| Julho de 2022 | Mssparkutils agora tem o método spark.stop() | Uma nova API mssparkutils.session.stop() foi adicionada ao pacote mssparkutils. Esse recurso se torna útil quando há várias sessões em execução no mesmo pool do Spark. A nova API está disponível para Scala e Python. Para saber mais, confira Parar uma sessão interativa. |
Machine Learning
Esta seção resume os novos recursos e aprimoramentos recentes para modelos de machine learning no Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Março de 2023 | Usar o OpenAI GPT no Synapse Analytics | A Microsoft oferece o Azure OpenAI como um Serviço Cognitivo do Azure, e você pode acessar os modelos de GPT do Azure OpenAI de dentro do Spark do Synapse. |
| Novembro de 2022 | Suporte ao R (versão prévia) | O Azure Synapse Analytics agora fornece suporte interno ao R para Apache Spark, em versão prévia no momento. Para obter um exemplo, instale uma biblioteca R de CRAN e instantâneos CRAN. |
| Agosto de 2022 | SynapseML v.0.10.0 | Nova versão do SynapseML v0.10.0 (anteriormente MMLSpark), uma biblioteca de código aberto que visa simplificar a criação de pipelines de aprendizado de máquina massivamente escalonáveis. Saiba mais sobre as adições mais recentes ao SynapseML e introdução ao SynapseML. |
| Agosto de 2022 | Suporte ao .NET | O SynapseML v0.10 adiciona suporte completo para linguagens .NET como C# e F#. Para ver um exemplo do SynapseML .NET, confira Exemplo do .NET com LightGBMClassifier. |
| Agosto de 2022 | Suporte do Serviço OpenAI do Azure | O SynapseML agora permite que os usuários toquem em modelos de linguagem de 175 bilhões de parâmetros (GPT-3) do OpenAI que podem gerar e concluir textos e códigos com paridade quase humana. Para saber mais, confira Azure OpenAI para Big Data. |
| Agosto de 2022 | Suporte à plataforma MLflow | Os modelos SynapseML agora se integram ao MLflow com suporte completo para salvamento, carregamento, implantação e autologging. |
| Agosto de 2022 | SynapseML no Binder | Sabemos que o Spark pode ser intimidador para os usuários de primeira viagem, mas não tenhamos receios porque, com o Associador de tecnologia, é possível explorar e experimentar o SynapseML no Binder sem necessidade de qualquer configuração, instalação, infraestrutura ou conta do Azure. |
| Junho de 2022 | Treinamento distribuído de rede neural profunda (versão prévia) | O runtime do Azure Synapse também inclui bibliotecas de suporte, como Petastorm e Horovod, que são comumente usadas para treinamento distribuído. Este recurso está disponível atualmente em versão prévia. Os runtimes do Azure Synapse Analytics para o Apache Spark 3.1 e 3.2 agora também incluem suporte para as bibliotecas de aprendizado profundo mais comuns, como TensorFlow e PyTorch. Para saber mais sobre como aproveitar essas bibliotecas nos pools acelerados por GPU do Azure Synapse Analytics, leia os Tutoriais sobre aprendizado profundo. |
Exemplos e diretrizes
Esta seção resume as novas diretrizes e recursos de projeto de exemplo para o Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Maio de 2023 | Como implementando a Dimensão de Alteração Lenta com o Synapse | Demonstra como usar um Pool de SQL sem servidor para implementar a Dimensão de Alteração Lenta tipo 2 além de um data lake. |
| Maio de 2023 | CI e CD com o pool de SQL dedicado do Azure Synapse | Use controle de versão, Implantação e Integração Contínua e melhores práticas para gerenciar o ciclo de vida ALM de um Data Warehouse do Azure Synapse com este artigo do blog. |
| Março de 2023 | Criar uma solução de dados no Azure Synapse Analytics com o Snapshot Serengeti | Esta é uma série de quatro partes sobre como criar uma solução de análise de dados de ponta a ponta e machine learning no Azure Synapse Analytics. O conjunto de dados usado nesta solução é o conjunto de dados do Snapshot Serengeti, que consiste em uma coleção em grande escala de imagens capturadas com armadilhas fotográficas. |
| Março de 2023 | Introdução à Linguagem de Consulta Kusto (KQL) | Esta postagem no blog da equipe de engenharia de sucesso do cliente fornece uma introdução à Linguagem de Consulta Kusto (KQL), uma linguagem de consulta poderosa para analisar grandes volumes de dados estruturados, semi-estruturados e não estruturados (Texto Livre). |
| Março de 2023 | Criar um plano de recuperação de desastre personalizado para o espaço de trabalho do Synapse | Uma série em várias partes no blog sobre como criar um plano de recuperação de desastre para o espaço de trabalho do Synapse. |
| Março de 2023 | Conectividade do Azure Synapse: pontos de extremidade públicos, pontos de extremidade privados, VNet gerenciada e pontos de extremidade privados gerenciados | Uma série em três partes escrita por especialistas no blog sobre a conectividade do Azure Synapse para as várias opções de rede, incluindo conectividade de ponto de extremidade público do pool dedicado de entrada, pontos de extremidade privados do Azure Synapse e VNet gerenciada e pontos de extremidade privados gerenciados. |
| Fevereiro de 2023 | Painéis de monitoramento histórico para pools de SQL dedicados do Azure Synapse | Um passo a passo das etapas para habilitar o monitoramento histórico usando modelos de Pasta de Trabalho do Azure Monitor sobre as Métricas do Azure e o Azure Log Analytics. |
| Janeiro de 2023 | Leia "Data Lake com pools sem servidor do Synapse" | Um guia de duas partes sobre como usar OPENROWSET para consultar um caminho no lake ou usar uma tabela externa para consultar um caminho no lake. |
| Janeiro de 2023 | Fluxo estruturado no Synapse Spark | Um exemplo detalhado de transmissão de dados de temperatura de IoT de dispositivos IoT para o Synapse Spark. |
| Janeiro de 2023 | Criar alias de DNS para pool de SQL dedicado no workspace do Synapse para recuperação de desastre | Um DNS personalizado para pools de SQL dedicados (antigo SQL DW) pode fornecer redirecionamento para programas cliente durante um desastre. |
| Dezembro de 2022 | Azure Synapse - Data Lake versus Delta Lake versus Data Lakehouse | Leia uma nova postagem no blog da Engenharia de Sucesso desmistificando os termos Data Lake, Delta Lake e Data Lakehouse. |
| Novembro de 2022 | Como a DEP (Proteção contra Exfiltração dos Dados) afeta os pipelines do Azure Synapse Analytics | A DEP (Proteção contra Exfiltração dos Dados) é um recurso que permite restrições adicionais sobre a capacidade do Azure Synapse Analytics de se conectar a outros serviços. |
| Novembro de 2022 | Introdução às APIs REST do Azure Synapse Analytics – Pool do Apache Spark | Fornecemos instruções de como configurar e usar pontos de extremidade REST do Azure Synapse e descrever as operações do Pool do Apache Spark compatíveis com as APIs REST. |
| Novembro de 2022 | Desmistificação do Data Explorer no Azure Synapse | Uma explicação de duas partes desmistifica o Data Explorer no Azure Synapse e a ingestão de dados com o Data Explorer no Azure Synapse. |
| Novembro de 2022 | Viagem no tempo do Delta do Spark do Synapse | A viagem no tempo do Delta Lake permite instantâneos de consulta pontual ou, até mesmo, reverte atualizações errôneas. |
| Setembro de 2022 | Qual é a diferença entre o pool de SQL dedicado do Azure Synapse (antigo SQL DW) e o pool de SQL sem servidor? | Entenda as diferenças entre os pools dedicados e sem servidor e a respectiva simultaneidade. Leia mais em Conceitos básicos dos pools de SQL dedicados e dos pools de SQL sem servidor. |
| Setembro de 2022 | Como ler o Delta Lake no pool de SQL dedicado | Exemplo de script para importar arquivos do Delta Lake diretamente para o pool de SQL dedicado e dar suporte a recursos como viagem no tempo. Para obter uma explicação, confira Como ler o Delta Lake no pool de SQL dedicado. |
| Setembro de 2022 | Série de blogs Azure Synapse Customer Success Engineering | A nova série de blogs Azure Synapse Customer Success Engineering é lançada com uma introdução detalhada para Compilar o Lakehouse − Implementar uma Estratégia do Data Lake com o Azure Synapse. |
| Junho de 2022 | Análise do Azure Orbital com o Synapse Analytics | Agora oferecemos uma solução de exemplo de análise do Azure Orbital que mostra uma implementação de ponta a ponta de extração, carregamento, transformação e análise de dados espaciais usando bibliotecas geoespaciais e modelos de IA com o Azure Synapse Analytics. A solução de amostra também demonstra como integrar modelos dos serviços de IA do Azure específicos geoespaciais, modelos de IA de parceiros e modelos do tipo "traga seus próprios dados". |
| Junho de 2022 | Guias de migração para Oracle | Um novo guia de migração criado pela Microsoft para Oracle para o Azure Synapse Analytics agora está disponível. Design e desempenho para migrações do Oracle. |
| Junho de 2022 | Success by design do Azure Synapse | O guia estratégico de prova de conceito do Azure Synapse fornece um guia para definição de escopo, design, execução e avaliação de uma prova de conceito para cargas de trabalho SQL ou Spark. |
| Junho de 2022 | Guias de migração para Teradata | Um novo guia de migração criado pela Microsoft para Teradata para o Azure Synapse Analytics agora está disponível. Design e desempenho para migrações do Teradata. |
| Junho de 2022 | Guias de migração para o IBM Netezza | Um novo guia de migração criado pela Microsoft para IBM Netezza para o Azure Synapse Analytics agora está disponível. Design e desempenho para migrações do IBM Netezza. |
Segurança
Esta seção resume os novos recursos e configurações de segurança recentes no Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Dezembro de 2022 | Como a DEP (Proteção contra Exfiltração dos Dados) afeta os pipelines do Azure Synapse Analytics | A DEP (Proteção contra Exfiltração dos Dados) é um recurso que permite restrições adicionais sobre a capacidade do Azure Synapse Analytics de se conectar a outros serviços. |
| Agosto de 2022 | Executar Notebooks Spark do Azure Synapse com identidade gerenciada atribuída pelo sistema | Agora é possível executar os Notebooks Spark do Synapse com a identidade gerenciada atribuída pelo sistema (ou identidade gerenciada do workspace) habilitando Executar como identidade gerenciada no menu Configurar sessão. Com esse recurso, você poderá validar se o notebook funciona conforme esperado ao usar a identidade gerenciada atribuída pelo sistema antes de usar o notebook em um pipeline. Para saber mais, confira Identidade gerenciada para Azure Synapse. |
| Julho de 2022 | Alterações nas permissões necessárias para publicação no Git | Agora, somente as permissões do Git e da função de Editor de Artefatos do Synapse (RBAC do Synapse) são necessárias para confirmar alterações no modo Git. Para saber mais, confira Imposição de controle de acesso no Synapse Studio. |
Azure Synapse Data Explorer (versão prévia)
O Azure Data Explorer (ADX) é um serviço de exploração de dados rápido e altamente escalonável para dados de log e telemetria. Ele oferece ingestão de Hubs de Eventos, Hubs IoT, blobs gravados em contêineres de blob e trabalhos do Azure Stream Analytics. Esta seção resume os novos recursos e funcionalidades recentes do Azure Synapse Data Explorer e da KQL (Linguagem de Consulta Kusto). Leia mais sobre Qual é a diferença entre o Azure Synapse Data Explorer e o Azure Data Explorer?
| Mês | Recurso | Saiba mais |
|---|---|---|
| Abril de 2022 | O modelo do ARM para implantar o Azure Data Explorer DB com a conexão do Cosmos DB | Um modelo do ARM agora está disponível para implantar rapidamente um cluster do Azure Data Explorer com Identidade Atribuída pelo Sistema, um banco de dados, uma conta do Azure Cosmos DB (NoSql), um banco de dados do Azure Cosmos DB, um contêiner do Azure Cosmos DB e uma conexão de dados entre o contêiner do Cosmos DB e o banco de dados Kusto (usando a identidade atribuída pelo sistema). |
| Abril de 2022 | Ingerir dados do Hub de Eventos do Azure para a modalidade gratuita do ADX | O Azure Data Explorer agora dá suporte à integração com o Hub de Eventos na camada gratuita do ADX. Para obter mais informações, confira Análise Gratuita de dados do Hub de Eventos com o Azure Data Explorer. |
| Março de 2023 | Exibir o histórico do cluster no Kusto Data Explorer | Agora é mais fácil acompanhar o histórico de consultas e comandos executados em um cluster Kusto usando .show queries e .show commands-and-queries. |
| Março de 2023 | Suporte do Amazon S3 no Kusto Web Explorer | Agora você pode ingerir dados do Amazon S3 diretamente do Hub de Ingestão no Kusto Web Explorer (KWE). |
| Março de 2023 | Suporte a gráficos do Plotly | Use a biblioteca de gráficos do Plotly e crie visualizações para uma consulta KQL usando o operador "render" ou interativamente ao criar painéis do ADX. |
| Fevereiro de 2023 | Disponibilidade geral de Painéis do ADX | Agora em disponibilidade geral, os painéis do Azure Data Explorer usando a interface do usuário web do Azure Data Explorer permitem explorar seus dados de ponta a ponta, começando com a ingestão de dados, executando consultas e, por fim, criando painéis. |
| Fevereiro de 2023 | A ingestão de arquivos ADX dá suporte a até 1000 arquivos | O assistente de ingestão do ADX agora dá suporte a até 1000 arquivos (anteriormente eram 10) ao mesmo tempo. |
| Janeiro de 2023 | Conector do Apache Log4j 2 para o Azure Data Explorer | O coletor do Apache Log4J 2 para o Azure Data Explorer foi desenvolvido para transmitir facilmente seus dados de log do Log4j 2 para o Azure Data Explorer, onde você pode analisar, visualizar e alertar sobre seus logs em tempo real. Para obter mais informações, consulte Introdução ao Apache Log4j e ao Azure Data Explorer. |
| Janeiro de 2023 | Ingerir eventos preexistentes do Hub de Eventos no ADX | Agora o ADX pode ingerir dados dos Hubs de Eventos que existiam antes da criação de uma conexão de dados dos Hubs de Eventos no cluster do ADX por meio da Data de início da recuperação de eventos. |
| Janeiro de 2023 | Detecção de Anomalias Multivariadas | O ADX contém suporte nativo para detectar anomalias em várias séries temporais usando a função series_decompose_anomalies(). Para obter mais informações, confira Detecção de anomalias multivariadas. |
| Janeiro de 2023 | Formatação condicional aprimorada no painel | A formatação condicional ajuda a exibir anomalias ou pontos de dados de exceção visualmente. Agora você pode formatar um visual usando condições ou aplicando temas a colunas numéricas ou valores discretos a valores não numéricos. |
| Janeiro de 2023 | Novas opções de exibição para exibições de gráfico de pizza | Concentre-se nos dados que você se importa com as novas opções de exibição de visualizações de gráfico de pizza em Painéis. |
| Dezembro de 2022 | Visualizador de JPath do Kusto Web Explorer (KWE) do ADX | A notação JPath descreve o caminho para um ou mais elementos em um documento JSON. Use a nova exibição expandida para obter rapidamente um elemento específico de um texto JSON e copiar facilmente sua expressão de caminho. Para obter um exemplo, confira Visualizador de JPath. |
| Dezembro de 2022 | Desmistificação do consumo de dados usando o Azure Synapse Data Explorer | Um guia com as diversas maneiras de recuperar, consumir e visualizar dados do Azure Synapse Data Explorer. |
| Novembro de 2022 | Suporte ao compartilhamento no nível da tabela por meio do Azure Data Share | Agora adicionamos suporte ao compartilhamento no nível da tabela por meio da interface do Azure Data Share, na qual você pode compartilhar tabelas específicas no banco de dados. Isso permite compartilhar dados de maneira fácil e segura com pessoas da empresa ou parceiros externos. |
| Novembro de 2022 | Ingerir dados do Azure Stream Analytics no Synapse Data Explorer | A capacidade de usar um trabalho do Streaming Analytics para coletar dados de um hub de eventos e enviá-los ao cluster do Azure Data Explorer agora está em disponibilidade geral. Para obter mais informações, confira Ingerir dados do Azure Stream Analytics no Azure Data Explorer e Saída do ADX do Azure Stream Analytics. |
| Novembro de 2022 | Operador parse-kv | O novo operador parse-kv extrai informações estruturadas de uma expressão de cadeia de caracteres e representa as informações em um formulário chave/valor. Você pode usar um delimitador especificado, um delimitador não especificado ou um regex por meio de uma expressão regular RE2. |
| Outubro de 2022 | Líderes e seguidores em clusters do ADX | Use a página de banco de dados no portal do Azure para identificar facilmente todos os bancos de dados seguidores que seguem um líder e o líder de um determinado seguidor. |
| Outubro de 2022 | Como criar aliases de bancos de dados seguidores | O recurso de banco de dados seguidor permite anexar um banco de dados localizado em outro cluster ao cluster do Azure Data Explorer. Agora você pode substituir o nome do banco de dados ao estabelecer uma relação de seguidor. |
| Outubro de 2022 | Ingerir dados do OpenTelemetry | O OTel (OpenTelemetry) é uma estrutura de observabilidade de aplicativo de software livre independente de fornecedores. O exportador do OpenTelemetry dá suporte à ingestão de dados de vários destinatários no Azure Data Explorer. |
| Outubro de 2022 | Ingerir dados do Telegraf | O Telegraf é um agente leve, de software livre, com volume de memória mínimo, para coletar, processar e gravar dados telemétricos, incluindo logs, métricas e dados de IoT. O plug-in de saída do Azure Data Explorer funciona como o conector do Telegraf e dá suporte à ingestão de dados de vários tipos de plug-ins de entrada no Azure Data Explorer. |
| Setembro de 2022 | Emulador do Kusto do Azure Data Explorer | O Emulador do ADX é uma imagem do Docker que expões um ponto de extremidade do ADX Query Engine. Você pode usá-lo para criar bancos de dados e ingerir e consultar dados. O emulador entende a KQL (Linguagem de Consulta Kusto) da mesma maneira que o Serviço do Azure. |
| Setembro de 2022 | Configuração do proxy do conector do Logstash | O plug-in do Logstash do ADX (Azure Data Explorer) permite processar eventos do Logstash em um banco de dados do ADX para análise. A versão 1.0.5 já dá suporte a proxies HTTP/HTTPS. |
| Setembro de 2022 | Suporte do Kafka para o formato Protobuf | O conector do coletor Kafka do ADX aproveita a estrutura do Kafka Connect e fornece um adaptador para ingerir dados do Kafka em JSON, Avro, cadeia de caracteres e, agora, no formato Protobuf na atualização mais recente. Leia mais sobre como ingerir dados do Protobuf do Kafka no Azure Data Explorer. |
| Setembro de 2022 | Visuais de funil | O funil é o visual mais recente que adicionamos aos painéis do Azure Data Explorer após os comentários que recebemos dos clientes. |
| Setembro de 2022 | Suporte ao .NET e ao Node.js no Gerador de Aplicativo de Exemplo | O assistente de gerador de aplicativo de exemplo do ADX (Azure Data Explorer) é uma ferramenta que permite criar um aplicativo funcional para ingerir e consultar seus dados na linguagem de programação de sua preferência. Agora, há suporte para a geração de aplicativos de exemplo no .NET e no Node.js com as opções disponíveis anteriormente, Java e Python. |
| Agosto de 2022 | Suporte ao Protobuf no coletor do Kafka | O Coletor do Kafka do Azure Data Explorer, um conector do Confluent com certificação Gold, ajuda a enviar dados do Kafka para o Azure Data Explorer. Adicionamos suporte ao Protobuf no conector para ajudar os clientes a enviar dados do Protobuf ao ADX. |
| Agosto de 2022 | Suporte nativo ao Amazon S3 | O comando .ingest into do ADX ingere dados em uma tabela "efetuando pull" de dados de um ou mais arquivos de armazenamento em nuvem. Agora, o comando dá suporte a URLs do Amazon S3. Por exemplo, leia a postagem no blog que anuncia a Ingestão contínua de dados do S3. |
| Agosto de 2022 | Inserir painéis do ADX | A interface do usuário da Web e os painéis do ADX são inseridos em um IFrame e hospedados em aplicativos de terceiros. |
| Agosto de 2022 | Opção de atualização gratuita de cluster | Agora é possível atualizar o cluster gratuito para um cluster completo do Azure Data Explorer que remove a limitação de armazenamento, permitindo que você tenha mais capacidade de aumentar seus dados. |
| Agosto de 2022 | Analisar novos dados do ADX pela tabela dinâmica do Excel | Agora é possível usar um volume novo e ilimitado de dados do ADX (Kusto) em sua ferramenta analítica favorita: as tabelas dinâmicas do Excel. As consultas MDX geradas pelo código dinâmico encontrarão seu caminho para o back-end do Kusto como instruções KQL que agregam os dados necessários pela dinamização. Depois, vão de volta ao Excel. |
| Agosto de 2022 | Resultados da consulta – cor por valor | Realce dados exclusivos rapidamente nos resultados da consulta para agrupar visualmente linhas que compartilham valores idênticos para uma coluna específica. Use Explorar resultados e Cor por valor para aplicar cor a linhas com base na coluna selecionada. |
| Agosto de 2022 | Web Explorer – suporte de cruz para gráficos | A propriedade ysplit agora dá suporte ao visual de cruz (linhas verticais que se movem ao longo do ponteiro do mouse) para muitos gráficos. |
| Julho de 2022 | Operador scan | O poderoso operador scan permite a mineração de processos e a análise de sequência eficientes e escalonáveis, bem como a análise de usuário no ADX. Cenários comuns para usar o scan incluem manutenção preventiva de dispositivos IoT, análise de funil, cálculo recursivo, cenários de segurança em busca de etapas de ataque conhecidas e muito mais. |
| Julho de 2022 | Ingerir dados do Azure Stream Analytics no Synapse Data Explorer (versão prévia) | Agora é possível usar um trabalho do Stream Analytics para coletar dados de um hub de eventos e enviá-los para o cluster do Azure Data Explorer usando o portal do Azure ou um modelo do ARM. Para saber mais, confira Ingerir dados do Azure Stream Analytics no Azure Data Explorer. |
| Julho de 2022 | Renderizar gráficos para cada coluna y | O Synapse Web Data Explorer agora dá suporte a renderização de gráficos para cada coluna y. Para ver um exemplo, confira a Atualização de julho de 2022 do Azure Synapse Analytics. |
| Junho de 2022 | Nova home page do Web Explorer | A nova home page do Web Explorer facilitar ainda mais começar a usar o Synapse Web Explorer. |
| Junho de 2022 | Galeria de amostras do Web Explorer | A galeria de amostras do Web Explorer fornece exemplos completos de como os clientes aproveitam o Synapse Data Explorer em casos de uso populares, como Dados de Logs, Dados de Métricas, Dados de IoT e exemplos básicos de Big Data. |
| Junho de 2022 | Funcionalidades de detalhamento de painéis do Web Explorer | Agora é possível usar detalhamentos como parâmetros nos painéis do Synapse Web Explorer. |
| Junho de 2022 | Configurações de fuso horário para o Web Explorer | As Configurações de fuso horário do Web Explorer agora se aplicam aos resultados da Consulta e ao Painel. Ao alterar o fuso horário, os painéis serão atualizados automaticamente para apresentar os dados com o fuso horário selecionado. |
Link do Azure Synapse
O Link do Azure Synapse é um sistema automatizado para replicar dados do SQL Server ou do Banco de Dados SQL do Azure, do Azure Cosmos DB ou do Dataverse no Azure Synapse Analytics. Esta seção resume as notícias recentes sobre o recurso Link do Azure Synapse.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Março de 2023 | Disponibilidade geral do Link do Synapse do Cosmos DB para Azure Data Explorer | O Azure Data Explorer dá suporte à ingestão de dados totalmente gerenciada do Azure Cosmos DB usando um feed de alterações. Agora oferecemos suporte a contas do Cosmos DB por trás de um Ponto de Extremidade Privado Gerenciado ou Ponto de Extremidade de Serviço. Para saber mais, confira Ingerir dados do Azure Cosmos DB no Azure Data Explorer. |
| Janeiro de 2023 | Versão prévia do Link do Synapse do Cosmos DB para Azure Data Explorer | O Azure Data Explorer dá suporte à ingestão de dados totalmente gerenciada do Azure Cosmos DB usando um feed de alterações. Para saber mais, confira Ingerir dados do Azure Cosmos DB no Azure Data Explorer (versão prévia). |
| Novembro de 2022 | Link do Azure Synapse para SQL | O Link do Azure Synapse está disponível para o público geral para ambos o SQL Server 2022 e o Banco de Dados SQL do Azure. O recurso Link do Azure Synapse para SQL oferece replicação de dados quase em tempo real com pouco e sem código dos repositórios operacionais baseados em SQL no Azure Synapse Analytics. Fornece relatórios de BI sobre dados operacionais quase em tempo real, com impacto mínimo no repositório operacional. Para saber mais, confira O que é o Link do Azure Synapse para SQL? |
| Julho de 2022 | Modo de lote | Decida entre custo e latência no Link do Azure Synapse para SQL selecionando o modo contínuo ou lote para replicar os dados. O modo de lote permite que você economize ainda mais em custos pagando apenas pelo serviço de ingestão durante as cargas de lotes, em vez de permanecer continuamente ativado. Você pode selecionar entre 20 e 60 minutos para processamento em lotes. |
SQL do Synapse
Esta seção resume os aprimoramentos e recursos recentes em pools de SQL no Azure Synapse Analytics.
| Mês | Recurso | Saiba mais |
|---|---|---|
| Junho de 2023 | Campos de configurações de diagnóstico atualizados | Nove campos foram adicionados aos registros de configurações de diagnóstico do pool de SQL dedicado. |
| Março de 2023 | Criar alertas para o pool de SQL dedicado do Azure Synapse | Esta postagem no blog da equipe de Engenharia de Sucesso do Cliente fornece as etapas para configurar alertas para o pool de SQL dedicado do Azure Synapse e fornecer alertas recomendados para você começar. |
| Março de 2023 | Ajuste de desempenho de pools dedicados do Synapse – Noções básicas sobre o ciclo de vida das consultas | Esta postagem no blog da equipe de Engenharia de Sucesso do Cliente é um aprofundamento na compreensão do ciclo de vida das consultas para maximizar o desempenho. |
| Março de 2023 | Suporte à sintaxe GREATEST e LEAST T-SQL | As funções GREATEST e LEAST agora estão disponíveis em pools de SQL dedicados e sem servidor. Essas funções de valor escalar retornam o valor máximo e mínimo de uma lista de uma ou mais expressões. |
| Março de 2023 | Disponibilidade geral da distribuição multicoluna em pools de SQL dedicados | Agora você pode distribuir tabelas por Hash em várias colunas para uma distribuição mais uniforme da tabela base, reduzindo a distorção de dados ao longo do tempo e melhorando o desempenho de consultas. Para obter mais informações sobre esse recurso em disponibilidade geral, confira as três opções: CREATE MATERIALIZED VIEW, opções de distribuição CREATE TABLE ou opções de distribuição CREATE TABLE AS SELECT. |
| Março de 2023 | Implantar o SQL do Synapse sem servidor com o SSDT | A tão esperada compatibilidade do SqlPackage com os pools de SQL do Azure Synapse Analytics sem servidor já estão disponíveis no SqlPackage 161.8089.0. Os pools de SQL sem servidor permitem as ações de extração e publicação. |
| Fevereiro de 2023 | Compatibilidade com ordenações UTF-8 e japonesas para pools de SQL dedicados | A compatibilidade com UTF-8 e as ordenações japonesas agora estão em disponibilidade geral para pools de SQL dedicados. |
| Setembro de 2022 | Estatísticas automáticas para OPENROWSET em conjuntos de dados CSV | O pool de SQL sem servidor criará automaticamente estatísticas para conjuntos de dados CSV quando necessário a fim de garantir um plano de execução de consulta ideal para as consultas OPENROWSET. |
| Setembro de 2022 | Sintaxe MERGE T-SQL | A sintaxe MERGE T-SQL tem sido uma adição altamente solicitada à biblioteca T-SQL do Azure Synapse. A sintaxe MERGE encapsula INSERTs/UPDATEs/DELETEs em uma só instrução. Disponível em pools de SQL dedicados na versão 10.0.17829 e superior. Para obter mais informações, confira o blog do comunicado da sintaxe MERGE T-SQL. |
| Agosto de 2022 | Tabelas do Delta Lake do Apache Spark em pools de SQL sem servidor | A capacidade para que pools de SQL sem servidor acessem tabelas do Delta Lake criadas em bancos de dados do Spark está em versão prévia. Para saber mais, confira Tabelas de metadados compartilhadas do Azure Synapse Analytics. |
| Agosto de 2022 | Distribuição multicoluna em pools de SQL dedicados | Agora você pode distribuir tabelas por Hash em várias colunas para uma distribuição mais uniforme da tabela base, reduzindo a distorção de dados ao longo do tempo e melhorando o desempenho de consultas. Para saber mais sobre como aceitar a versão prévia, consulte as opções de distribuição CREATE TABLE ou as opções de distribuição CREATE TABLE AS SELECT. |
| Agosto de 2022 | Assistente de Distribuição | O Assistente de Distribuição é uma nova versão prévia do recurso em pools de SQL dedicados Gen2 do Azure Synapse que analisa consultas e recomenda as melhores estratégias de distribuição para tabelas a fim de aprimorar o desempenho de consultas. Para saber mais, confira Assistente de Distribuição no SQL do Azure Synapse. |
| Agosto de 2022 | Adicionar objetos SQL e usuários em bancos de dados do Lake | Novas funcionalidades anunciadas para bancos de dados do lake em pools de SQL sem servidor: criar esquemas, exibições, procedimentos, funções embutidas com valor de tabela. Também é possível criar um banco de dados de usuários do domínio do Azure Active Directory e atribuí-los à função db_datareader. Para saber mais, confira Acessar bancos de dados do lake usando pool de SQL sem servidor no Azure Synapse Analytics e Criar e usar tabelas externas nativas usando pools de SQL no Azure Synapse Analytics. |
Saiba mais
Para atualizações mais antigas, examine as postagens anteriores do Blog do Azure Synapse Analytics ou as atualizações anteriores no Azure Synapse Analytics.
- Introdução ao Azure Synapse Analytics
- Introdução ao Azure Synapse Analytics
- Realizar soluções analíticas integradas com o Azure Synapse Analytics
- Integração de dados em escala com o Azure Data Factory ou o pipeline Azure Synapse
- Roteiros de aprendizagem de treinamento da Microsoft para o Azure Synapse
- Azure Synapse Analytics no Microsoft Q&A