Funções AI SQL Lançadas pela Databricks com Modelos de Fundação

Lar

Notícias

20 de Maio de 2025

ThomasScott

Databricks está revolucionando o mundo da análise de dados com suas inovadoras funções de SQL com IA, alimentadas por modelos de fundação. Essas ferramentas se integram perfeitamente aos seus fluxos de trabalho de dados existentes, facilitando mais do que nunca a realização de análises com IA diretamente dentro de suas consultas SQL. Isso significa que você pode se despedir do incômodo de integrações complexas de APIs e dar boas-vindas a uma abordagem mais simplificada para a análise de dados. Este artigo explora como esses novos recursos podem mudar a maneira como você lida com os dados.

Pontos Principais

Databricks introduz funções de SQL com IA alimentadas por modelos de fundação.
Essas funções oferecem capacidades como análise de sentimentos, classificação, extração de texto e correção gramatical.
Os modelos de IA são integrados ao Databricks, eliminando a necessidade de chamadas de API externas.
As funções estão disponíveis com base em pagamento por token, oferecendo soluções de IA custo-efetivas.
A disponibilidade é restrita a regiões específicas do Databricks.
A função de extração de IA permite a extração versátil de informações.
A função de correção gramatical da IA melhora a qualidade gramatical do texto.

Funções de SQL com IA do Databricks: Modelos de Fundação em Ação

Entendendo as Novas Funções de SQL com IA do Databricks

O Databricks lançou uma série de funções de SQL com IA que trazem a IA diretamente para as consultas SQL, simplificando o processo para analistas e engenheiros de dados. Essas funções utilizam o poder dos modelos de fundação, que são grandes modelos de linguagem treinados em vastos conjuntos de dados. Normalmente, tais modelos, como o ChatGPT, são hospedados externamente e requerem integrações complexas de API. O Databricks muda isso ao incorporar esses modelos diretamente em sua plataforma, tornando a IA mais acessível e eficiente. Em vez de cada empresa construir suas próprias chamadas de serviços web, o Databricks oferece modelos prontos, economizando tempo e recursos.

Funções de SQL com IA do Databricks

Embora essas funções facilitem a integração da IA, é importante considerar os custos. Elas operam com base em pagamento por token, então a implementação estratégica é fundamental para gerenciar as despesas de forma eficaz. Além disso, essas funções ainda não estão disponíveis em todas as regiões do Databricks, atualmente limitadas a regiões como Central US, East US, East US 2 e North Central US. Isso pode afetar seu espaço de trabalho e o planejamento de projetos.

Funções Principais de SQL com IA: Análise de Sentimentos, Classificação e Mais

O Databricks oferece várias funções principais de SQL com IA que enriquecem a análise de dados:

Analisar Sentimentos com IA: Determina o sentimento (positivo, negativo ou neutro) em textos, ótimo para entender feedback de clientes e tendências em redes sociais.
Classificar com IA: Categoriza textos em classes predefinidas, como organizar consultas de clientes por tópico ou produto.
Extrair com IA: Extrai informações específicas, como nomes ou endereços de e-mail, de textos não estruturados. Isso transforma texto bruto em dados estruturados, ideal para criar modelos detalhados.
Corrigir Gramática com IA: Corrige erros gramaticais em textos, útil para limpar conteúdo gerado por usuários ou garantir comunicação profissional.
Mascarar com IA: Protege a privacidade ao mascarar informações sensíveis em textos, ajudando a cumprir regulamentações de segurança de dados.
Resumir com IA: Cria resumos concisos de documentos ou artigos longos, perfeito para extrair informações-chave rapidamente.
Traduzir com IA: Traduz textos entre idiomas, expandindo suas capacidades de análise de dados em diferentes fontes.
Calcular Similaridade com IA: Calcula pontuações de similaridade entre registros, permitindo uma análise de dados mais refinada.

Navegando pelas Funções de SQL com IA do Databricks Usando as APIs de Modelos de Fundação do Databricks

A tabela a seguir lista as funções de SQL com IA do Databricks alimentadas pelas APIs de Modelos de Fundação do Databricks:

Função	Descrição
ai_analyze_sentiment	Analisa avaliações de clientes usando Funções de IA
ai_classify	Classifica usando Funções de IA
ai_extract	Extrai dados usando Funções de IA
ai_fix_grammar	Corrige a gramática usando Funções de IA
ai_gen	Usar a função ai gen
ai_mask	Usar a função ai mask
ai_similarity	Usar ai similarity para calcular o núcleo
ai_summarize	Usar a função ai summarize
ai_translate	Usar a função ai Translate
ai_query	A função AI_query() permite que você sirva seus modelos de aprendizado de máquina e grandes modelos de linguagem usando o Serviço de Modelos do Databricks e os consulte usando SQL

Aplicações Práticas: Casos de Uso do Mundo Real

Essas funções de SQL com IA abrem uma gama de aplicações práticas:

Analisar Avaliações de Clientes: Avalie automaticamente o sentimento em avaliações de clientes para identificar áreas de melhoria e medir a satisfação do cliente.
Automatizar Verificações de Qualidade de Dados: Use a correção gramatical de IA para limpar dados antes da análise, incluindo a sumarização de IA para eficiência.
Simplificar o Processamento de Documentos: Extraia informações-chave de documentos legais, contratos ou artigos de pesquisa, preenchendo outros conjuntos de dados com dados extraídos, como nomes e endereços.

Ao permitir que as funções de IA funcionem diretamente em SQL, os fluxos de trabalho de dados se tornam significativamente mais simplificados.

Testando as Funções de SQL com IA: Uma Demonstração no Databricks

O Databricks oferece uma demonstração convincente dessas funções em ação:

Demonstração de Funções de SQL com IA

Análise de Sentimentos: Com uma consulta SQL simples, você pode analisar o sentimento do texto: SELECT ai_analyze_sentiment('I am a happy sparky boi');- Limpeza de Dados: Consulte diferentes pontos de dados para analisar avaliações de clientes e realizar várias verificações, tornando a limpeza de dados mais eficaz.
Usando uma expressão de tabela comum (CTE) para armazenar dados, você pode analisar os sentimentos de diferentes usuários e realizar várias análises.
Alternar para a correção gramatical de IA pode ajudar a corrigir problemas gramaticais comuns.

Disponibilidade e Pré-requisitos para Usar Modelos de Fundação

Para usar os Modelos de Fundação de forma eficaz, certos requisitos devem ser atendidos:

Pré-requisitos para Modelos de Fundação

As funções de IA estão disponíveis apenas em espaços de trabalho nas regiões suportadas pelo pagamento por token das APIs de Modelos de Fundação.
Esta função não está disponível no Azure Databricks SQL Classic.

Dicas para Maximizar o Potencial das Funções de SQL com IA do Databricks

Integração Estratégica

Planeje cuidadosamente como integrar essas funções de IA em seus pipelines de dados. Identifique onde as percepções de IA podem adicionar mais valor e automatizar tarefas repetitivas. Use essas funções onde elas proporcionarão mais benefícios.

Otimização de Custos

Monitore o consumo de tokens para otimizar os custos. Avalie os gastos atuais e explore outras opções de IA para melhorar a funcionalidade enquanto avalia o tradeoff entre insights impulsionados por IA e custos.

Mantenha-se Atualizado

O Databricks está continuamente melhorando suas capacidades de IA. Mantenha-se informado sobre novas funções, disponibilidade de regiões e mudanças de preços para aproveitar plenamente essa tecnologia transformadora. Continue aprendendo e experimentando para melhorar seus fluxos de trabalho.

Vantagens e Desvantagens das Funções de SQL com IA do Databricks

Prós

Integração simplificada de IA dentro de fluxos de trabalho de SQL
Acesso a poderosos modelos de fundação
Menos complexidade em comparação com integrações externas de API
Potencial para soluções de IA custo-efetivas (pagamento por token)
Verificações automatizadas de qualidade de dados

Contras

Gestão de custos (uso de pagamento por token)
Disponibilidade limitada de regiões
Dependência da plataforma do Databricks
Potencial de bloqueio de fornecedor
Requisitos específicos de espaço de trabalho e configuração

Perguntas Frequentes

O que são funções de SQL com IA do Databricks?

As funções de SQL com IA do Databricks são uma série de ferramentas que permitem que você utilize modelos de IA diretamente dentro de suas consultas SQL. Essas funções são alimentadas por modelos de fundação e oferecem capacidades como análise de sentimentos, classificação de textos e mais.

Que tipos de funções são a extração com IA e a correção gramatical com IA?

A função de extração com IA permite a extração de termos e a análise de documentos para extrair informações específicas, como e-mails ou nomes. A função de correção gramatical com IA corrige erros gramaticais em textos.

Como funciona o preço dessas funções de IA?

O preço é baseado em um modelo de pagamento por token. O uso de tokens depende da complexidade da consulta e do tamanho do texto de entrada. Para informações detalhadas de preços, consulte a documentação do Databricks.

Em quais regiões as funções de SQL com IA do Databricks estão disponíveis?

Atualmente, essas funções estão disponíveis em regiões específicas, incluindo Central US, East US, East US 2 e North Central US. Sempre verifique a documentação mais recente do Databricks para o suporte de regiões mais atual.

Perguntas Relacionadas

Quais são as alternativas para realizar análise de sentimentos no Databricks?

Antes das funções de SQL do Databricks, as empresas tinham algumas opções. Uma era construir um modelo do zero usando seus dados para criar um motor de classificação personalizado. Outra era usar chamadas de serviços web, o que exigia a configuração de uma assinatura separada, potencialmente expondo a organização a vazamentos de dados ou outras preocupações.