Crédito da foto: Freepik

Genie Code transforma ideias de engenharia de dados, ciência de dados e analytics em sistemas de produção autônomos

A Databricks, empresa de dados e IA, anunciou hoje o lançamento do Genie Code, um agente autônomo de IA que muda fundamentalmente a forma como o trabalho com dados é realizado. O Genie Code pode executar tarefas complexas como construir pipelines, detectar falhas, lançar dashboards e manter sistemas em produção. Em tarefas reais de ciência de dados, a Databricks constatou que o Genie Code mais do que dobrou a taxa de sucesso dos principais agentes de programação. Assim como as ferramentas de codificação agêntica transformaram a engenharia de software, levando os desenvolvedores de um estilo de assistência “autocomplete” para um desenvolvimento orientado por agentes, o Genie Code traz a mesma mudança de paradigma para engenharia de dados, ciência de dados e analytics.

O Genie Code é uma nova adição ao Genie, que permite que qualquer profissional da área converse com seus dados e obtenha respostas confiáveis instantaneamente usando o contexto e a semântica capturados pelo Unity Catalog. O Genie Code estende essa abordagem para profissionais de dados, lidando com a complexa engenharia necessária para transformar uma ideia em produção em todo o conjunto de dados corporativos. Além disso, a Databricks também anunciou hoje a aquisição da Quotient AI, uma empresa inovadora em avaliação e aprendizado por reforço para agentes de IA, para integrar avaliação contínua diretamente no Genie e no Genie Code.

A ascensão do trabalho com dados agêntico

As ferramentas de dados atuais tratam a IA como um assistente — escrevendo código, executando testes locais e iterando. Isso deixa as equipes de dados responsáveis pelas tarefas mais complexas de planejamento, orquestração, operação, validação e manutenção. O Genie Code inverte essa abordagem. Ele raciocina sobre problemas, planeja abordagens em múltiplas etapas, escreve e valida código pronto para produção e mantém o resultado — tudo isso mantendo os humanos no controle das decisões que realmente importam.

“O desenvolvimento de software mudou de assistência de código para engenharia totalmente orientada por agentes nos últimos seis meses”, disse Ali Ghodsi, cofundador e CEO da Databricks. “O Genie Code traz essa revolução para as equipes de dados. Estamos saindo de um mundo em que profissionais de dados são auxiliados por IA para outro em que agentes de IA fazem o trabalho, guiados por humanos. Chamamos isso de Agentic Data Work. Isso mudará fundamentalmente a forma como as empresas tomam decisões.”

O que o Genie Code faz

As ferramentas de codificação baseada em agentes que existem hoje têm dificuldade em executar tarefas de dados porque não têm acesso a contextos críticos como linhagem, padrões de uso e semântica de negócios. O Genie Code ajuda as equipes a superar essa lacuna de contexto para garantir os altos níveis de precisão e governança necessários em ambientes de produção. O Genie Code:

• Atua como um engenheiro especialista em machine learning: o Genie Code gerencia fluxos completos de ML de ponta a ponta. Ele raciocina sobre problemas complexos para planejar, escrever e implantar modelos, registrando experimentos no MLflow e ajustando endpoints de serviço para o máximo desempenho.
• Incorpora profundo conhecimento em engenharia de dados: enquanto um engenheiro iniciante pode escrever um script que funciona em dados de teste, o Genie Code projeta como um arquiteto sênior. Ele considera as diferenças entre ambientes de staging e produção, constrói fluxos de trabalho para captura de mudanças de dados e aplica expectativas de qualidade de dados.
• Mantém e otimiza proativamente: o Genie Code monitora pipelines do Lakeflow e modelos de IA em segundo plano para identificar falhas e investigar anomalias. Ele analisa, de forma autônoma, os rastros dos agentes para corrigir alucinações e ajusta a alocação de recursos antes mesmo de uma intervenção humana.
• Compreende o contexto corporativo: integrado ao Unity Catalog, o Genie Code aplica políticas de governança e controles de acesso existentes. Ele entende a semântica de negócios e os requisitos de auditoria, além de federar dados corporativos, incluindo dados de plataformas externas.
• Melhora ao longo do tempo: o Genie Code se torna mais inteligente à medida que as equipes o utilizam. Por meio de memória persistente, ele atualiza automaticamente as instruções internas com base em interações anteriores e preferências de codificação. Em tarefas reais de ciência de dados, a Databricks constatou que o Genie Code mais do que dobrou a taxa de sucesso dos principais agentes de programação (de 32,1% para 77,1%).

“Na SiriusXM, o Genie Code oferece suporte a tudo, desde a criação de notebooks e SQL complexo até o raciocínio sobre relações entre tabelas e a depuração de pipelines”, disse Bernie Graham, vice-presidente de engenharia de dados da SiriusXM. “Ele atua como um parceiro prático de desenvolvimento que ajuda nossas equipes de dados a entregar trabalho de alta qualidade em menos tempo.”

“O Genie Code muda a forma como nossas equipes de dados operam”, disse Emilio Martín Gallardo, cientista de dados principal de Data Management & Analytics na Repsol. “Em vez de conectar manualmente notebooks, pipelines e modelos, podemos delegar fluxos de trabalho complexos a um parceiro de IA que entende nossos dados, governança, contexto de negócios e bibliotecas internas, como o Repsol Artificial Intelligence Products. Isso acelera tudo, desde a previsão de séries temporais até a implantação em produção, sem sacrificar rigor ou controle.”

Aquisição da Quotient AI fortalece avaliação contínua

Para fechar o ciclo de qualidade em produção, a Databricks adquiriu a Quotient AI. A Quotient monitora automaticamente o desempenho de agentes — medindo a qualidade das respostas, identificando regressões precocemente e apontando falhas — alimentando um ciclo de aprendizado por reforço que mantém os agentes evoluindo ao longo do tempo. Os fundadores da Quotient trazem profunda experiência na avaliação de sistemas de codificação com IA, tendo anteriormente liderado melhorias de qualidade no GitHub Copilot. Ao incorporar essas capacidades ao Genie Code, a Databricks garante que sistemas de dados e IA não apenas operem em produção, mas também melhorem continuamente.

Sobre a Databricks 

A Databricks é a empresa de Dados e IA. Mais de 20.000 organizações em todo o mundo — incluindo Adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever e mais de 60% das empresas da Fortune 500 — confiam na Databricks para criar e escalar aplicações de dados e IA, analytics e agentes. Com sede em São Francisco, a Databricks oferece uma Plataforma de Inteligência de Dados unificada que inclui Lakebase, Genie, Agent Bricks, Lakeflow, Lakehouse e Unity Catalog.