Eu quero começar esse post já afirmando que o Oracle GoldenGate (OGG) vai morrer, se você acompanhou o post do OCW 22, sabe que a Oracle vem mudando muitas coisas neste produto, e a mais importante de todas é para quem ainda não está utilizando o OGG MA (Microservices Architecture), se este for o caso na sua empresa, então atenção, o OGG CA (Classic Architecture) está com os dias estão contatos já faz um bom tempo e agora é hora de pensar em atualizar e migrar todo o seu ambiente!
Na semana passada, dia 19 de setembro, ocorreu o Oracle Cloud World 2023 (OCW23). E trouxe muitas novidades, neste post vamos falar o que foi apresentado sobre o Oracle GoldenGate (OGG), e note que nesta edição o foco total está no OGG MA e no OCI OGG.
A Oracle informou que continua firme e forte com os investimentos no OGG para replicação em tempo real e com mais investimentos em IA (Inteligência Artificial), Cloud e tecnologias de Streaming.
Além disso, também afirma que OGG possui a confiança de milhares de clientes (> 80% da Fortune 500) para aplicações operacionais, bem como casos de uso de análise e ciência de dados.
E você aí ainda não usa OGG? E se já tem na sua empresa… será que está usando da melhor forma e fazendo valer a pena o investimento ($$$)?
A seguir, está a lista dos principais anúncios (fonte):
- 1. Oracle GoldenGate 23c Free
- 2. Innovations for Generative AI, Vector Embedding and Streaming Data
- 3. Oracle GoldenGate for Distributed Applications and Analytics
- 4. GoldenGate for Data Streams and Microservices Transaction Management
- 5. OCI GoldenGate New Deployments and Connectivity
- 6. OCI Database Migration Updates
- 7. Beta Program Launch for Veridata 23c
- 8. GGBR – GoldenLabs OGG 23c Free: hands-on
1. Oracle GoldenGate 23c Free
O OGG 23c free continua o mesmo, disponibilizado em um formato para utilização simples e rápida, trazendo facilidade de uso e download direto, totalmente de graça! (for free).
A novidade é que o OGG 23c, agora tem suporte para o Oracle Database 23c e introduz uma interface de usuário completamente nova e significativamente simplificada para configurar a replicação de dados multiativa/multi-active (bidirecional/multi-master) com detecção e resolução automática de conflitos (ACDR).
Prazer! Eu sou o novo OGG! Mais intuitivo, mais “friendly user”, cheio de clique aqui e ali… Confesso que a Oracle fez um excelente trabalho nesta nova interface, lembra muito a usabilidade do “descontinuado” OGG Monitor (que eu particularmente gostava).
Mas calma… a boa e velha linha de comando ainda existe com o adminclient:
E não se engane, tudo isso é só uma carinha bonita, nos bastidores, ainda é o bom e velho OGG que conhecemos! ^^
Neste link possui um resumo dos recursos e material do OGG 23c Free.
Além disso, o OGG23c Free agora possui uma interface para criação e configuração dos bancos e pipelines, bem simples e intuitivo, como podemos ver na imagem abaixo. E também possui um menu com vários links rápidos para vídeos e documentação.
2. Inovations for AI, Vector Embeddings and Streaming Data
Nos últimos meses temos falando tanto sobre o ChatGPT e como a Inteligência Artificial (IA) está mudando a forma como o mundo faz as coisas, e até o GoldenGate está entrando nesse universo.
Neste contexto, existe a Inteligência Artificial Generativa (Generative Artificial Inteligente – GenAI), que é uma categoria de algoritmos de IA utilizada para produzir automaticamente vários tipos de conteúdo na forma de texto, imagens, áudio, vídeos e dados sintéticos.
Geralmente esses modelos são treinados offline, mas existe um técnica chamada Retrieval Augmented Generation (RAG), que é uma forma de utilizar dados externos podendo vir de várias fontes de dados, como repositórios de documentos, banco de dados ou APIs, como tipos de dados vetoriais que podem ser usados com mecanismos/solicitações de uma GenAI.
E agora já dá pra entender onde o GoldenGate pode ser utilizado, para replicar os dados capturados em tempo real e enviar para o RAG os dados vetorizados. Por essa vocë não esperava neh? Nem eu! Mas gostei!
Para saber mais sobre RAG, clique aqui.
3. Oracle GoldenGate for Distributed Applications and Analytics
Neste ítem temos duas novidades, a primeira é a uma mudança bem interessante, o atual “GoldenGate for Big Data” agora irá se chamar “GoldenGate for Distributed Applications and Analytics“.
A Oracle também informou que este novo nome é o mais adequado para o momento atual, e também para a próxima década de soluções de dados modernas.
Em resumo, a mudança é por que atualmente o ecosistema dos dados está cada vez mais distribuídos e localizados fisicamente em diferentes lugares, desta forma, o foco atual do OGG será voltado para aplicações distribuídas e análises descentralizadas.
–> Deixe o seu comentário sobre essa mudança. Eu fiquei bem surpreso!
A segunda novidade é sobre dois novos componentes:
- 1. GoldenGate Data Streams
- 2. Transaction Manager for Microservices Enterprise Edition (MicroTx EE)
Combinados com as funcionalidades abaixo existentes, formam este “pacote do OGG”:
- Stream Analytics
- Capture/Apply from NoSQL and Messaging systems
- Apply to dozens of Big Data, Lakehouse and Warehouse target technologies
A imagem abaixo mostra tudo que está neste novo produto:
**Atenção no detalhe “*separetely priced products“ (haha).
E na próxima imagem mostra como esses componentes podem ser utilizados juntos.
Fique Ligado! Para os clientes que já possuem o OGG for Big Data, o que muda? Por enquanto nada, todas essas novidades poderão ser aproveitadas sem nenhum custo adicional.
4. GoldenGate for Data Streams and Microservices Transaction Management
O novo pacote de produtos chamado “GoldenGate for Distributed Applications and Analytics” está lançando dois novos recursos muito interessantes que suportam desenvolvimento de aplicativos e processamento de fluxo.
1. GoldenGate Data Streams – uma nova interface REST para seus eventos de dados formatados em JSON. Aproveitando o padrão aberto AsyncAPI, as aplicações agora podem consumir dados diretamente do GoldenGate sem serem forçados a usar ferramentas de mensagens complexas e caras, como o Apache Kafka. Os clientes agora podem oferecer suporte à distribuição de dados no estilo “fan out” (espalhar) diretamente do GoldenGate.
2. Transaction Manager for Microservices Enterprise Edition (MicroTx EE)– MicroTx EE foi projetado para ajudar os desenvolvedores de aplicação, garantir que a consistêcnia de dados em microserviços e aplicações nativas de cloud sem escrever nenhum código complexo, utilizando APIs e protocolos de transação para integrar diversos tipos de soluções com Java, Javascript, C/C++, Blockchain e Aplicações Tuxedo.
Obs.: Sendo bem sincero sobre este ítem, acredito que ainda seja uma daquelas novidades que precisam ser muito exploradas e testadas, para conseguir amadurecer como soluções de negócio.
5. OCI GoldenGate New Deployments and Connectivity
O Oracle Cloud Infrastructure GoldenGate (OCI-GG), foi o primeiro serviço de nuvem totalmente gerenciado para replicação de dados, e a cada ano muitas novidades são desenvolvidas e apresentadas no Oracle Cloud World. Neste ano (2023), foi anunciado que o Oracle Data Transforms, ferramenta que permite criar graficamente pipelines com transformação de dados aprendizado de máquina e processamento ETL/ELT em lote/microlote, agora pode ser integrado ao OCI-GG.
Este é um dos temas que estamos bem ansiosos para testar, porque embora ainda é pouco utilizado aqui no Brasil, já faz um bom tempo que trabalhamos com muitos projetos aplicando transformação de dados com OGG real-time!
Material adicional:
Introduction to Oracle Data Transforms
Neste vídeo do youtube tem uma idéia rápida de como o Oracle Data Transforms funciona: Oracle Autonomous Database – Data Transforms
Neste ano o OCI GoldenGate suporta mais de 40 novas plataformas de replicação, tanto para replicação em tempo real quanto para esse novo deploy com transformação de dados (Data Transforms).
6. OCI Database Migration Updates
Agora o serviço OCI Database Migration utilizará o OCI GoldenGate para realizar replicações de dados de forma transparente, tornando mais simples, rápido e confiável para os clientes que optarem por fazer migrações on-line. Isso é bem interessante, e mostra que cada vez mais o OGG está no centro de todos os assuntos relacionados a migração e replicação de dados, e nesse caso, está sendo realizado um trabalho forte em cima do OCI OGG, e naturalmente fica a dúvida, será que um dia o OGG on-premises vai morrer?
Outro novidade é que está sendo desenvolvido recursos para migração do banco de dados MySQL, e o serviço OCI Database Migration agora pode oferecer suporte para migrações online de uma varidade de ambientes como Amazon, Azure, Google e bancos on-premises para o Oracle MySQL/heatware.
Para saber mais sobre o OCI Database Migration, clique aqui, e para detalhes do OCI Database Migration com o OCI OGG, clique aqui.
7. Beta Program Launch for Veridata 23c
E a última novidade, mas não menos importante, é sobre o Veridata. Essa ferramente que particularmente eu acho fantástica e é utilizada para realizar comparação e reparação de dados entre ambientes e reportar quando identificar inconsistencia de dados. Porém, o custo acaba afastando muito clientes, já que é uma ferramenta a parte e independente do GoldenGate “padrão”, mas parece que isso deve mudar daqui pra frente.
A Oracle também anunciou a ferramenta está passando por uma enorme transformação e convidou os clientes que tiverem interesse para participar do programa beta (e eu super recomendo também)
A nova geração do Veridata está sendo desenvolvida para rodar em uma nova arquitetura back-end de microsserviços (Java Helidon), e terá um designer totalmente novo baseado em navegador (Oracle JET) para deixar a utilização da ferramenta bem simples, para atender a essa nova geração de usuários “self-service” com os deploys nativos de cloud mais seguros. Junte-se a nós no programa beta e você poderá experimentar este Veridata de última geração!
Se quiser saber mais sobre o Veridata, veja este post da série “Ferramentas Gráficas”.
Para saber mais sobre o OGG Veridata 23c Beta Program, clique aqui.
8. GGBR – GoldenLabs OGG 23c Free: hands-on
A GGBR, disponibilizou acesso em um ambiente com OGG 23c Free para você testar na prática e conhecer a nova interface acessando diretamente da Plataforma GoldenLabs, vamos lá… clica aí e inicie a sua jornada com o novo OGG!
user: oggadmin
pass: yXb3PvfAGdHX-CXgP
- GGBR > GoldenLabs > OGG 23c Free (AdminServer)
- GGBR > GoldenLabs > OGG 23c Free (ServiceManager)
- GGBR > GoldenLabs > OGG 23c Free
