Azienda del settore energetico modernizza la trasmissione dei dati in tempo reale con AWS e GFT
Quando i vantaggi si trasformano in risultati
Operazioni e governance semplificate
Ha standardizzato i servizi di streaming su AWS per migliorare la gestione della piattaforma e rafforzare la data governance
Modernizzazione tramite tecnologie native AWS
Ha effettuato la migrazione da Confluent Kafka ad Amazon MSK, semplificando l'architettura e le operazioni grazie ai servizi nativi AWS
Una base scalabile per la crescita
Ha realizzato una piattaforma scalabile e resiliente, pronta a supportare la crescita futura del business e dei dati
Sfida
Modernizzare la piattaforma di streaming senza interrompere le operazioni aziendali
L'azienda aveva bisogno di ridurre i costi operativi della propria piattaforma di event streaming senza compromettere scalabilità, resilienza, capacità di elaborazione dei dati in tempo reale, continuità del business o possibilità di rollback. L'ambiente comprendeva circa 300 topic, 581 partizioni, Schema Registry, Kafka Connect, Debezium CDC, connettori S3 Sink e diversi microservizi producer e consumer. La migrazione doveva ridurre al minimo l'impatto sui servizi critici durante la transizione da Confluent Cloud ad Amazon MSK Serverless.
Impegno
Migrazione verso un’architettura nativa AWS
GFT ha collaborato con l'azienda per progettare e implementare una strategia di migrazione da Confluent Cloud ad Amazon MSK. L'architettura target ha sostituito i broker Kafka con Amazon MSK, migrato Confluent Schema Registry ad AWS Glue Schema Registry e trasferito i workload Kafka Connect su MSK Connect. Per mitigare i rischi della migrazione, GFT ha progettato una fase di coesistenza durante la quale entrambi gli ambienti hanno operato in parallelo, utilizzando Kafka MirrorMaker 2.0 su Amazon EC2 per replicare i dati tra Confluent e Amazon MSK e garantire la possibilità di effettuare il rollback, se necessario.
Vantaggi
Una piattaforma più efficiente, scalabile e pronta per il futuro
Il progetto ha fornito all'azienda una piattaforma di event streaming maggiormente allineata all'ecosistema nativo AWS e alla sua strategia globale di adozione del cloud. La migrazione ha semplificato le operazioni consolidando i servizi di streaming all'interno dell'ambiente AWS, preservato funzionalità critiche come l'elaborazione dei dati in tempo reale, il change data capture (CDC), la gestione degli schemi e la comunicazione event-driven, e aumentato la scalabilità grazie a un'architettura serverless progettata per soddisfare le future esigenze del business.
L'ambiente gestito comprende circa 300 topic Kafka, 581 partizioni, Schema Registry, workload Kafka Connect, Debezium CDC, connettori S3 Sink e numerosi microservizi producer e consumer. Inoltre, la sostituzione di un deployment Confluent a basso utilizzo con Amazon MSK Serverless ha ridotto i costi mensili della piattaforma di circa il 40%.
Contatta il nostro esperto.
