A otimização do armazém de dados impulsiona o crescimento da empresa de investimento

A otimização do armazém de dados impulsiona o crescimento da empresa de investimento

Superar o lento processamento em lote de dados diários de posição, negociação e mercados permite que a empresa amplie seus sistemas.

Desempenho mais rápido

Melhora a resiliência e reduz o tempo de processo (6 horas para 40 min).

Unificação e padronização

O trabalho de armazém de dados foi simplificado e o tempo diário de processamento manual em lote foi reduzido em 90%.

Escalabilidade

Capacidade construída para avançar para um processo escalável, tanto vertical como horizontalmente, permitindo ir ao encontro das necessidades do cliente.

Desafio

Buscando velocidade e escalabilidade

O sistema usado por uma grande empresa de investimentos dos EUA para armazenar dados importantes sobre negociações, o valor de suas participações, movimentos de mercado e muito mais estava sendo atualizado uma vez por dia em um processo em lote que levava até três horas. Como esse armazém de dados fornece entradas para uma variedade de relatórios internos posteriores todos os dias, incluindo importantes análises de risco, o lento processamento em lote era um ponto problemático.

Além disso, a empresa precisava de um sistema de armazém de dados que pudesse ser dimensionado para o crescimento – mais ativos, novos negócios e novas formas de usar dados. O tempo necessário para o processamento aumentava junto com o volume de dados e isso significava que todo o sistema logo poderia se tornar insustentável. Era cada vez mais urgente melhorar o desempenho do armazém de dados e do software de extração, transformação e carregamento (ETL).

A empresa também queria disponibilizar mais dados no sistema de armazém em tempo real para permitir novos usos de dados. Isso faz parte do road map de TI que a GFT está ajudando a empresa a realizar e abordar os tempos de processamento em lote seria uma etapa importante.

“Inicialmente, a GFT não tinha uma exigência do cliente dizendo que precisava de nós para reduzir o tempo de processamento em lote. Mas vimos a necessidade e começamos a trabalhar proativamente para melhorar esse sistema. No final, esses esforços agregaram valor real às operações dessa empresa de investimento.”

Ed Betts

Diretor da Unidade de Clientes

GFT

Compromisso

Simplificação dos processos de dados

Usando a tecnologia existente da empresa de forma mais eficiente, a GFT simplificou o trabalho de armazém de dados e reduziu o tempo diário de processamento em lote para cerca de 15 minutos – uma redução de mais de 90%.

Para isso, os engenheiros da GFT melhoraram os padrões lógicos e criaram controles melhores. Eles seguiram as práticas padrão para o software ETL, que foram negligenciadas ao longo dos anos desde que o sistema foi implantado inicialmente. Cada execução diária de dados gera mais de 44.000 arquivos e, com a agilização do processo, foi possível reduzir o tempo de consumo.

A otimização dos processos de dados ajuda a empresa a integrar servidores baseados em nuvem à medida que ela cresce. Anteriormente, estava limitado ao dimensionamento vertical, adicionando mais recursos às máquinas existentes no local. Com os processos aprimorados implantados, o sistema de armazém de dados tem mais flexibilidade para responder à demanda no futuro.

Benefícios

Relatórios mais oportunos

Como resultado da melhoria do armazém de dados, que serve como um hub de sincronização de dados, todo um menu de relatórios internos pode estar pronto mais cedo todos os dias. O processamento em lote mais rápido oferece aos negociantes, gerentes, analistas e executivos da empresa dados mais oportunos para ajudá-los a manter uma compreensão completa e clara do status de seus investimentos.

O trabalho nessa questão foi fundamentado no profundo conhecimento da GFT sobre as necessidades de tecnologia, processos e dados da empresa de investimento. Os engenheiros da GFT iniciaram uma prova de conceito sobre soluções para o processamento em lote antes mesmo de o cliente levantar qualquer preocupação sobre os problemas de desempenho do armazém de dados. O cliente não precisou adquirir nenhuma nova tecnologia ou sistema desnecessário. Em vez disso, a GFT usou o que a empresa já tinha.

Agora a empresa pode adicionar novos negócios e expandir os requisitos de dados sem se preocupar com a flexibilidade ou escalabilidade do armazém de dados.