Concil aumenta capacidade e disponibilidade da infraestrutura ao migrar para AWS

e-Core • July 28, 2023

Sobre a Concil

A Concil foi fundada em 1993, com o objetivo de ajudar empresas de todos os tamanhos e segmentos a ter uma boa gestão financeira do seu negócio, proporcionando resultados mais eficientes e confiáveis. O seu propósito é transformar a gestão financeira em algo simples, unificado e inteligente. Para isso, utiliza tecnologia, informação unificada e parcerias estratégicas, para proporcionar segurança nas decisões, economia de tempo e resultados financeiros.


Atualmente, a empresa conta com mais de 6 mil clientes, através da Conciliação Contábil (Concil Contábil) e da Conciliação de Cartão (Concil Card), tornando a gestão financeira mais fácil e rápida, proporcionando resultados mais eficientes e confiáveis.


O Desafio

Por possuir uma grande variedade de clientes, a Concil processa mais de 50 milhões de transações mensalmente, gerando mais de 300 milhões de linhas de dados para serem analisadas, aplicando regras complexas de negócio para entregar resultados de conciliação de dados financeiros.



A Concil desejava aumentar a quantidade de clientes. No entanto, um grande desafio era o ganho de escala na capacidade de processamento de dados na velocidade exigida para o processo de conciliação dos dados, mantendo o preço sob controle.

A solução utilizada originalmente era baseada em processamento de dados diretamente no banco de dados Oracle, hospedado na Oracle Cloud, e as transformações complexas executadas sobrecarregam o banco, gerando lentidão nas para as análises e dificuldade de receber novos clientes.


A Solução

Para solucionar seus desafios, a Concil contou com o apoio da e-Core para desenvolver uma solução escalável e orientada a eventos na AWS, onde uma premissa era o processamento dos arquivos ser com o uso de recursos independentes, baseados em boas práticas de arquitetura de microsserviços. Ou seja, cada arquivo seria processado na maior parte do fluxo de dados utilizando recursos computacionais apenas enquanto está sendo processado, minimizando a quantidade de recursos ociosos, refletindo diretamente na otimização de custos.


A diagram of a system with the word conell at the bottom

A estratégia para melhorar o gerenciamento dos dados foi utilizar os conceitos presentes no Lake House possibilitando uma governança unificada de fácil movimentação dos dados e o Apache Hudi que gerencia eficientemente os requisitos de um negócio, melhorando a qualidade dos dados, além de promover ACID nos dados do Amazon S3.


Durante todo o processo, o processamento dos dados foi realizado em Apache Spark em Clusters de EMR em batch e os dados consultados por processos analíticos via Amazon Redshift.


O Resultado


Agora a Concil consegue processar milhares de arquivos em minutos, permitindo a expansão do seu negócio sem que a infraestrutura seja um gargalo para o processamento. Com a solução implementada, foi possível processar 10 vezes mais arquivos por minuto, que era um dos principais gargalos do modelo anterior, aumentando em mais de 20 vezes a capacidade de receber novos clientes, ainda facilitando a manutenção pela diminuição da complexidade dos schemas de dados.



Além disso, um outro ponto importante foi a facilidade para manutenção da solução, reduzindo em 600 vezes o número de schemas de dados.



e-Core

Combinamos experiência global com tecnologias emergentes para ajudar empresas como a sua a criar produtos digitais inovadores, modernizar plataformas de tecnologia e melhorar a eficiência nas operações digitais.


Isso pode te interessar:

Guia de Recursos: Técnicas de Fine Tuning em GenAI
By e-Core August 11, 2025
Por trás da popularização de GenAI e dos benefícios em eficiência e tomada de decisões, existe um grande trabalho ao identificar padrões em enormes volumes de dados, estabelecendo relações entre essas informações que precisa ser otimizada. Nesse e-book iremos conhecer melhor uma delas, o fine tunning.
By e-Core August 7, 2025
Durante o processo de procura de novas oportunidades de emprego é comum surgirem algumas dúvidas com relação a candidatura, processo, como se comportar e etc. Nesse texto você vai encontrar algumas dicas que podem te ajudar em diversas situações. Primeiro passo: A procura! Durante a pesquisa por vagas, que fazem sentido para cada um, é comum levarmos em consideração coisas como nome da empresa, nível da vaga, benefícios e se de fato temos a compatibilidade técnica e comportamental exigida. Porém, é de extrema importância analisar o quanto de afinidade a empresa e a oportunidade tem com você, pessoa candidata. Além de colocar na balança as exigências e as oportunidades, e fatores como a distância, horários e modelo de trabalho, lembre-se de prestar atenção à estrutura, à cultura e ao negócio da empresa. Uma boa forma de fazer isso é conferindo os feedbacks das pessoas que trabalham ou trabalharam na empresa, tanto nas redes sociais quanto no Glassdoor, por exemplo, para que você possa compreender no detalhe como é a cultura daquela empresa de acordo com os seus valores. Isso aumenta sua assertividade na hora de avaliar a Oferta de Emprego, bem como traz um prognóstico mais fiel de como será sua adaptação no novo desafio. Segundo passo: Participando do processo. O Processo começou, e agora? Nesta etapa é extremamente importante esclarecer as dúvidas e perguntar. Calma! O nervosismo é normal, mas lembre-se que é extremamente importante organizar as ideias e perguntar. Por exemplo, aqui na e-core temos algumas etapas onde você poderá tirar dúvidas direcionadas em cada fase: Na etapa de RH : nessa fase você consegue tirar dúvidas sobre benefícios, estrutura da empresa, iniciativas de saúde e bem estar, dentre outros pontos, principalmente relacionados à cultura no geral. Na etapa técnica : Nesta etapa você tem contato com pessoas da sua área, então as perguntas podem ser aprofundadas – como é o dia a dia de trabalho com seu futuro time? Como é o contato com o cliente? Quais tecnologias são utilizadas? Você gosta de trabalhar na empresa – e por quê? Na etapa de liderança: você consegue não só tirar dúvidas sobre o time, mas sobre desafios futuros, expectativas para o cargo e desenvolvimento profissional. Durante o processo seletivo, o ideal é aproveitar ao máximo e ter em mente que estamos nos avaliando mutuamente, e por isso tanto a empresa quanto você deve perguntar e esclarecer dúvidas sobre o que for necessário. Afinal é como o início de um relacionamento. Uma experiência positiva, durante um processo seletivo, está sempre ligada à transparência e feedback, independente do resultado. Tome alguns cuidados ao trazer seus exemplos vividos, lembre-se que o tempo de uma entrevista apesar de parecer longo, é muito curto, mas ele é tudo que temos para nos conhecer e ter um overview geral das suas experiências, e é onde nós do RH podemos entender se faz ou não sentido avançar com você para as próximas etapas. Por isso, busque organizar suas ideias para trazer suas experiências, evite ser prolixo (nós sempre pediremos mais informações quando necessário então não precisa se preocupar em contar tudo de uma vez, pois vamos focar nos pontos que são importantes para a oportunidade em questão), e o importante é focar em suas experiências, nos seus objetivos, metas e vulnerabilidades (afinal, todos temos!). Terceiro passo: Recebendo feedback do processo. Feedbacks nem sempre são fáceis, podem nos trazer um sentimento de medo antes mesmo de sabermos qual o assunto, mas respire, lembre-se que todo feedback nos traz um crescimento. Essa é uma etapa muito importante, pois estar com a mente aberta para feedbacks vai ajudar no seu desenvolvimento pessoal e profissional e vai deixar você, pessoa candidata, cada vez mais preparada. Todo feedback abre um espaço para pedir dicas de como se preparar, de como aprender mais, de como crescer! Pedir feedbacks não é problema, seu desenvolvimento é exclusivamente seu, por isso, esse comportamento é extremamente valorizado e vai te ajudar a criar redes de networking além de impulsionar seu desenvolvimento. Boa sorte na sua jornada! Bom, agora que já falamos sobre algumas dicas rápidas, lembre-se que você é o protagonista da sua carreira. Por isso, é importante analisar com cuidado e atenção os passos que você escolhe dar nesse trajeto. Busque conhecimento e não tenha medo de pedir feedbacks, assim, você estará cada vez mais perto de conquistar a oportunidade ideal e de crescer profissionalmente. Boa sorte na sua jornada!
A group of people are having a meeting in a conference room.
By e-Core July 29, 2025
Com mais de 150 mil times ativos em todo o mundo e presença em mais de 200 países, a Atlassian tem se consolidado como uma referência em colaboração e produtividade empresarial.