Historical record of incidents for IUGU
Report: "Instabilidade ao realizar transações com cartão de crédito"
Last updateIdentificamos que nossos sistemas estão com instabilidade ao realizar transações com cartões de créditos. Nossos engenheiros já estão trabalhando juntamente com nossos parceiros para solucionar o problema o mais rápido possível.
Report: "Instabilidade de na API do Checkout"
Last updateO ambiente foi normalizado e a API está operacional.
Estamos com uma instabilidade na API do Checkout. Nossos engenheiros já estão atuando para restabelecer o sistema o mais rápido possível.
Report: "Atraso no processamento de registro dos boletos"
Last updateO problema foi resolvido.
Nosso processamento de registro de boletos está atrasado, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Instabilidade ambiente PIX"
Last updateAmbiente PIX normalizado.
Ambiente está respondendo e PIX estão sendo criados e pagos. Nossos engenheiros estão monitorando o ambiente.
Nossos engenheiros continuam analisando o problema e em breve traremos mais atualizações.
Estamos com instabilidade em nosso ambiente PIX. Nossos engenheiros já estão atuando para restabelecer os sistemas o mais rápido possível.
Report: "Instabilidade ambiente PIX"
Last updateSistema de pagamento PIX normalizado.
Os pagamentos PIX voltaram a ser realizados. Estamos monitorando o ambiente junto ao BACEN.
Informamos também que os saques podem sofrer atrasos para serem efetivados.
We are continuing to work on a fix for this issue.
Informamos que, devido a problemas técnicos no BACEN, estamos enfrentando instabilidades que podem impactar o ambiente PIX. Isso pode ocasionar erros em pagamentos, transações via PIX, requisições API relacionadas a PIX e outros recursos associados. Estamos trabalhando para resolver a situação o mais breve possível. Agradecemos pela compreensão e atualizaremos as informações conforme houver progresso.
Report: "Instabilidade ambiente PIX"
Last updateA instabilidade no sistema do PIX foi normalizada.
"Estamos enfrentando uma instabilidade que está impactando o ambiente PIX, podendo gerar erros de pagamento de transações via PIX, requisições API relacionadas a PIX e demais recursos. O nosso time técnico já está atuando com agilidade para resolução".
Report: "Instabilidade na API"
Last updateAmbiente normalizado
Estamos com instabilidades na nossa API. Nossos engenheiros já estão trabalhando para normalizar os sistemas o mais rápido possível.
Report: "Lentidão no registro de boletos"
Last updateThis incident has been resolved.
O registro de boletos está com lentidão, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Lentidão no registro de boletos"
Last updateThis incident has been resolved.
O registro de boletos está com lentidão, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Instabilidade Reembolsos"
Last updateNormalizado!
Recebemos atualização do nosso parceiro de negócios, que a instabilidade nos reembolsos está sendo normalizada e a maioria já acontece com sucesso. Seguiremos monitorando a situação.
Identificamos, junto ao nosso parceiro de negócios, uma instabilidade pontual que está afetando alguns reembolsos. Estamos trabalhando em conjunto para resolver o quanto antes.
Report: "Indisponibilidade para realização de saques"
Last updatePrezados clientes, Informamos que nosso sistema já foi restabelecido e a funcionalidade de saques está novamente disponível. Pedimos desculpas mais uma vez pelo transtorno causado e agradecemos pela paciência e compreensão durante este período. Reiteramos nosso compromisso em oferecer serviços confiáveis e de qualidade. Obrigado pela confiança. Atenciosamente, iugu
Prezados clientes, Gostaríamos de informar que, no momento, estamos enfrentando uma instabilidade em nosso sistema que está impossibilitando a realização de saques. Pedimos desculpas pelo transtorno e ressaltamos que estamos trabalhando com máxima prioridade para resolver o problema o mais rápido possível. Reiteramos nosso compromisso com a qualidade e segurança dos serviços oferecidos. Assim que o sistema for normalizado, avisaremos imediatamente. Agradecemos pela compreensão e estamos à disposição para qualquer dúvida por meio dos nossos canais de atendimento. Atenciosamente, iugu
Report: "Lentidão no registro de boletos"
Last updateO sistema de registro de boletos foi normalizado
O registro de boletos está com lentidão, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Aviso sobre instabilidade no WhatsApp - Atendimento Suporte"
Last updateNormalizado.
Observamos uma melhora no tempo de resposta do WhatsApp. Continuaremos monitorando a situação de perto até que o serviço esteja totalmente normalizado.
Estamos enfrentando problemas de lentidão no WhatsApp, o que pode impactar temporariamente o tempo de resposta do nosso time de suporte. Pedimos desculpas pelo inconveniente e estamos trabalhando para minimizar os efeitos. Agradecemos sua paciência e compreensão
Report: "Lentidão no registro de boletos"
Last updateO problema foi resolvido.
O registro de boletos está com lentidão, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Instabilidade ambiente PIX"
Last updateAmbiente normalizado. Início da instabilidade: 11:00h Normalização do Ambiente: 11:11h
Estamos com instabilidade em nosso ambiente PIX. Nossos engenheiros já estão atuando para restabelecer os sistemas o mais rápido possível.
Report: "Instabilidade ambiente PIX"
Last updateOs pagamentos PIX apresentaram uma instabilidade entre 08:01h e 08:07h e já foram normalizados pelos nossos engenheiros.
Report: "API indisponível"
Last updateThis incident has been resolved.
Problema identificado, foi estabilizado e vamos continuar acompanhando.
Nossa API se encontra indisponível no momento, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Instabilidade ambiente PIX"
Last updateO ambiente foi restabelecido e os pagamentos voltaram a ser efetivados.
Estamos com instabilidade para realizar pagamentos PIX. Nossos engenheiros estão atuando para restabelecer o ambiente o mais rápido possível.
Report: "Instabilidade ambiente PIX"
Last updateProblema foi resolvido.
"Estamos enfrentando uma instabilidade que está impactando o ambiente PIX, podendo gerar erros em transações de pagamento via PIX, requisições API relacionadas ao PIX e demais recursos. O problema é no BACEN e está atingindo toda a rede. Eles estão analisando a situação e, assim que possível, enviarão uma previsão.".
Report: "[Manutenção CIP] - Falha no Registro de Boletos"
Last updateNormalizado as 14h.
O registro de boletos está com problemas, a CIP(Câmara Interbancária de Pagamentos) esta passando por manutenções e a previsão de retorno é as 14 Horas.
Report: "Instabilidade ambiente PIX"
Last updateAmbiente normalizado.
Nosso time de engenheiros conseguiu estabilizar o sistema. Estamos monitorando o ambiente.
Estamos enfrentando uma instabilidade que está impactando o ambiente PIX, podendo gerar erros de pagamento de transações via PIX, requisições API relacionadas a PIX e demais recursos. O nosso time técnico já está atuando com agilidade para resolução.
Report: "Instabilidade ambiente PIX"
Last updateThis incident has been resolved.
Ambiente normalizado, vamos manter o incidente aberto e o time acompanhando.
We are continuing to investigate this issue.
"Estamos enfrentando uma instabilidade que está impactando o ambiente PIX, podendo gerar erros de pagamento de transações via PIX, requisições API relacionadas a PIX e demais recursos. O nosso time técnico já está atuando com agilidade para resolução".
Report: "Atraso no processamento de retorno dos boletos"
Last update## Postmortem: Atraso no processamento de retorno dos boletos ### Data: 13/08/2024 ### Resumo do Incidente No dia 13/08/2024, identificamos que as métricas de performance da aplicação não foram coletadas corretamente, o que impactou diretamente o processo de escalabilidade automática \(auto-scaling\) do sistema. Como resultado, a aplicação não conseguiu ajustar sua capacidade de maneira adequada, levando a uma degradação no desempenho e afetando o processamento e baixa nos boletos bancários. ### Impacto Devido à falha na coleta de métricas, o sistema não conseguiu escalar corretamente, resultando em: * Lentidão no processamento de requisições dos boletos bancários. * Aumento no tempo de resposta da aplicação. * Atraso no processamento de retorno dos boletos ### Linha do Tempo * **12/08/2024 - 16:00h UTC - 3:** Início do problema de coleta de métricas. * **13/08/2024 - 07:00h UTC - 3:** Detecção do problema pelo time de monitoramento e scaling manual das aplicações. * **13/08/2024 - 08:00h UTC - 3:** Início das ações corretivas. * **13/08/2024 - 10:00h UTC - 3:** Normalização completa das operações. ### Causa Raiz Após uma análise detalhada, identificamos que a causa raiz foi uma falha de configuração no sistema que exporta estatísticas de consumo, que impediu a correta coleta de métricas essenciais para o ajuste automático da capacidade da aplicação. ### Ações Corretivas Assim que o problema foi detectado, as seguintes ações foram tomadas: 1. Scale manual para garantir vazão da carga de trabalho nos sistemas. 2. Correção da configuração do sistema para garantir a correta coleta de métricas. 3. Reinicialização dos serviços afetados para garantir o retorno à normalidade. 4. Monitoramento intensivo durante as horas subsequentes para garantir a estabilidade do sistema. ### Ações Preventivas Para evitar que incidentes semelhantes ocorram no futuro, implementaremos as seguintes medidas: 1. Implementação de um sistema de alerta específico que notifique imediatamente o time de operações em caso de falha na coleta de métricas. 2. Revisão dos scales e atualização do sistema que apresentou a falha. ### Conclusão Reconhecemos que este incidente causou inconvenientes significativos e pedimos sinceras desculpas a todos os usuários impactados. Levamos muito a sério a qualidade do nosso serviço e estamos comprometidos em aprender com este incidente para garantir que não ocorra novamente. A situação foi totalmente normalizada, e continuamos monitorando de perto o desempenho da aplicação para garantir a melhor experiência possível para nossos usuários.
Problema foi resolvido.
Nosso processamento de retorno de boletos está atrasado, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Indisponibilidade ambiente PIX"
Last updateProblema foi resolvido.
Estamos enfrentando uma indisponibilidade que está impactando o ambiente PIX, podendo gerar erros de pagamento de transações via PIX, requisições API relacionadas a PIX e demais recursos. O nosso time técnico já está atuando com agilidade para resolução.
Report: "Ambiente produtivo indisponível"
Last updateProblema resolvido.
Gostaríamos de informar que a falha identificada em nosso ambiente foi corrigida. Nossa equipe está monitorando de perto a situação para garantir que tudo continue funcionando conforme esperado. Pedimos desculpas pelo inconveniente e agradecemos a sua paciência e compreensão durante este período.
Identificamos uma falha nos nosso ambiente e já estamos trabalhando para restabelecer os serviços.
Report: "Indisponibilidade ambiente PIX"
Last updateGostaríamos de informá-lo que o incidente que estava causando a indisponibilidade no ambiente PIX foi mitigado e os serviços foram restabelecidos. No entanto, ainda estamos monitorando o sistema de perto para garantir a estabilidade completa e identificar qualquer possível gargalo que possa surgir.
Estamos enfrentando uma indisponibilidade que está impactando o ambiente PIX, podendo gerar erros de pagamento de transações via PIX, requisições API relacionadas a PIX e demais recursos. O nosso time técnico já está atuando com agilidade para resolução.
Report: "Lentidão na extração dos relatórios"
Last updateThis incident has been resolved.
Estamos com lentidão na extração de relatórios, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Aplicativo iugu - Mobile"
Last updateThis incident has been resolved...
Gostaríamos de informá-los que estamos realizando um importante processo de segurança em nosso aplicativo. Devido a isso, precisaremos estender o período de indisponibilidade temporária.
Prezados clientes, Gostaríamos de informar que identificamos um problema em nosso aplicativo. Para resolver essa questão, precisaremos realizar uma manutenção que resultará em uma indisponibilidade temporária do processo de transferência pix para contas de terceiros. Agradecemos pela compreensão.
Prezados clientes, Gostaríamos de informar que identificamos um problema em nosso aplicativo. Para resolver essa questão, precisaremos realizar uma manutenção que resultará em uma indisponibilidade temporária do processo de transferência pix para contas de terceiros. Agradecemos pela compreensão.
Prezados clientes, Gostaríamos de informar que identificamos um problema em nosso aplicativo. Para resolver essa questão, precisaremos realizar uma manutenção que resultará em uma indisponibilidade temporária do processo de transferência pix para contas de terceiros. Agradecemos pela compreensão.
Report: "Relatórios de extrato consolidado"
Last updatePrezados clientes, Gostaríamos de informar que focamos em melhorias no processamento dos cálculos dos relatórios de extrato consolidado com a finalidade de reduzir o tempo de processamento e desta forma reduzir nosso tempo de resposta, tanto na disponibilização do extrato em D-1 quanto no caso deste incidente. Por conta deste esforço, informamos que os extratos de 03/05 a 05/06 foram recalculados hoje e já se encontram disponíveis para consulta. Permanecemos monitorando o processo de calculo do extrato consolidado para garantir que os valores estejam disponíveis o mais rápido possível. Quaisquer problemas estamos a disposição Agradecemos pela compreensão
Prezados clientes, Gostaríamos de informar que os relatórios de extrato consolidado foram calculados de forma errônea desde o dia 03/05 devido a uma mudança. O problema foi identificado e corrigido e estamos recalculando todos os relatórios desde o dia 03/05. A estimativa para resolução de calculo de todos os dias é quarta-feira (12/06). Agradecemos pela compreensão
Report: "instabilidade API"
Last updateNormalizado.
Tivemos uma instabilidade na API, nos últimos 10min. Ja normalizou e estamos acompanhando.
Report: "Atraso no processamento de registro dos boletos"
Last updateThis incident has been resolved.
Nosso processamento de registro de boletos está atrasado, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Atraso no registro de boletos"
Last updateThis incident has been resolved.
O registro de boletos está com lentidão, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Ambiente produtivo indisponível"
Last update📢 Olá cliente, Esperamos que esteja bem. No dia 30 de Março de 2024, enfrentamos um incidente que afetou significativamente a operação da plataforma Iugu. Gostaríamos de fornecer uma descrição detalhada do ocorrido e das medidas tomadas para mitigar futuros problemas similares. **Resumo do Incidente:** * **03h20m:** Recebemos um alarme indicando degradação de performance no serviço PIX. * **03h40m**: Identificamos a presença de um Deadlock em nosso banco de dados principal em uma tabela muito importante. _Neste ponto, reconhecemos a seriedade do problema. Descobrimos que uma tabela crítica, responsável pelo armazenamento de informações de transações financeiras, havia atingido o limite máximo em uma de suas colunas, que registra identificadores de transação._ * **04h00m:** Iniciamos a manobra de dados na tentativa de reduzir o período de impacto. _Dada a importância e complexidade da tabela, a resolução do problema exigiu cuidado meticuloso. Criamos uma nova tabela, a particionamos e ajustamos o tipo de campo necessário._ * **15h00m**: Conseguimos finalizar a manobra e liberar todo o sistema para operação. **Medidas Preventivas:** * Implementação de rotinas mais agressivas de limpeza de dados em tabelas com alta atividade. * Particionamento de tabelas críticas para distribuir a carga e minimizar futuros impactos. Essas ações são parte de nossos esforços contínuos para assegurar que problemas similares não voltem a ocorrer. Lamentamos profundamente qualquer inconveniência causada. Reiteramos nosso compromisso constante em aprimorar a qualidade e disponibilidade de nossos serviços. Estamos à disposição para quaisquer esclarecimentos adicionais que possam ser necessários. Atenciosamente,
O incidente foi resolvido com sucesso e todas as operações afetadas foram restauradas para funcionamento normal. No entanto, estamos mantendo vigilância contínua para garantir que não ocorram recorrências do problema e para mitigar quaisquer impactos residuais que possam surgir.
Pedimos desculpas pela inconveniência causada pela interrupção anterior. Identificamos a necessidade de realizar um procedimento adicional para garantir a estabilidade e integridade de nossos sistemas. Este procedimento adicional exigirá mais tempo do que o inicialmente previsto. Antecipamos que serão necessárias mais 5 horas para completar todas as etapas com segurança. Lamentamos profundamente qualquer impacto que isso possa causar em suas operações e agradecemos sua compreensão enquanto trabalhamos para resolver completamente essa situação. Estamos comprometidos em restaurar completamente nossos serviços o mais rápido possível.
Identificamos uma falha nos nossos bancos de dados e já estamos trabalhando para restabelecer os serviços. Previsão de uma hora.
Report: "Problemas em algumas transações de cartão"
Last updateDurante o intervalo das 10h30 às 10h55, ocorreram problemas com algumas transações de cartão. Identificamos uma falha com um dos nossos parceiros de processamento de pagamentos. No entanto, gostaríamos de informar que o problema já foi solucionado. Pedimos desculpas por qualquer inconveniente causado e agradecemos sua compreensão.
Report: "Pedido de Pagamento (Serviço de pagamento de contas)"
Last updateNormalizado.
Estamos com instabilidade no processamento de pedido no serviço de pagamento de contas.
Report: "API indisponível"
Last updatePrezados clientes, Gostaríamos de informar que no dia 11/03/2024, entre às 14:22h e 14:29h, ocorreu um incidente que indisponibilizou a utilização dos serviços e APIs da iugu. Este erro foi causado por um problema em uma de nossas bases de dados, resultando na mencionada indisponibilidade. Ressaltamos que nossos engenheiros prontamente identificaram e corrigiram o erro, restabelecendo completamente nossos serviços. Entendemos a importância da iugu para suas operações e desejamos assegurar-lhes que medidas adicionais foram implementadas para evitar recorrências deste tipo de incidente no futuro. Agradecemos imensamente pela compreensão e confiança depositada em nossos serviços. Estamos sempre à disposição para quaisquer esclarecimentos adicionais que possam ser necessários. Atenciosamente, Equipe iugu
O serviço foi restabelecido.
O serviço foi restabelecido. Nossos engenheiros estão monitorando o comportamento do sistema.
Nossa API se encontra indisponível no momento, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Alto indice de erros na API"
Last updateThis incident has been resolved.
No momento nossa API está apresentando intermitência de erros em algumas transações, nossa equipe de engenheiros está analisando e em breve atualizaremos esse canal.
Report: "Atraso na compensação de boletos de bancos específicos"
Last updateThis incident has been resolved.
A fix has been implemented and we are monitoring the results.
Estamos enfrentando uma instabilidade no processo de compensação de boletos do banco Inter, o que pode impactar a mudança do status do processamento. O nosso time técnico já está atuando com agilidade para resolução em parceria com a instituição responsável, os status serão atualizados automaticamente.
Report: "Aviso Exclusivo para Usuários que usam Biblioteca PHP"
Last updateRealizamos uma pequena atualização da biblioteca iugu-php, solicitamos que realizem o download atualizado da biblioteca evitando possíveis erros na verificação SSL. Link do repositório: https://github.com/iugu/iugu-php.git
Report: "Atraso no processamento de retorno dos boletos do Banco do Brasil."
Last updateAmbiente normalizado.
Estamos com atraso na compensação de boletos do Banco do Brasil. Nossos engenheiros estão atuando para normalizar o problema o mais breve possível.
Report: "Estamos com lentidão na liquidação dos boletos."
Last updateLiquidação dos boletos normalizada.
Estamos com lentidão na liquidação dos boletos, já identificamos o problema e estamos atuando para solucionar o mais rápido possível.
Report: "Estamos com lentidão na liquidação dos boletos"
Last updateLiquidação dos boletos normalizado.
Estamos com lentidão na liquidação dos boletos, já identificamos o problema e estamos atuando para solucionar o mais rápido possível.
Report: "Estamos com lentidão na liquidação dos boletos"
Last updateNormalizado.
Estamos com lentidão na liquidação dos boletos, já identificamos o problema e estamos atuando para solucionar o mais rápido possível.
Report: "Instabilidade ambiente PIX saída (out)"
Last updateIncidente normalizado.
Estamos com instabilidade no PIX de saída (out), nossos engenheiros já estão atuando para resolver o problema.
Report: "Instabilidade na API"
Last updateAmbiente normalizado após acompanhamento ao longo do dia, vamos realizar o post-mortem e compartilhar.
A API de busca foi estabilizada desde as 11H30m. Vamos continuar monitorando e acompanhado para garantir o pleno funcionamento.
Ainda estamos com instabilidade na API de busca, nosso time esta atuando ativamente para resolver 100% o quanto antes.
Identificamos que a busca, estão refletindo na API causando intermitência também na API. Estamos atuando para solucionar o mais rápido possível.
We are continuing to work on a fix for this issue.
Informamos que identificamos uma instabilidade no painel Alia ao realizar buscas de faturas. Já diagnosticamos o problema e estamos trabalhando para resolvê-lo o mais rapidamente possível.
Report: "Erro na geração de boletos."
Last updateThis incident has been resolved.
We are continuing to work on a fix for this issue.
Novos boletos já estão sendo gerados normalmente. Nosso time de engenheiros continuam atuando para resolver os boletos que ainda estão com problema.
Estamos com erros na geração dos boletos, já identificamos a causa e estamos atuando para resolver o mais rápido possível.
Report: "Instabilidade Relatórios"
Last updateAmbiente normalizado.
Estamos com instabilidade nos relatórios emitidos pelo painel e por isso, a extração dos relatórios pode levar um pouco mais de tempo. O nosso time técnico já está atuando com agilidade para resolução .
Report: "Instabilidade PIX"
Last updateAmbiente normalizado.
We are continuing to work on a fix for this issue.
Estamos com instabilidade no ambiente PIX, nossos engenheiros já estão atuando para resolver o problema.
Report: "Instabilidade na API"
Last updateAmbiente normalizado.
Estamos enfrentando uma instabilidade no ambiente de faturas, o que pode afetar a busca de faturas. O nosso time técnico já está atuando para resolução.
Report: "Instabilidade PIX"
Last updateAmbiente normalizado.
Estamos com instabilidade no ambiente PIX, nossos engenheiros já estão atuando para resolver o problema.
Report: "Instabilidade no Sistema"
Last updateThis incident has been resolved.
Identificamos uma instabilidade em nosso sistema. Nossos engenheiros já estão atuando para normalizar o ambiente.