Vozy

Is Vozy Down Right Now? Discover if there is an ongoing service outage.

Vozy is currently Operational

Last checked from Vozy's official status page

Historical record of incidents for Vozy

Report: "Inconvenientes con el procesamiento de llamadas de Agentes Generativos"

Last update
investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas de algunas de las cuentas; puntualmente con los agentes generativos. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Incidencia Whatsapp - Salida de mensajes"

Last update
identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de Whatsapp que puede generar inconvenientes en algunas cuentas Nuestro equipo tecnico esta revisando la plataforma para solventar el tema. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Inconvenientes con el procesamiento de llamadas de agentes generativos"

Last update
investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas de algunos agentes generativos. En algunos casos, estamos viendo elevados tiempos de respuesta de los modelos. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Occasional interruptions of outgoing call service"

Last update
investigating

Important Communication: Outbound Call Service Impact We are currently experiencing an impact on our outbound call service. Our technical team and specialists are actively engaged in identifying the root cause and implementing corrective actions to resolve this incident as quickly as possible. We appreciate your understanding and patience as we work to restore full service functionality. We will provide further updates as more information becomes available.

Report: "Occasional interruptions of outgoing call service"

Last update
Investigating

Important Communication: Outbound Call Service Impact We are currently experiencing an impact on our outbound call service. Our technical team and specialists are actively engaged in identifying the root cause and implementing corrective actions to resolve this incident as quickly as possible.We appreciate your understanding and patience as we work to restore full service functionality. We will provide further updates as more information becomes available.

Report: "Delay in campaign processing"

Last update
resolved

This incident has been resolved.

investigating

We are currently experiencing delays in processing campaigns. We are working to normalize this situation.

Report: "Delay in campaign processing"

Last update
Resolved

This incident has been resolved.

Investigating

We are currently experiencing delays in processing campaigns. We are working to normalize this situation.

Report: "Inconvenientes con el procesamiento de llamadas"

Last update
resolved

Hola, Nos parece importante que sepas que en este momento se tiene resuelta laafectación con llamadas del asistente virtual para algunas de las cuentas Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Nos parece importante que sepas que identificamos la afectacion y aplicamos el arreglo necesario. Estaremos monitoreando el fix durante las proximas horas. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

The issue has been identified and a fix is being implemented.

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas del asistente virtual para algunas de cuentas Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Inconvenientes con el procesamiento de llamadas para Agentes Generativos"

Last update
resolved

This incident has been resolved.

monitoring

Hola, Nos parece importante que sepas que tenemos normalizados los Agentes Generativos. Nuestro equipo tecnico se encuentra monitoreando la situacion. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas de algunos agentes generativos. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Incidencia Meta - Mensajes entrantes de Whatsapp"

Last update
resolved

Hola, Meta reporto en su status, que ya solventaron la incidencia con Whatsapp Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Seguimos monitoreando, esperando resolucion del lado de Meta Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de Whatsapp que puede generar inconvenientes en algunas cuentas Meta tiene reportado dentro de su status https://metastatus.com/whatsapp-business-api, una incidencia que puede traer afectación a nuestra mensajería por Whatsapp Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Latencias elevadas con Agentes Generativos"

Last update
resolved

Hola, Nuestro proveedor a logrado resolver sus inconvenientes de latencia. La incidencia fue resuelta. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, En este momento nuestro proveedor hizo cambios necesarios y estamos monitoreando la situacion. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con uno de nuestros proveedores, que esta generando una alta latencia en algunos agentes generativos Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Inconvenientes con acceso en la plataforma WebVozy"

Last update
resolved

Hola, Hemos logrado intervenir la afectacion que dificultaba el acceso a nuestra web por medio de la URL web.vozy.app. Nuevamente tenemos ese dominio funcional Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ver agentes y grupos de contacto en nuestra webvozy en nuestra url web.vozy.app. De momento pueden usar la url web.vozy.ai que no presenta este inconveniente. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

Report: "Inconvenientes con el procesamiento de llamadas en agentes Generativos"

Last update
resolved

Hola, Hemos logrado intervenir la afectacion en nuestros agentes generativos y terminado nuestro monitoreo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Hemos logrado intervenir la afectacion en nuestros agentes generativos. Estaremos monitoreando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas para algunos agentes generativos Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Inconvenientes con el cambio de cuentas en la Webvozy web.vozy.app"

Last update
resolved

Hola, Nuestro equipo tecnico logró solventar el inconveniente que teniamos en nuestro dashboard de administracion. Nuevamente la url web.vozy.app esa 100% funcional Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de cambiar de cuentas en nuestra webvozy en nuestra url web.vozy.app. De momento pueden usar la url web.vozy.ai que no presenta este inconveniente. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

Report: "Inconvenientes con el procesamiento de llamadas de agentes generativos"

Last update
resolved

Hola, Hemos logrado intervenir la afectacion en nuestros agentes generativos. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Hemos logrado intervenir la afectacion en nuestros agentes generativos. Estaremos monitoreando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas del asistente virtual para algunas de las cuentas; en este momento se tiene identificado una afectacion que limita a algunas llamadas de agentes puramente generativos Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Inconvenientes con servicio de reportería"

Last update
resolved

Hola, Queremos informarte que se ha intervenido el inconveniente que se estaba presentando con el servicio de reporteria Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Queremos informarte que se ha intervenido el inconveniente que se estaba presentando con el servicio de reporteria Estaremos monitoreandolo para garantizar su funcionamiento. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de reportería de la WebVozy que está generando inconvenientes en algunas cuentas; estamos viendo una afectacion a la hora de descargar los reportes Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Incidencia Meta - Cloud API messaging"

Last update
resolved

Hola, Queremos informarte que se ha intervenido el inconveniente que se estaba presentando con el servicio de Whatsapp Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Queremos informarte que se ha intervenido el inconveniente que se estaba presentando con el servicio de Whatsapp Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en tu operacion. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de Whatsapp que puede generar inconvenientes en algunas cuentas Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Incidencia Meta - Cloud API messaging"

Last update
resolved

Hola, Nuestro proveedor nos confirma que no estan viendo mas errores en su sistema. Meta (https://metastatus.com/whatsapp-business-api) ha abordado el problema de su lado y marco la situacion como resuelta. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de Whatsapp que puede generar inconvenientes en algunas cuentas Meta tiene reportado dentro de su status (https://metastatus.com/whatsapp-business-api), una incidencia que puede traer afectación a nuestra mensajería por Whatsapp Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Incidencia Meta - Account Management"

Last update
resolved

Hola, Nos complace informar, que luego de un monitoreo extenso, no detectamos anomalias en nuestro servicio de Whatsapp. Nuestro proveedor confirma lo mismo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Nuestro proveedor nos confirma que no estan viendo mas errores en su sistema. Aunque Meta aún no ha confirmado la resolución de este problema, parece que ha sido abordado de su parte. Continuaremos monitorizando la situación y proporcionaremos más actualizaciones de ser necesario. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

We are continuing to work on a fix for this issue.

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de Whatsapp que puede generar inconvenientes en algunas cuentas Meta tiene reportado dentro de su status (https://metastatus.com/whatsapp-business-api), una incidencia que puede traer afectación a nuestra mensajería por Whatsapp Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con servicio de reportería y ejecución en campañas en la plataforma WebVozy para algunas cuentas"

Last update
resolved

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con algunos comportamientos atípicos en los reintentos de algunas llamadas Outbound, así como novedades con la reportería de algunos registros de llamadas Inbound y Outbound que transitaron por nuestra plataforma el día de ayer antes de las 10:00 a.m. Si estabas presentando inconvenientes con alguno de estos eventos desde la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Support Team

identified

Estimados clientes: Queremos mantenerlos informados sobre la situación asociada al servicio de reportería ocurrida en la mañana de hoy. Nuestro equipo técnico identificó algunos comportamientos atípicos en los reintentos de algunas llamadas Outbound, así como novedades con la reportería de algunos registros de llamadas Inbound y Outbound que transitaron por nuestra plataforma el día de hoy antes de las 10:00 a.m. Seguimos trabajando en la identificación de la causa raíz de esta situación y en el ajuste de los registros de llamadas afectados dentro de la reportería. Todas las llamadas Inbound y Outbound que se realizaron o recibieron después de las 10:00 a.m. fueron procesadas correctamente, y sus registros en la reportería no presentan ninguna afectación. Apreciamos su comprensión y paciencia mientras nos esforzamos por restaurar la funcionalidad completa de nuestro servicio. Lamentamos sinceramente cualquier inconveniente que esto pueda ocasionarles. Si tienen alguna inquietud o comentario, no duden en enviarnos un correo a support@vozy.co.

identified

Estimados clientes, Seguimos con afectación en el servicio de reportería para algunas cuentas/clientes y nos encontramos trabajando activamente en la solución. Nuestro equipo está dedicado a restaurar la funcionalidad completa lo antes posible hasta restablecer la plena funcionalidad de manera rápida y eficiente. Lamentamos cualquier inconveniente que esto este causando Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

identified

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando en el servicio de reportería y ejecución de campañas de la WebVozy en algunas cuentas; Ejecución de llamadas de Lili Resolve, LiliAnalyze Si estabas presentando inconvenientes te invitamos a comprobar el correcto funcionamiento en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

identified

Estimados clientes, Seguimos al tanto de la afectación en el servicio de reportería para algunas cuentas/clientes y nos encontramos trabajando activamente en la solución. Nuestro equipo está dedicado a restaurar la funcionalidad completa lo antes posible hasta restablecer la plena funcionalidad de manera rápida y eficiente. Lamentamos cualquier inconveniente que esto este causando Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de reportería y ejecución de campañas de la WebVozy que está generando inconvenientes en algunas cuentas; Ejecución de llamadas de Lili Resolve, LiliAnalyze Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con acceso/login en la plataforma WebVozy"

Last update
resolved

This incident has been resolved.

identified

Hola, Nos complace informarte que se ha superado el inconveniente que algunos usuarios experimentaron al intercambiar cuentas en la plataforma WebVozy (https://web.vozy.app/login). Si estabas presentando inconvenientes con el acceso a la aplicación WebVozy, te invitamos a probar de nuevo en este momento para continuar con tus gestiones diarias sin inconvenientes. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.app/login); no les esta apareciendo el intercambio de cuentas a las que tienes acceso. Por lo cual te invitamos a realizar el ingreso por la web (https://web.vozy.ai/login), para que puedas realizar tus gestiones diarias son inconvenientes. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.app/login); no les esta apareciendo el intercambio de cuentas a las que tienes acceso. Por lo cual te invitamos a realizar el ingreso por la web (https://web.vozy.ai/login), para que puedas realizar tus gestiones diarias son inconvenientes. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

Report: "VOZY - Inconvenientes con acceso/login en la plataforma WebVozy"

Last update
resolved

This incident has been resolved.

monitoring

Hola, Nos complace comentarte que se ha superado el inconveniente que estaban presentando algunos de nuestros usuarios para el ingreso a la plataforma. Lo anterior gracias a la solución del inconveniente que estaba presentando nuestro proveedor de autenticación. Si estabas presentando inconvenientes con el acceso a la aplicación WebVozy, te invitamos a probar de nuevo en este momento. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

We are continuing to investigate this issue.

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login) (https://web.vozy.app/) ; está apareciendo un mensaje de error y no permite hacer el ingreso a la plataforma. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con acceso/login en la plataforma WebVozy"

Last update
resolved

This incident has been resolved.

monitoring

Hola a todos, Nos complace informarles que la situación relacionada con el acceso y login en la plataforma WebVozy ha sido completamente resuelta. Agradecemos su paciencia y comprensión mientras nuestro equipo técnico trabajaba para solucionar este inconveniente. Nuevo Dominio Como parte de nuestro plan de mitigación, hemos decidido realizar un cambio al nuevo dominio: https://web.vozy.app/. A partir de ahora, les invitamos a acceder a la plataforma a través de este nuevo enlace para disfrutar de un servicio más robusto y optimizado. Detalles Importantes Dominio Anterior: https://web.vozy.ai/ (operativo, pero se recomienda el uso del nuevo dominio). Si habías agregado como excepción a las listas blancas de los sistemas de seguridad como workarround para operar, te invitamos a remover las excepciones que habías realizado en las White Lists. Nuevo Dominio: https://web.vozy.app/. Como parte de nuestro plan de mitigación y con el objetivo de mejorar la experiencia de nuestros usuarios, hemos implementado un nuevo dominio (https://web.vozy.app/). Invitamos a todos nuestros clientes a comenzar a utilizar esta nueva dirección para acceder a la plataforma. Soporte: Si tienen alguna duda o requieren asistencia adicional, no duden en contactarnos a support@vozy.co. Agradecemos sinceramente su comprensión durante este proceso. Estamos comprometidos a ofrecerles la mejor experiencia posible y seguimos trabajando para mejorar nuestros servicios. Saludos, Vozy Support Team

identified

Hola, Nuestro equipo técnico sigue trabajando de la mano con nuestro proveedor en la búsqueda de una solución para la completa normalización a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login). Tener en cuenta que lo comunicación anteriormente no es la solución definitiva para este acceso correcto a la plataforma Vozy, es una medida temporal para que logres acceder. Donde se solicita el apoyo de sus administradores de seguridad para realiza al exclusión sobre las siguientes URL: https://api.vozy.ai https://web.vozy.ai Dominio vozy.ai En cuanto tengamos más detalles los estaremos compartiendo con ustedes. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Se tiene identificado el inconveniente, actualmente nuestro proveedor de autenticación está experimentando una novedad en plataforma que está tratando ahora mismo. Solicitamos muy amablemente a los clientes que están presentando inconvenientes a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login); poder contar con apoyo de sus administradores de seguridad para que excluyan o agreguen a su lista blanca de sitios seguros el dominio vozy.ai en sus firewalls o sistemas de administración de contenido, así lograr el acceso correcto Las URL a excluir serian las siguiente: https://api.vozy.ai https://web.vozy.ai Dominio vozy.ai Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login); está apareciendo un mensaje de error y no permite hacer el ingreso a la plataforma. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con acceso/login en la plataforma WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha superado el inconveniente que estaban presentando algunos de nuestros usuarios para el ingreso a la plataforma. Lo anterior gracias a la solución del inconveniente que estaba presentando nuestro proveedor de autenticación, en algunos casos estos procesos de sincronización pueden durar por un tiempo mayor de lo habitual en la actualización en tus Bases de datos del lado tu proveedor para lograr el ingreso correcto nuevamente a la url https://web.vozy.ai/login. Si estabas presentando inconvenientes con el acceso a la aplicación WebVozy, te invitamos a probar de nuevo en este momento. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login); está apareciendo un mensaje de error y no permite hacer el ingreso a la plataforma. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
postmortem

## Informe RCA - Alta latencia en responder las conversaciones ‌ El día de 27 de mayo de 2024, identificamos un incidente en donde los agentes virtuales tanto inbound como outbound, experimentaba retrasos significativos al entregar el texto del siguiente nodo en el flujo de conversación, tanto en el canal telefónico como en el canal de Whastapp. Este problema se debía a que el balanceo de carga en el no estaba funcionando correctamente. ## Causa raíz El problema está relacionado con la desactivación del certificado de Linkerd . Esto estaba causando retrasos en el procesamiento de las peticiones y la entrega del texto del nodo correspondiente. ## Solución Nuestro equipo de especialistas ha incrementado las réplicas mínimas las cuales son son múltiples instancias de un servicio que corren simultáneamente para asegurar disponibilidad, escalabilidad y manejo de tráfico para que se distribuya correctamente. Adicionalmente la solución definitiva fue la activación y actualizando el Linkerd a la ultima versión, solucionando el problema de certificados que se tenia previamente y el incidente con el balanceo de carga en los servicios. ‌ ## Plan de remediación ‌ Acciones que están en curso 1. Mejorar el monitoreo del Linkerd, con el fin de obtener mejores alertas que permitan anticiparnos a este tipo de comportamientos. ‌ Sabemos que nuestros clientes confían en nuestra solución para el soporte de sus operaciones y nos disculpamos sinceramente por cualquier inconveniente causado por este incidente. Estamos comprometidos con la disminución de fallos y la reducción del impacto en los servicios mediante el fortalecimiento de nuestra infraestructura y procesos, con el objetivo de prevenir eventos similares en el futuro y asegurar un servicio confiable para nuestros clientes. ‌ Atentamente, Vozy Support Team

resolved

This incident has been resolved.

monitoring

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas (Inbound/Outbound) Seguimos en el monitoreo diferenciado durante las siguientes horas para asegurar el correcto funcionamiento de los servicios. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos complace informarte que la afectación con nuestros servicios de asistente virtual ha sido solucionada. Nuestro equipo técnico ha trabajado diligentemente para asegurar que todas las cuentas estén funcionando correctamente y que las llamadas (Inbound/Outbound) se procesen sin inconvenientes. Vamos a estar haciendo un monitoreo diferenciado durante las siguientes horas para asegurar el correcto funcionamiento de los servicios. Agradecemos tu paciencia y comprensión durante este tiempo. Si experimentas algún problema adicional o tienes cualquier inquietud, no dudes en contactarnos a través de support@vozy.co. Una vez contemos con el informe RCA asociado a este evento, lo estaremos publicando aquí mismo. Saludos, El equipo de Vozy

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
postmortem

## **Informe RCA - Inconveniente servicio LinkerD** ‌El sábado 25 de mayo, desde las primeras horas de la mañana \(UTC -5\), nuestro equipo de Soporte comenzó a recibir reportes sobre el mal funcionamiento de nuestros asistentes virtuales de LILI. Al intentar establecer la llamada, algunos clientes recibían el mensaje: "Lo siento, en este momento no puedo continuar con la llamada". En respuesta a esta situación, se activó el protocolo de emergencia para diagnosticar y corregir la falla, involucrando a los equipos especialistas correspondientes. ## Causa raíz Se activó el protocolo de gestión de incidentes y se notificaron los equipos a las 08:00 AM \(UTC -5\). Tras revisar sistemas de monitoreo y no encontrar alertas relevantes, se investigó más a fondo y se descubrió que el problema estaba en el servicio LinkerD de la aplicación LILI. LinkerD es un certificado de seguridad el cual gestiona servicios en aplicaciones distribuidas basadas en microservicios. Dicho certificado estaba próximo a vencer, por lo cual al realizar la actualización de este mismo genero un corrupción es este certificado tomando una fecha errónea, lo cual afecto el servicio e interrupción del mismo. ya que la comunicación entre los microservicios no estaba activa provocando que LILI no pudiera procesar llamadas. ## Solución ‌Una vez identificado el inconveniente, se decidió desactivar el servicio de LinkerD en el clúster de la aplicación LILI. Además, se realizaron ajustes necesarios para restablecer la comunicación entre los servicios y se reiniciaron individualmente. Posteriormente, verificamos que esta acción restableciera la operación habitual de la plataforma, iniciando una etapa de pruebas de las principales funciones de la aplicación LILI. El resultado de esta intervención fue exitoso, confirmando la restauración completa del servicio a las 08:35 AM UTC -5. ## Plan de remediación ‌ Acciones que están en curso * Configurar alertas automáticas que notifiquen con suficiente antelación la próxima expiración de certificados de seguridad para el servicio. Estas alertas deben ser enviadas tanto a los equipos técnicos como a los responsables de la gestion de infraestructura. * Mejorar los sistemas de monitoreo actuales para incluir la supervisión del estado y la salud de los servicios críticos como LinkerD. Esto permitirá detectar problemas potenciales antes de que afecten a los usuarios finales. * Revisar y actualizar los protocolos de gestión de incidentes y la documentación relacionada para reflejar las lecciones aprendidas de este incidente. * Desarrollar y documentar un plan de contingencia específico para la rápida renovación de certificados expirados como los del servicio LinkerD. ‌ Sabemos que nuestros clientes confían en nuestra solución para el soporte de sus operaciones y nos disculpamos sinceramente por cualquier inconveniente causado por este incidente. Estamos comprometidos con la disminución de fallos y la reducción del impacto en los servicios mediante el fortalecimiento de nuestra infraestructura y procesos, con el objetivo de prevenir eventos similares en el futuro y asegurar un servicio confiable para nuestros clientes. ‌ Atentamente, Vozy Support Team

resolved

This incident has been resolved.

monitoring

Hola, Nos complace informarte que la afectación con nuestros servicios de asistente virtual ha sido solucionada. Nuestro equipo técnico ha trabajado diligentemente para asegurar que todas las cuentas estén funcionando correctamente y que las llamadas (Inbound/Outbound) se procesen sin inconvenientes. Vamos a estar haciendo un monitoreo diferenciado durante las siguientes horas para asegurar el correcto funcionamiento de los servicios. Agradecemos tu paciencia y comprensión durante este tiempo. Si experimentas algún problema adicional o tienes cualquier inquietud, no dudes en contactarnos a través de support@vozy.co. Una vez contemos con el informe RCA asociado a este evento, lo estaremos publicando aquí mismo. Saludos, El equipo de Vozy

identified

Hola, Queremos informarte que nuestro equipo técnico está completamente dedicado a resolver esta incidencia lo antes posible. Estamos muy cerca de restablecer el servicio y te proporcionaremos más detalles en cuanto los tengamos. Para cualquier inquietud o comentario, no dudes en contactarnos a través de support@vozy.co. Saludos, El equipo de Vozy

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
resolved

This incident has been resolved.

monitoring

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada vamos a mantener este evento bajo monitoreo; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

We are continuing to investigate this issue.

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con servicio de reportería en la plataforma WebVozy para algunas cuentas"

Last update
postmortem

Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que estuviste experimentando con apartados de Diálogos, Reportes y Analytics en la WebVozy. ‌ Causa raíz El incidente fue causado por un problema de configuración en el índice de Elastic que almacena las sesiones. Este índice se crea mensualmente y está limitado para traer hasta 10k resultados por consulta en su configuración inicial. El índice del mes de febrero no tenía aplicada la configuración para traer más registros, lo que provocaba que los reportes de más de 10 mil registros quedaran incompletos. ‌ Plan de remediación Para mitigar el incidente, se aplicó la configuración correcta sobre el índice y los reportes se volvieron a generar con normalidad.. ‌ Acciones que están en curso Para prevenir que este incidente se repita en el futuro, se va a automatizar esta configuración para que se aplique automáticamente cada vez que se crea un nuevo índice. ‌ Saludos, Vozy Team

resolved

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la descarga de reportes desde la WebVozy y la cantidad de registros que estaba generando. Si estabas presentando inconvenientes con la descarga de reportes desde la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Support Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de reportería de la WebVozy que está generando inconvenientes en algunas cuentas; la generación de reportes está exportando apenas 10 mil registros. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el procesamiento de llamadas Outbound"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con llamadas Outbound del asistente virtual para algunas de las cuentas Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Seguimos trabajando para que se puedan procesar correctamente la salida de las llamadas. Continuamos teniendo afectación con el servicio de telefonía del Asistente Virtual para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Seguimos trabajando para que se puedan procesar correctamente la salida de las llamadas. Continuamos teniendo afectación con el servicio de telefonía del Asistente Virtual para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas Outbound del asistente virtual para algunas de las cuentas; en algunos casos NO se están procesando la totalidad de las llamadas, en otros casos las llamadas se generan pero cuando son atendidas, inmediatamente se cortan. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades con apartados de Diálogos, Reportes y Analytics en la WebVozy"

Last update
postmortem

Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que estuviste experimentando con apartados de Diálogos, Reportes y Analytics en la WebVozy. ‌ Causa raíz El equipo de Infraestructura identificó que uno de los balanceadores de carga en GCP asociado al certificado SSL para Elasticsearch estaba alertado. A fin de mitigar la ocurrencia de este tipo de novedades se han implementado ya una serie de acciones y se estarán implementando unas optimizaciones a corto plazo. ‌ Plan de remediación Acciones ya implementadas Ajuste de la configuración del Certificate Manager de GCP, incluyendo la asociación del puerto 443, y se relanzó el proceso de verificación. La renovación automática del certificado SSL se completó con éxito, restableciendo la operatividad del sistema a las 08:57 AM UTC -5. ‌ Acciones que están en curso Se realizó una intervención en el código del servicio para corregirlo y garantizar su correcto funcionamiento. 1. Revisión Periódica de Configuración: Se realizará una revisión periódica de la configuración de los servicios involucrados, garantizando la correcta asociación de puertos y la actualización de cualquier cambio en los requisitos de verificación. 2. Pruebas de Renovación Automática: Se implementarán pruebas regulares del proceso de renovación automática de certificados para garantizar su efectividad y corregir posibles problemas de manera proactiva. 3. Documentación Mejorada: Se actualizará la documentación del proceso de renovación automática, incluyendo detalles específicos sobre la configuración de puertos, con el objetivo de evitar problemas similares en el futuro. ‌ Saludos, Vozy Team

resolved

This incident has been resolved.

monitoring

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando al tratar de consultar o visualizar datos de la WebVozy, donde no cargaba ningún registro. Si estabas presentando inconvenientes con la validación de diálogos o reportes en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en algunos componentes de nuestro servicio de asistente virtual. Al tratar de consultar o visualizar datos en los siguientes apartados o secciones de la WebVozy, no carga ningún registro: - Diálogos - Reportes - Analytics El procesamiento de llamadas está operando con normalidad. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "Notificación de servicio: Inconvenientes con la carga de grupo de contactos para clientes WebVozy"

Last update
postmortem

Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que estuviste experimentando con la carga de grupo de contactos para clientes WebVozy. Causa raíz El incidente está relacionado con la incapacidad de cargar grupos de contacto con la extensión xlsx en la plataforma, lo cual provocaba el reinicio del servicio.. A fin de mitigar la ocurrencia de este tipo de novedades se han implementado ya una serie de acciones y se estarán implementando unas optimizaciones a corto plazo. Plan de remediación Acciones ya implementadas Identificación de goroutines \(hilos de ejecución\) que no se cerraban. La solución fue identificar la sección donde las goroutines \(hilos de ejecución\) permanecían abiertas para controlar su correcto cierre. Acciones que están en curso Se realizó una intervención en el código del servicio para corregirlo y garantizar su correcto funcionamiento. Se realizará monitorización de este evento para detección de manera inmediata. Nuevamente, lamentamos mucho la afectación que pudimos haber generado sobre tu negocio, cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌ Saludos, Vozy Team

resolved

Estimado cliente Se ha intervenido y solucionado el inconveniente que se estaba presentando con la validación y carga del grupo de contactos en la plataforma WebVozy. Si estaba presentando inconvenientes con la validación y carga del grupo de contactos en la WebVozy, lo invitamos a probar de nuevo en este momento. Estaremos monitoreando especialmente el correcto funcionamiento de dicha característica. Ofrecemos disculpas por las molestias que esta situación hubiera podido ocasionar. Continuamos trabajando arduamente para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola Nos parece importante que sepas que en este momento se tiene identificada una afectación con la carga manual de grupos de contactos en la WebVozy. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
resolved

This incident has been resolved.

monitoring

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada vamos a mantener este evento bajo monitoreo; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
resolved

This incident has been resolved.

monitoring

Hola, Aún no identificamos la causa raíz del inconveniente, sin embargo, queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada y que está novedad ya se había presentado recientemente, mantenemos este evento bajo monitoreo; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Lamentamos dar este tipo de noticias, pero nos parece importante que sepas que en este momento se está presentando afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada y que está novedad ya se había presentado recientemente, mantenemos este evento bajo monito; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Como habíamos indicado previamente, nos encontrábamos en estado de monitoreo con esta novedad; nos parece importante que sepas que en este momento se está presentando afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Como habíamos indicado previamente, nos encontrábamos en estado de monitoreo con esta novedad; nos parece importante que sepas que en este momento se está presentando afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada y que está novedad ya se había presentado recientemente, mantenemos este evento bajo monito; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en Flujos Automatizados"

Last update
resolved

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con nuestros servicios de Flujos Automatizados Si estabas presentando inconvenientes con la programación y ejecución de llamadas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Teniendo en cuenta que aún no hay aún una causa raíz identificada vamos a mantener este evento bajo monitoreo; lo pasaremos a resuelto, una vez identificada la causa raíz. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de Flujos Automatizados que esta afectando varias cuentas; no se están procesando correctamente: 1. Los flujos automatizados están experimentando dificultades, lo que impide la programación y ejecución de llamadas. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. NOTA IMPORTANTE: Los usuarios que no utilicen estos Flujos Automatizados puede seguir ejecutando lanzamiento de campañas sin afectación. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de Flujos Automatizados que esta afectando varias cuentas; no se están procesando correctamente: 1. Los flujos automatizados están experimentando dificultades, lo que impide la programación y ejecución de llamadas. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con servicio de reportería en la plataforma WebVozy para algunas cuentas"

Last update
resolved

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con los tiempos de publicación de registros de reportería (local y Webhook) Si estabas presentando inconvenientes con la reportería (local o Webhook) en la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Hemos venido haciendo monitoreo del correcto funcionamiento desde las horas de la mañana de hoy, continuaremos haciendo monitoreo del correcto funcionamiento de la aplicación a lo largo del día. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

identified

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con los tiempos de publicación de registros de reportería (local y Webhook) Si estabas presentando inconvenientes con la reportería (local o Webhook) en la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Hemos venido haciendo monitoreo del correcto funcionamiento desde las horas de la mañana de hoy, continuaremos haciendo monitoreo del correcto funcionamiento de la aplicación a lo largo del día. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

identified

Estimados clientes, Seguimos al tanto de la afectación en el servicio de reportería para algunas cuentas/clientes y nos encontramos trabajando activamente en la solución. Nuestro equipo está dedicado a restaurar la funcionalidad completa lo antes posible hasta restablecer la plena funcionalidad de manera rápida y eficiente. Lamentamos cualquier inconveniente que esto este causando Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co

investigating

We are continuing to investigate this issue.

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de reportería (local y Webhook) que está generando inconvenientes en algunas cuentas; la sincronización de la reportería esta tardando más de lo habitual. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
resolved

Hola, Queremos informarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Una vez contemos con el informe RCA, lo estaremos publicando aquí mismo Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Novedades en el procesamiento de llamadas (Inbound/Outbound) para algunas cuentas"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de algunas llamadas. Si estabas presentando inconvenientes con el procesamiento de llamadas o campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Una vez contemos con el informe RCA, lo estaremos publicando aquí mismo Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas; no se están procesando correctamente algunas llamadas (Inbound/Outbound) Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el procesamiento de llamadas (Inbound/Outbound)"

Last update
postmortem

# Informe RCA - Novedades con el procesamiento de llamadas - 31 de agosto ‌ El 31 de agosto, uno de los componentes fundamentales de nuestro servicio, la plataforma VoIP, se vio afectado por un evento que tuvo un impacto negativo en nuestras operaciones, especialmente en el procesamiento de llamadas entrantes y salientes. El diagnóstico reveló que el problema principal fue el llenado completo de los volúmenes de la base de datos del sistema de telefonía, lo que impidió tanto el procesamiento de solicitudes como el almacenamiento de registros CDR \(Call Detail Records\). La causa raíz de este incidente se relacionó con un fallo en el script de aumento automático debido a restricciones de capacidad en el volumen aprovisionado. ## Causa raíz El evento se inició el 31 de agosto a las 16:00 UTC -5, cuando se detectó un incremento repentino en los rechazos de solicitudes API en nuestro sistema de alarmas y monitoreo. Tras realizar una revisión exhaustiva de nuestra infraestructura, identificamos que el factor principal detrás de estos rechazos de solicitudes API fue el llenado completo de los volúmenes de la base de datos del sistema de telefonía. Esto resultó en la imposibilidad de procesar nuevas solicitudes y almacenar registros de CDR en este cluster. Simultáneamente, se llevaron a cabo análisis detallados de las alertas relacionadas, lo que condujo a la validación de un fallo en un script de aumento automático de capacidad en disco. Aunque este script estaba diseñado para permitir el aumento automático del volumen del cluster, no pudo hacerlo debido a limitaciones en la capacidad de aprovisionamiento de almacenamiento en las máquinas virtuales correspondientes. Para corregir la situación en cuestión, se implementaron varias acciones y se estarán implementando algunas más en el corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Se realizó la copia de la información y se transfirió a un nuevo volumen con capacidad suficiente para restablecer el servicio y garantizar su correcta operación. 2. Se actualizó el script de aumento automático para asegurar el aumento del volumen del cluster cuando sea necesario. 3. Se ajustó el sistema de monitoreo para detectar y alertar problemas de llenado en disco con mayor antelación. ### Acciones que están en curso 1. Depuración y mantenimiento continuo del archivo de los CDRs presentes en el cluster de telefonía. 2. Evaluación e implementación de un plan de contingencia específico para el componente de telefonía IP con el fin de garantizar la continuidad del servicio en caso de futuras fallas. ‌ Sabemos que nuestros clientes confían en nuestra solución para el soporte de sus operaciones y nos disculpamos sinceramente por cualquier inconveniente causado por este incidente. Estamos comprometidos con la disminución de fallos y la reducción del impacto en los servicios mediante el fortalecimiento de nuestra infraestructura y procesos, con el objetivo de prevenir eventos similares en el futuro y asegurar un servicio confiable para nuestros clientes. ‌ Atentamente, Vozy Support Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el procesamiento de llamadas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Una vez contemos con el informe RCA, lo estaremos publicando aquí mismo Saludos, Vozy Team

identified

Hola, De acuerdo con los avances que tenemos al momento sobre la intervención de la novedad que venimos presentando, estamos a unas horas de resolverlo; nos encantaría publicar mejores noticias, pero nos parece importante contarte que seguimos trabajando duro para el pronto restablecimiento del servicio. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos trabajando para que se puedan procesar correctamente la totalidad de las llamadas Continuamos teniendo afectación con el servicio de telefonía del Asistente Virtual para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas tipo Inbound (recepción de llamadas), también cuentas tipo Outbound (salida de llamadas). NO se están procesando correctamente las llamadas. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el procesamiento de llamadas Outbound"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con llamadas Outbound del asistente virtual para algunas de las cuentas Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas Outbound del asistente virtual para algunas de las cuentas; en algunos casos NO se están procesando la totalidad de las llamadas, en otros casos las llamadas se generan pero cuando son atendidas, inmediatamente se cortan. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el procesamiento de llamadas Outbound"

Last update
resolved

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas Outbound del asistente virtual para algunas de las cuentas; en algunos casos NO se están procesando la totalidad de las llamadas, en otros casos las llamadas se generan pero cuando son atendidas, inmediatamente se cortan. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con llamadas Outbound del asistente virtual para algunas de las cuentas Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con llamadas Outbound del asistente virtual para algunas de las cuentas; en algunos casos NO se están procesando la totalidad de las llamadas, en otros casos las llamadas se generan pero cuando son atendidas, inmediatamente se cortan. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el algunas funcionalidades dentro de la WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha solucionado el inconveniente que se estaba presentando con nuestro proveedor de infraestructura AWS, mismo que estaba a afectando varios de nuestros servicios. Si estabas presentando inconvenientes con alguno de los siguientes servicios, te invitamos a probar de nuevo en este momento: - Cortes o intermitencias con algunas llamadas - Creación de campañas - Campañas vía API - Visualizar reportes, incluidos consumos y descarga de reportes - Subir y actualizar grupos de exclusión - Campañas de WhatsApp - Flujos automatizados Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Estaremos revisando con nuestro proveedor de infraestructura lo acontecido, así como posibles acciones que nos permitan mitigar un impacto similar en el futuro. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, De acuerdo con la última información suministrada por AWS (https://health.aws.amazon.com/health/status), se han venido recuperando los servicios, sin embargo, producto de la caída estarán en curso durante las siguientes horas algunas sincronizaciones. De nuestro lado en VOZY, estamos haciendo una revisión de los servicios afectados para comprobar el correcto funcionamiento. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con algunas funcionalidades dentro de la WebVozy para la solución de asistente virtual que proveemos para tu negocio. Debido a una falla global en algunos servicios de AWS (nuestro proveedor de infraestructura), se están generando inconvenientes con los siguientes servicios: - Cortes o intermitencias con algunas llamadas - Creación de campañas - Campañas vía API - Visualizar reportes, incluidos consumos y descarga de reportes - Subir y actualizar grupos de exclusión - Campañas de Whatsapp - Flujos automatizados Ahora mismo estamos minitoreando las actualizaciones de AWS y gestionando a través de nuestros proveedores la solución de los servicios afectados en AWS para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes al tratar de ingresar a la WebVozy - Inconvenientes con algunas llamadas"

Last update
postmortem

# Informe RCA Hola, Aunque la afectación fue muy corta, agradecemos su comprensión en relación con esta novedad que estuvo afectando algunas cuentas. Luego de haber dado por superada la situación que estuvimos presentando, nos complace comentarles que las acciones implementadas para corregir la novedad fueron exitosas; así mismo, nos quedaron varios aprendizajes. Lamentamos los inconvenientes que esta situación haya podido ocasionar en tu operación; desde VOZY seguimos trabajando para que, ante cualquier eventualidad, el impacto a nuestros clientes sea el mínimo posible. ## Causa raíz La novedad que estuvimos experimentando recientemente con el acceso a la plataforma y la ejecución de algunas llamadas se debido a un fallo presentado en la configuración de la infraestructura core de la solución. La afectación que que se generó fue debido a un error humano; fue detectada oportunamente gracias a nuestros sistemas de monitoreo. Para corregir la situación en cuestión, se implementaron unas acciones inmediatas y se estarán implementando algunas más, en el corto plazo para mitigar la ocurrencias de una novedad similar. ## Plan de remediación ### Acciones ya implementadas 1. Ajuste en la configuración de la infraestructura. 2. Mejoras en los protocolos de monitoreo de la infraestructura Core de la solución. ### Acciones que están en curso 1. Proporcionar formación adicional al equipo sobre la gestión de las configuraciones sobre la infraestructura. 2. Adopción de proceso de revisión y aprobación para los cambios en las configuraciones de los componentes Core de la infraestructura de la solución. Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el acceso a la plataforma y la ejecución de algunas llamadas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas o acceso a la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Una vez contemos con el informe RCA, lo estaremos publicando aquí mismo Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con el asistente virtual para algunas de las cuentas; al tratar de ingresar a la WebVozy genera un mensaje de error. Adicionalmente, en los casos Inbound, cuando el usuario habla, el asistente genera un mensaje que dice: "Lo siento NO puedo continuar con esta llamada" Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el procesamiento de llamadas (Inbound/Outbound)"

Last update
postmortem

# Informe RCA ## Causa raíz La novedad que estuvimos experimentando recientemente y que se manifestaba con un mensaje del asistente virtual indicando: “Lo siento, no puedo iniciar esta llamada”, tuvo lugar debido a que uno de los servicios clave de la plataforma dejó de ejecutarse correctamente. El impacto fue muy corto, la reacción del equipo fue inmediata. Hay una serie de acciones y optimizaciones que se estarán implementando en el corto plazo. ## Plan de remediación ### Acciones que están en curso 1. Monitoreo constante de las nuevas alarmas instaladas en estos componentes. 2. Ajuste en la configuración del escalado automático de infraestructura 3. Ajuste en el balanceo de carga para distribuir mejor las solicitudes entrantes de manera equitativa Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌ Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con varias cuentas en las que no se estaban procesando correctamente llamadas tipo Inbound y llamadas Outbound. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas o recepción de llamadas, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Una vez completada la investigación de lo acontecido, estaremos publicando informe RCA. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con nuestros servicios de asistente virtual, está afectando varias cuentas tipo Inbound (recepción de llamadas), también cuentas tipo Outbound (salida de llamadas). Al tratar de procesar la llamada se genera un mensaje que dice: "Lo siento, no puedo iniciar esta llamada" Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes al tratar de ingresar a la WebVozy genera un mensaje que dice: Oops - Error interno del servidor""

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con el acceso a la plataforma y la ejecución de algunas llamadas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas o acceso a la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Seguimos trabajando para restablecer el servicio lo más pronto posible. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Lamentamos mucho los inconvenientes que esta situación pueda estar ocasionando para tus operaciones; cuenta con que estamos haciendo todos los esfuerzos necesarios para superar esta situación cuanto antes. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con el asistente virtual para algunas de las cuentas; al tratar de ingresar a la WebVozy genera un mensaje que dice: Oops - Error interno del servidor". Adicionalmente, en los casos Inbound, cuando el usuario habla, el asistente genera un mensaje que dice: "Lo siento NO puedo continuar con esta llamada" Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con el asistente virtual, no están avanzando las llamadas: "Lo siento NO puedo iniciar esta llamada""

Last update
postmortem

# Informe RCA Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que pudiste haber experimentando con el funcionamiento nuestro asistente virtual en la tarde de ayer. ## Causa raíz Una intermitencia muy corta \(15-20 minutos\) que se manifestaba con un mensaje del asistente virtual indicando: “Lo siento no puedo iniciar esta llamada”, la cual era finalizada de manera inmediata; que estuvo afectando a algunos de nuestros clientes, tuvo lugar debido a un que uno de los servicios clave de la plataforma dejó de ejecutarse correctamente. El impacto fue muy corto, debido al monitoreo que se tiene implementado lo que facilitó la reacción proactiva e inmediata del equipo. Se han implementado ya una serie de acciones y se estarán implementando unas optimizaciones a corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Se activaron métricas y alarmas extra de seguimiento al comportamiento del componente afectado. ### Acciones que están en curso 1. Se está haciendo una evaluación para llevar a cabo la activación de un balanceo de tráfico en el componente involucrado. ‌ Nuevamente, lamentamos mucho la afectación que pudimos haber generado sobre tu negocio, cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌ Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la ejecución de algunas llamadas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación con el asistente virtual para algunas de las cuentas; Cuando intenta hablar genera un mensaje que dice: "Lo siento NO puedo iniciar esta llamada" Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con servicio de reportería en la plataforma WebVozy para algunas cuentas"

Last update
postmortem

# Informe RCA Hola, Agradecemos su comprensión en relación con esta novedad que estuvo afectando algunas cuentas más del tiempo habitual en el que solemos intervenir y resolver este tipo de eventos. Una vez superada la situación que se estaba presentando, después de varios días de monitoreo, nos alegra comentar que las intervenciones realizadas, acciones implementadas para solucionar la novedad, fueron exitosas. Entendemos que esta situación haya podido ocasionar inconvenientes en la operación de algunos de nuestros clientes, lamentamos mucho eso; En VOZY no dejamos de trabajar para que, ante cualquier eventualidad, el impacto a nuestros clientes sea el mínimo posible. ## Causa raíz La novedad que estuvimos experimentando recientemente donde se percibían “retrasos” en la aparición de la analítica o envío de registros de reportería vía Webhook para algunas cuentas, tuvo lugar debido a un fallo presentado en una de nuestras funciones Lambda. Este fallo en la función generaba una demora para el procesamiento en las colas de peticiones de la reportería, estos se reflejaban como “retrasos” en la aparición de la analítica o envío de registros de reportería vía Webhook. Para corregir la situación en cuestión, se implementaron varias acciones y se estarán implementando algunas más en el corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Se crearon y activaron nuevos logs en nuestra plataforma para detectar oportunamente posibles retrasos en la cola de peticiones. 2. Se refactorizaron varios de los servicios que soportan la solución. 3. Se generó una nueva cola _lili-logs-v2-sessions-2.fif_ para gestionar más eficientemente el manejo de nuevas peticiones. 4. Se aumentaron recursos para tener un mejor performance de servicio de nuestro proveedor de infraestructura. 5. Se activó alarma del evento de encolamiento en el servicio que estaba generando el retraso. ### Acciones que están en curso 1. Se continuará trabajando en la actualización del nuevo Voicebot para gestionar cada vez de una manera más eficiente, iente las peticiones de servicio. 2. Se realizará una nueva implementación de la cola FIFO SQS, con el objetivo de elevar las invocaciones que procesa la función Lambda. 3. Se continuará trabajando en la evaluación periódica del aumento de recursos en hardware para los servidores que soportan nuestros servicios. Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌Saludos, Vozy Team

resolved

Hola, Nos alegra comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con los tiempos de publicación de registros de reportería (local y Webhook) Si estabas presentando inconvenientes con la reportería (local o Webhook) en la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Hemos venido haciendo monitoreo del correcto funcionamiento desde las horas de la mañana de hoy, continuaremos haciendo monitoreo del correcto funcionamiento de la aplicación a lo largo del día. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Durante los siguientes 3 días hábiles estaremos publicando informe postmorten con las causas del inconveniente y las acciones para evitar que se presente nuevamente. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, En este momento el comportamiento de las colas de reportería es correcto, sin embargo, dada la naturaleza de la novedad que se venía presentando, con los tiempos de publicación de registros de reportería (local y Webhook), nuestro equipo técnico tiene activo un monitoreo especial sobre los servicios de reportería, se sigue evaluando el comportamiento para garantizar la completa estabilización del servicio. Cuenta con que seguimos trabajando duro para la completa estabilización del servicio. En la medida en que vamos detectando novedades con el monitoreo que se está realizando, las estaremos compartiendo aquí. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, De acuerdo con el monitoreo que venimos haciendo durante toda la mañana a la solución que se había aplicado al inconveniente que se estaba presentando con los tiempos de publicación de registros de reportería (local y Webhook), hemos identificado que nuevamente la sincronización de la reportería esta tardando más de lo habitual, por lo que no están cargando los reportes completamente; se está generando inconvenientes en algunas cuentas. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación de manera definitiva lo más pronto posible. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con los tiempos de publicación de registros de reportería (local y Webhook) Si estabas presentando inconvenientes con la reportería (local o Webhook) en la WebVozy, te invitamos a comprobar el correcto funcionamiento en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación a lo largo del día. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Durante los siguientes 3 días estaremos publicando informe postmorten con las causas del inconveniente y las acciones para evitar que se presente nuevamente. Saludos, Vozy Team

identified

Hola, Si bien, se vienen mejorando los tiempos de publicación de registros de reportería, aún nuestro equipo técnico sigue trabajando de la mano con nuestro proveedor de infraestructura en la búsqueda de una solución para la completa normalización del servicio de reportería (local y Webhook). En cuanto tengamos más detalles los estaremos compartiendo con ustedes. Nuestro equipo de especialistas sigue enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Lamentamos mucho que la solución definitiva a esta inconveniente esté tardando más tiempo del esperado; nuestro equipo técnico ha venido trabajando sin descanso, se ha disminuido el impacto de la novedad, sin embargo, aún hay un delay importante en el envío de los datos de la reportería. Seguimos teniendo afectación con el servicio de reportería (local y Webhook) para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos trabajando para que se puedan procesar correctamente la totalidad de los reportes Seguimos teniendo afectación con el servicio de reportería (local y Webhook) para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos,

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación en el servicio de reportería (local y Webhook) que está generando inconvenientes en algunas cuentas; la sincronización de la reportería esta tardando más de lo habitual, por lo que no están cargando los reportes completamente. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con la ejecución de campañas para algunos clientes en WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la ejecución de campañas en algunas cuentas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes con la ejecución de campañas para algunos de nuestros clientes, las mismas están quedando en estado fallido. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes de lentitud en la plataforma WebVozy para algunas cuentas"

Last update
resolved

Hola, Nos complace comentarte que se ha solucionado el inconveniente que se estaba presentando con la lentitud que está generando inconvenientes con las llamadas en algunas cuentas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación de lentitud que está generando inconvenientes con las llamadas en algunas cuentas. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con acceso/login en la plataforma WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha superado el inconveniente que estaban presentando algunos de nuestros usuarios para el ingreso a la plataforma. Lo anterior gracias a la solución del inconveniente que estaba presentando nuestro proveedor de autenticación. Si estabas presentando inconvenientes con el acceso a la aplicación WebVozy, te invitamos a probar de nuevo en este momento. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Se tiene identificado el inconveniente, actualmente nuestro proveedor de autenticación está experimentando una novedad en plataforma que está tratando ahora mismo. Una vez superada la eventualidad que está presentando ahora nuestro proveedor, se reestablecerá el acceso a la WebVozy para todos nuestros usuarios. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunos usuarios a la hora de ingresar o hacer login en la plataforma WebVozy (https://web.vozy.ai/login); está apareciendo un mensaje de error y no permite hacer el ingreso a la plataforma. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con la ejecución de llamadas para algunos clientes en WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la ejecución de llamadas/campañas en algunas cuentas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes con la ejecución, salida de llamadas de la WebVozy para algunos de nuestros clientes. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con algunas llamadas se están quedando mudas en algún punto del diálogo"

Last update
postmortem

# Informe RCA Hola, Luego de haber dado por superada la situación que estuvimos presentando y de varios días de monitoreo, nos complace comentarles que las acciones implementadas para corregir la novedad fueron exitosas; así mismo, nos quedaron varios aprendizajes. Lamentamos profundamente los inconvenientes que esta situación haya podido ocasionar en tu operación; desde VOZY seguimos trabajando para que, ante cualquier eventualidad, el impacto a nuestros clientes sea el mínimo posible. ## Causa raíz La novedad que estuvimos experimentando recientemente donde se percibían “silencios” en algunas partes del diálogo para algunas llamadas, tuvo lugar debido a un fallo presentado en el protocolo de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\). Este fallo de comunicación generaba una intermitencia para algunas llamadas, en las respuestas generadas por el asistente virtual en algunos puntos de la conversación, estos se reflejaban como “silencios” de cara al usuario que estaba interactuando con el asistente virtual. Para corregir la situación en cuestión, se implementaron unas acciones inmediatas y se estarán implementando algunas más en el corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Mejoras en los protocolos de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\) 2. Actualización de librerías asociadas al CORE del protocolo de comunicación. 3. Incremento en la capacidad de hardware que soportan estos servicios 4. Implementación de dos nuevas instancias del componente de IA STT \(Speech to Text\) con balanceadores de carga 5. Adopción de nuevas alarmas de monitoreo que garanticen el correcto funcionamiento de estos componentes. ### Acciones que están en curso 1. Monitoreo constante de las nuevas alarmas instaladas en estos componentes. 2. Evaluación periódica del aumento de recursos en hardware para los servidores que soportan estos componentes. 3. Implementación de las últimas versiones de las librerías CORE del protocolo de comunicación y generación de ventanas de mantenimiento para su actualización. 4. Desarrollo de actualizaciones en los sistemas de integración con los sistemas de AI. Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con algunas llamadas donde Lili se estaba quedando muda en algunos puntos del diálogo. Si estabas presentando inconvenientes, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos trabajando para que se puedan procesar correctamente la totalidad de las llamadas. Continuamos teniendo inconvenientes en algunas llamadas; Lili se está quedando muda en algunos puntos del diálogo. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunas llamadas en algunas de las cuentas; Lili se está quedando muda en algunos puntos del díalogo. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con algunas llamadas se están quedando en silencio en algún punto del diálogo"

Last update
postmortem

# Informe RCA Hola, Luego de haber dado por superada la situación que estuvimos presentando y de varios días de monitoreo, nos complace comentarles que las acciones implementadas para corregir la novedad fueron exitosas; así mismo, nos quedaron varios aprendizajes. Lamentamos profundamente los inconvenientes que esta situación haya podido ocasionar en tu operación; desde VOZY seguimos trabajando para que, ante cualquier eventualidad, el impacto a nuestros clientes sea el mínimo posible. ## Causa raíz La novedad que estuvimos experimentando recientemente donde se percibían “silencios” en algunas partes del diálogo para algunas llamadas, tuvo lugar debido a un fallo presentado en el protocolo de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\). Este fallo de comunicación generaba una intermitencia para algunas llamadas, en las respuestas generadas por el asistente virtual en algunos puntos de la conversación, estos se reflejaban como “silencios” de cara al usuario que estaba interactuando con el asistente virtual. Para corregir la situación en cuestión, se implementaron unas acciones inmediatas y se estarán implementando algunas más en el corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Mejoras en los protocolos de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\) 2. Actualización de librerías asociadas al CORE del protocolo de comunicación. 3. Incremento en la capacidad de hardware que soportan estos servicios 4. Implementación de dos nuevas instancias del componente de IA STT \(Speech to Text\) con balanceadores de carga 5. Adopción de nuevas alarmas de monitoreo que garanticen el correcto funcionamiento de estos componentes. ### Acciones que están en curso 1. Monitoreo constante de las nuevas alarmas instaladas en estos componentes. 2. Evaluación periódica del aumento de recursos en hardware para los servidores que soportan estos componentes. 3. Implementación de las últimas versiones de las librerías CORE del protocolo de comunicación y generación de ventanas de mantenimiento para su actualización. 4. Desarrollo de actualizaciones en los sistemas de integración con los sistemas de AI. Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌Saludos, Vozy Team

resolved

This incident has been resolved.

monitoring

We are continuing to monitor for any further issues.

monitoring

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con las llamadas que se estaba quedando en silencio. Si estabas presentando inconvenientes con llamadas en silencio, te invitamos a probar de nuevo en este momento. Teniendo en cuenta lo ocurrido, vamos a estar haciendo un monitoreo especial durante el resto del día sobre el correcto funcionamiento de la plataforma. Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Nuestro equipo de especialistas estará analizando a profundidad los detalles de las posibles causas que pudieron haber generado la falla, para llevar a cabo la implementación de acciones que mitiguen la ocurrencia futura de un evento similar. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos teniendo afectación en algunas llamadas que se están quedando en silencio. Nuestro equipo de especialistas sigue avanzando en la normalización del servicio para todas las cuentas lo más pronto posible. Lamentamos mucho el tiempo que nos está tomando la estabilización del servicio, así como los inconvenientes que esta situación pueda estar ocasionando para tus operaciones. Estamos haciendo todos los esfuerzos necesarios para superar esta situación. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, seguimos trabajando para restablecer el servicio. Continuamos teniendo afectación con algunas llamadas se están quedando en silencio en algunas cuentas. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Lamentamos mucho los inconvenientes que esta situación pueda estar ocasionando para tus operaciones; cuenta con que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes para algunas llamadas en algunas; Lili se está quedando en silencio en algunos puntos del diálogo. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con algunas llamadas, se está presentando intermitencia, silencios"

Last update
postmortem

# Informe RCA Hola, Luego de haber dado por superada la situación que estuvimos presentando y de varios días de monitoreo, nos complace comentarles que las acciones implementadas para corregir la novedad fueron exitosas; así mismo, nos quedaron varios aprendizajes. Lamentamos profundamente los inconvenientes que esta situación haya podido ocasionar en tu operación; desde VOZY seguimos trabajando para que, ante cualquier eventualidad, el impacto a nuestros clientes sea el mínimo posible. ## Causa raíz La novedad que estuvimos experimentando recientemente donde se percibían “silencios” en algunas partes del diálogo para algunas llamadas, tuvo lugar debido a un fallo presentado en el protocolo de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\). Este fallo de comunicación generaba una intermitencia para algunas llamadas, en las respuestas generadas por el asistente virtual en algunos puntos de la conversación, estos se reflejaban como “silencios” de cara al usuario que estaba interactuando con el asistente virtual. Para corregir la situación en cuestión, se implementaron unas acciones inmediatas y se estarán implementando algunas más en el corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Mejoras en los protocolos de comunicación entre los servicios de telefonía y el componente de IA STT \(Speech to Text\) 2. Actualización de librerías asociadas al CORE del protocolo de comunicación. 3. Incremento en la capacidad de hardware que soportan estos servicios 4. Implementación de dos nuevas instancias del componente de IA STT \(Speech to Text\) con balanceadores de carga 5. Adopción de nuevas alarmas de monitoreo que garanticen el correcto funcionamiento de estos componentes. ### Acciones que están en curso 1. Monitoreo constante de las nuevas alarmas instaladas en estos componentes. 2. Evaluación periódica del aumento de recursos en hardware para los servidores que soportan estos componentes. 3. Implementación de las últimas versiones de las librerías CORE del protocolo de comunicación y generación de ventanas de mantenimiento para su actualización. 4. Desarrollo de actualizaciones en los sistemas de integración con los sistemas de AI. Cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌Saludos, Vozy Team

resolved

This incident has been resolved.

monitoring

Hola, Nos complace comentarte que se ha intervenido y solucionado de raíz el inconveniente que se estaba presentando con algunas llamadas donde Lili se estaba quedando en silencio en algunos puntos del diálogo. Luego de la implementación de varios cambios y ajustes de configuraciones en los sistemas de conexión telefónica, hemos logrado solucionar el problema raíz que estaba generando la incidencia. Si estabas presentando inconvenientes, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Cada vez, estamos presentando menor nivel de afectación para algunas llamadas de unas cuantas puntuales en las que venimos experimentando algunos "silencios" o inconvenientes de dicción. Nuestro equipo de especialistas continua trabajando para estabilizar completamente la plataforma y asegurar el correcto funcionamiento en el 100% de las llamadas. Si estás experimentando el inconveniente previamente mencionado, te invitamos a ponerte en contacto con nosotros en: support@vozy.co Tan pronto tengamos más detalles, los estaremos compartiendo. Cualquier inquietud o comentario relacionado con este tema, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Actualmente las novedades de silencios e intermitencia se continúan presentando para algunas llamadas puntuales en unas cuentas específicas. Nuestros especialistas siguen trabajando para el restablecimiento total del servicio. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

monitoring

Hola, Luego de las acciones que se han venido implementando, cada vez tenemos un mayor nivel de estabilidad, actualmente, sólo para unas cuentas y en algunas llamadas se está presentando aún el inconveniente de los silencios. Teniendo en cuenta que sólo son algunas llamadas, las que se están viendo afectadas nuestro equipo sigue trabajando para reestablecer completamente el servicio. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Finalmente se ha identificado la causa raíz que está ocasionando el inconveniente de llamadas que se quedan en silencio. Teniendo en cuenta lo anterior se vienen ejecutando desde anoche acciones para seguir mejorando progresivamente la estabilidad de la solución y el desempeño de las llamadas. Ahora mismo son mínimas las llamadas que están experimentando los silencios. Ten la plena seguridad de que nuestro equipo de especialistas sigue completamente dedicado a estabilización completa del servicio para todas las cuentas lo más pronto posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, En verdad sentimos mucho el tiempo que nos está tomando la solución, infortunadamente continuamos teniendo afectación con silencios durante la llamada en algunas cuentas. Ten la plena seguridad de que nuestro equipo de especialistas sigue completamente dedicado a la normalización del servicio para todas las cuentas lo más pronto posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos teniendo afectación en algunas llamadas que se están quedando en silencio. Nuestro equipo de especialistas sigue avanzando en la normalización del servicio para todas las cuentas lo más pronto posible. Nos está tomando un poco más del tiempo esperado, pero estamos haciendo todos los esfuerzos necesarios para superar esta situación. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, seguimos trabajando para restablecer el servicio. Seguimos teniendo afectación con algunas llamadas, se sigue presentando intermitencia, silencios Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Lamentamos mucho los inconvenientes que esta situación pueda estar ocasionando para tus operaciones; cuenta con que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, No nos gustan mucho este tipo de comunicados, pero creemos que es importante que sepas que en este momento se tiene identificada una afectación en algunas llamadas que están presentando intermitencia con silencios durante la llamada en algunas cuentas. Nuestro equipo técnico está enfocado en normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con la ejecución de llamadas para algunos clientes en WebVozy"

Last update
resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la ejecución de llamadas/campañas en algunas cuentas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes con la ejecución, salida de llamadas de la WebVozy para algunos de nuestros clientes. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con algunas llamadas salientes y entrante para algunas cuentas en WebVozy"

Last update
postmortem

# Informe RCA Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que estuviste experimentando con el funcionamiento nuestro asistente virtual durante los últimos días. ## Causa raíz Una serie de fallas que estuvimos experimentando recientemente, tuvo lugar debido unos procesos automáticos de mantenimiento que no se ejecutaron adecuadamente sobre nuestra plataforma, adicionalmente a un elevado consumo de computo en nuestra infraestructura, generando un impacto sobre el desempeño en los servicios que gestionan las llamadas. A fin de mitigar la ocurrencia de este tipo de novedades se han implementado ya una serie de acciones y se estarán implementando unas optimizaciones a corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Se llevó a cabo un upgrade al hardware que soporte los cluster 2. Se implementó Linkerd en los cluster que soportan los servicios para identificar oportunamente sobrecargas, fallas, o altos tiempos de latencia. ### Acciones que están en curso 1. Se está haciendo una evaluación para llevar a cabo una optimización sobre los servicios de lanzamiento de llamadas. Nuevamente, lamentamos mucho la afectación que pudimos haber generado sobre tu negocio, cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌ Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha restablecido el servicio de llamadas salientes y entrantes, seguiremos monitoreando el correcto funcionamiento. Si estabas presentando inconvenientes para realizar, recibir llamadas o utilizar alguna de las funcionalidades como lanzamiento de campañas, te invitamos a probar de nuevo en este momento. Continuamos recopilando información que nos permita establecer claramente el origen de la falla. Ofrecemos disculpas por las afectaciones que esta situación hubiera podido ocasionar en tus operaciones. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

identified

Hola, Seguimos trabajando para que se puedan procesar correctamente la totalidad de las llamadas. Seguimos teniendo afectación con algunas llamadas salientes (Outbound) y algunas llamadas entrantes para algunas de las cuentas/clientes. Nuestro equipo de especialistas sigue trabajando enfocado en la normalización del servicio para todas las cuentas lo más pronto posible. Da por hecho que estamos haciendo todos los esfuerzos necesarios para superar esta situación. Una vez tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola Lamentamos mucho lo que está ocurriendo, hemos detectado una posible afectación con algunas llamadas salientes (Outbound) y algunas llamadas entrantes que gestiona nuestro asistente virtual para algunas de las cuentas en el servicio de Asistente Virtual AI. Ahora mismo nuestros especialistas se encuentran investigando la situación, tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

Report: "VOZY - Inconvenientes con la ejecución de llamadas para algunos clientes en WebVozy"

Last update
postmortem

# Informe RCA Hola, Desde VOZY trabajamos todos los días para que los fallos sean mínimos y ante cualquier eventualidad, el impacto a nuestros clientes sea el menor posible. Como tod@s sabemos, la tecnología no es infalible y como plataforma SaaS que somos, no estamos exentos. Teniendo en cuenta lo anterior, queremos ofrecerte disculpas por la intermitencia que estuviste experimentando con el funcionamiento nuestro asistente virtual durante los últimos días. ## Causa raíz Una serie de fallas que estuvimos experimentando recientemente, tuvo lugar debido unos procesos automáticos de mantenimiento que no se ejecutaron adecuadamente sobre nuestra plataforma, adicionalmente a un elevado consumo de computo en nuestra infraestructura, generando un impacto sobre el desempeño en los servicios que gestionan las llamadas. A fin de mitigar la ocurrencia de este tipo de novedades se han implementado ya una serie de acciones y se estarán implementando unas optimizaciones a corto plazo. ## Plan de remediación ### Acciones ya implementadas 1. Se llevó a cabo un upgrade al hardware que soporte los cluster 2. Se implementó Linkerd en los cluster que soportan los servicios para identificar oportunamente sobrecargas, fallas, o altos tiempos de latencia. ### Acciones que están en curso 1. Se está haciendo una evaluación para llevar a cabo una optimización sobre los servicios de lanzamiento de llamadas. Nuevamente, lamentamos mucho la afectación que pudimos haber generado sobre tu negocio, cuenta con todo el compromiso de nuestro equipo para seguir avanzando en la disminución de fallos y la reducción del impacto sobre los servicios ante cualquier imprevisto. ‌ Saludos, Vozy Team

resolved

Hola, Nos complace comentarte que se ha intervenido y solucionado el inconveniente que se estaba presentando con la ejecución de llamadas/campañas en algunas cuentas. Si estabas presentando inconvenientes con la ejecución de llamadas/campañas en la WebVozy, te invitamos a probar de nuevo en este momento. Vamos a estar haciendo monitoreo del correcto funcionamiento de la aplicación Ofrecemos disculpas por las dificultades que esta situación hubiera podido ocasionar en la operación de tu negocio. Cuenta con que seguiremos trabajando duro para mitigar la ocurrencia futura de novedades como la que se estaba presentando. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team

investigating

Hola, Este tipo de comunicaciones no nos alegran el día, pero nos parece importante que sepas que en este momento se tiene identificada una afectación que está generando inconvenientes con la ejecución, salida de llamadas de la WebVozy para algunos de nuestros clientes. Ahora mismo tenemos todos los esfuerzos de nuestro equipo técnico enfocados para normalizar el servicio en todas las cuentas lo antes posible. Tan pronto tengamos más detalles los estaremos compartiendo. Cualquier inquietud o comentario relacionado, lo puedes enviar a support@vozy.co Saludos, Vozy Team