DataCandy - FIT - Our monitoring system detected an issue – Incident details

FIT - Our monitoring system detected an issue

Resolved
Major outage
Started about 2 months agoLasted about 11 hours

Affected

Gift & Loyalty (DataCandy)

Operational from 3:52 AM to 3:52 AM, Major outage from 3:52 AM to 4:05 AM, Operational from 4:05 AM to 2:26 PM

Transactional API Services

Operational from 3:52 AM to 3:52 AM, Major outage from 3:52 AM to 4:05 AM, Operational from 4:05 AM to 2:26 PM

Updates
  • Resolved
    Resolved

    Root cause update

    To our clients, outage was caused by lost internet connectivity at our main data centre and transactions were routed to our DR.

    À nos clients, la panne a été causée par une perte de connectivité Internet dans notre centre de données principal et les transactions ont été acheminées vers notre centre de données de secours (DR).

  • Postmortem
    Postmortem

    Dear Merchant,
    We are writing to inform you that our systems experienced a complete outage between 11:43 PM and 11:54 PM EST, which impacted all transactions and related services. Our technical team has resolved the issue and normal operations have been restored.

    Details of the Outage:

    • Nature of Issue: Complete system and transaction outage.

    • Impact: All systems and transaction services were temporarily unavailable.

    • Outage Timeframe: From 11:43 PM to 11:54 PM EST.

    • Resolution: The issue has been resolved, and systems are now fully operational.

    Important Information:
    Any transactions submitted during the outage period will not be processed and will need to be resubmitted. If you have files that need to be reprocessed, please send them to support@datacandy.com for assistance.
    We apologize for any inconvenience caused by this disruption. Your prompt attention to resubmitting affected transactions will help us ensure smooth operations moving forward.
    If you have any immediate concerns or need further assistance, please do not hesitate to reach out to our support team at support@datacandy.com.
    Thank you for your understanding and patience.

    Sincerely,

    DataCandy Support

    Cher marchand,

    Nous vous informons que nos systèmes ont connu une panne complète entre 11h43 et 11h54 (heure de l’Est), qui a affecté toutes les transactions et tous les services connexes. Notre équipe technique a résolu le problème et les opérations normales ont été rétablies :

    Nature du problème : Interruption complète du système et des transactions.

    Impact : Tous les systèmes et services de transaction ont été temporairement indisponibles.

    Durée de la panne : De 23h43 à 23h54 (heure de l’Est).

    Résolution : Le problème a été résolu et les systèmes sont désormais pleinement opérationnels.

    Information importante : : Toutes les transactions soumises pendant la
    période d’interruption ne seront pas traitées et devront être soumises à
    nouveau. Si vous avez des fichiers qui doivent être traités à nouveau, veuillez les envoyer à support@datacandy.com pour obtenir de l’aide.Nous nous excusons pour les désagréments causés par cette interruption. Si vous avez des préoccupations immédiates ou si vous avez besoin d’une assistance supplémentaire, n’hésitez pas à
    contacter notre équipe d’assistance à l’adresse support@datacandy.com.Thank. Nous vous remercions de votre compréhension et de votre patience.
    Sincèrement,

  • Resolved
    Resolved

    We just resolved the issue!

  • Investigating
    Investigating

    We are currently investigating this incident.