Ιστορικό διακοπών του Clearlyip

1. 2 Σεπτεμβρίου 2026 στις 3:15 μ.μ. UTCinvestigating

   Ερευνούμε ένα θέμα όπου οι εξερχόμενες κλήσεις σε ένα μικρό ποσοστό των κέντρων επιτοκίων αποτυγχάνουν για τους πελάτες. Σημειώστε ότι αυτό επηρεάζει μόνο τους πελάτες που συνδέονται απευθείας μέσω της πλατφόρμας XCast.

2. 2 Σεπτεμβρίου 2026 στις 3:17 μ.μ. UTCidentified

   Το θέμα έχει εντοπιστεί και υλοποιείται μια λύση.

3. 2 Σεπτεμβρίου 2026 στις 5:45 μ.μ. UTCmonitoring

   Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.

4. 3 Σεπτεμβρίου 2026 στις 11:54 π.μ. UTCresolved

   Το περιστατικό λύθηκε.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 25 Αυγούστου 2026 στις 8:51 μ.μ. UTCinvestigating

   Βλέπουμε μια αύξηση των καθυστερήσεων παράδοσης ταχυδρομείου για μηνύματα που προέρχονται από τις πλατφόρμες μας προς τις υπηρεσίες ηλεκτρονικού ταχυδρομείου της Microsoft.

2. 25 Αυγούστου 2026 στις 8:55 μ.μ. UTCmonitoring

   Η επεξεργασία σε αναμονή συνεχίζεται με επιτυχία, αν και αργά καθώς η Microsoft δέχεται το ταχυδρομείο από την πλατφόρμα(ες). Περιμένουμε να δούμε τα ποσοστά αποδοχής να αυξάνονται και με την πάροδο του χρόνου. Το μηχανοστάσιο συνεχίζει να παρακολουθεί τη δραστηριότητα και τις βελτιώσεις παράδοσης.

3. 26 Αυγούστου 2026 στις 2:24 π.μ. UTCmonitoring

   Συνεχίζουμε να παρακολουθούμε για βελτιωμένες τιμές παράδοσης αλληλογραφίας στις υπηρεσίες ηλεκτρονικού ταχυδρομείου της Microsoft.

4. 26 Αυγούστου 2026 στις 2:07 μ.μ. UTCmonitoring

   Ενώ εξακολουθούμε να βλέπουμε καθυστερήσεις στην παράδοση ταχυδρομείου στις υπηρεσίες ηλεκτρονικού ταχυδρομείου της Microsoft, τα ποσοστά αποδοχής συνεχώς βελτιώνονται και το τρέχον backlog έχει σχεδόν πλήρως επεξεργαστεί. Συνεχίζουμε να παρακολουθούμε για την απόδοση και θα το κλείσουμε αυτό μόλις είμαστε ικανοποιημένοι με τις σταθερές τιμές παράδοσης.

5. 27 Αυγούστου 2026 στις 2:18 μ.μ. UTCresolved

   Η αλληλογραφία συνεχίζει να ρέει κανονικά και με αναμενόμενα ποσοστά παραδοσιμότητας χωρίς καθυστερήσεις.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 21 Αυγούστου 2026 στις 1:46 μ.μ. UTCinvestigating

   Ερευνούμε διακοπτόμενα θέματα ποιότητας κλήσεων με εισερχόμενες κλήσεις με τους ανάντη μεταφορείς μας

2. 21 Αυγούστου 2026 στις 3:07 μ.μ. UTCresolved

   Ανάντη μεταφορέας έχει επιλύσει τα ζητήματα στις 9:13πμ περίπου CST

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 22 Ιουνίου 2026 στις 4:59 μ.μ. UTCinvestigating

   Αυτή τη στιγμή διερευνούμε θέματα με τους αμερικανούς διακομιστές μας, που προκαλούν προβλήματα ολοκλήρωσης και προβλήματα ήχου.

2. 22 Ιουνίου 2026 στις 6:59 μ.μ. UTCmonitoring

   Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.

3. 22 Ιουνίου 2026 στις 7:38 μ.μ. UTCresolved

   Το περιστατικό λύθηκε.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 15 Ιουνίου 2026 στις 12:53 μ.μ. UTCidentified

   Αυτή τη στιγμή ερευνούμε ένα θέμα με τα CA-Ανατολικά μπαούλα μας και τα έχουμε απενεργοποιήσει αυτή τη στιγμή.

2. 15 Ιουνίου 2026 στις 4:32 μ.μ. UTCmonitoring

   Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.

3. 15 Ιουνίου 2026 στις 5:48 μ.μ. UTCresolved

   Το περιστατικό λύθηκε.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 9 Ιουνίου 2026 στις 7:22 μ.μ. UTCinvestigating

   IS NOC is reviewing reports of connectivity issues for some Pulsar360 hosted PBXs in the Toronto region.

2. 9 Ιουνίου 2026 στις 8:44 μ.μ. UTCinvestigating

   Work continues to isolate and find the root cause for connectivity interruptions in the Toronto region.

3. 9 Ιουνίου 2026 στις 9:04 μ.μ. UTCmonitoring

   IS NOC has identified and resolved the issue(s) responsible for connectivity interruption. We are seeing alarms clearing at this time and will continue to monitor.

4. 10 Ιουνίου 2026 στις 1:16 π.μ. UTCresolved

   All services remain stable and operational, free from the previously experienced issues.

1. 9 Ιουνίου 2026 στις 2:27 μ.μ. UTCinvestigating

   We are currently investigating an issue which is affecting chat/sms on Clearly Cloud USA - w

2. 9 Ιουνίου 2026 στις 2:50 μ.μ. UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 9 Ιουνίου 2026 στις 5:24 μ.μ. UTCresolved

   This incident has been resolved.

1. 1 Ιουνίου 2026 στις 1:54 μ.μ. UTCmonitoring

   We are seeing some isolated connectivity issues in our US-Central region facilities. They seem to be transient in nature and quick to assert/resolve. We are working with our upstream provider(s) and monitoring closely.

2. 1 Ιουνίου 2026 στις 8:13 μ.μ. UTCresolved

   This incident has been resolved.

1. 31 Μαΐου 2026 στις 6:03 μ.μ. UTCinvestigating

   Our US-Central datacenter is experiencing routing issues at this time. Intermittent problems are resulting from this.

2. 31 Μαΐου 2026 στις 6:22 μ.μ. UTCidentified

   Our upstream connectivity provider(s) are experiencing degraded network performance which is affecting ClearlyIP/14IP services. They are working diligently to resolve this issue.

3. 31 Μαΐου 2026 στις 7:48 μ.μ. UTCidentified

   Work continues by our upstream provider(s) to isolate and resolve the root connectivity issues.

4. 31 Μαΐου 2026 στις 9:31 μ.μ. UTCidentified

   Work continues by our upstream provider(s) to isolate and resolve an apparent DDoS attack affecting multiple customers at the US-Central facilities.

5. 1 Ιουνίου 2026 στις 12:40 π.μ. UTCmonitoring

   We are seeing recovery but are continuing to monitor the situation while our upstream provider(s) work towards a full resolution.

6. 1 Ιουνίου 2026 στις 1:06 π.μ. UTCidentified

   We are seeing degraded connectivity once again, affecting services in US-Central. We are awaiting updates and progress reports from our upstream provider(s).

7. 1 Ιουνίου 2026 στις 1:57 π.μ. UTCmonitoring

   We are once again seeing recovery and are continuing to monitor the situation. Our upstream provider(s) have confirmed positive progress towards resolution of this ongoing DDoS event.

8. 1 Ιουνίου 2026 στις 3:35 π.μ. UTCmonitoring

   Latest updates from our upstream provider(s) indicate a full restoration of all services and connectivity. We are confirming the same and continue to see clean network operation at this time. We will continue to monitor.

9. 1 Ιουνίου 2026 στις 11:54 π.μ. UTCresolved

   Connectivity has remained stable.

10. 10 Ιουνίου 2026 στις 8:52 μ.μ. UTCpostmortem

    **Summary / Impact** On the afternoon of May 31st, 2026, 14IP's network operations group began to observe connectivity issues with resources located at its US-Central \(MKE\) data center.  The team began working with their counterparts at the data center facility to understand the nature of the problem.  It was quickly determined that a distributed denial of service \(DDoS\) attack targeted upstream was affecting all tenants of the data center. Significant malicious traffic \(exceeding 450gbps\) was measured upstream during the peak of the attack which overwhelmed equipment as well as primary, secondary, and tertiary links.  This traffic was mitigated through coordinated, escalating filtering with upstream transit providers, as well as internal engineering to stabilize routing. During the incident, connectivity to systems and services primarily located in this data center were impacted significantly for periods of time between approximately 2 PM ET and 9:30 PM ET.  This included Clearly Cloud, ComXchange hosted, Xivea, Business Connect, EPlatform, and several other systems.  \(US-East trunking services continued to operate during the US-Central incident.\) **Follow-Up** Several facility-level network and system improvements have been implemented following the incident which should reduce the risk of future occurrences.  This includes the deployment of additional DDoS scrubbing capacity, improved granularity for detecting attacks, additional fiber capacity upstream, as well as core network enhancements. 14IP plans additional improvements to its systems and operations to improve platform resilience and flexibility when responding to future incidents.

1. 28 Μαΐου 2026 στις 5:16 μ.μ. UTCidentified

   An upstream Canadian carrier is currently having issues. This may affect incoming calls routed through that carrier, but is limited to ONLY Canadian DIDs through that carrier. Outbound should not be affected. At this time, we have no information from the carrier on ETA.

2. 28 Μαΐου 2026 στις 6:00 μ.μ. UTCmonitoring

   The upstream carrier is now routing properly. We are monitoring and waiting on more information related to the outage.

3. 28 Μαΐου 2026 στις 6:50 μ.μ. UTCresolved

   This incident has been resolved.

1. 27 Απριλίου 2026 στις 6:26 μ.μ. UTCinvestigating

   The team is investigating Call Panel on Clearly Cloud USA displaying a bad certificate.

2. 27 Απριλίου 2026 στις 6:51 μ.μ. UTCresolved

   This incident has been resolved.

1. 3 Απριλίου 2026 στις 8:32 μ.μ. UTCinvestigating

   We are seeing issues with provisioning and registration of some Grandstream devices. The team is actively reviewing the situation

2. 5 Απριλίου 2026 στις 12:01 π.μ. UTCmonitoring

   We have implemented a fix. If you are still having issues with your devices, please contact us by emailing [email protected] and we can assist you further.

3. 8 Μαΐου 2026 στις 7:22 μ.μ. UTCresolved

   This incident has been resolved.

1. 19 Μαρτίου 2026 στις 2:55 μ.μ. UTCidentified

   The team has identified the issue and is currently working on a fix.

2. 19 Μαρτίου 2026 στις 3:38 μ.μ. UTCresolved

   This incident has been resolved.

1. 13 Μαρτίου 2026 στις 11:52 μ.μ. UTCinvestigating

   We are currently investigating this issue.

2. 14 Μαρτίου 2026 στις 12:41 π.μ. UTCidentified

   The issue has been identified and a fix is being implemented.

3. 14 Μαρτίου 2026 στις 1:19 π.μ. UTCresolved

   This incident has been resolved.

1. 19 Φεβρουαρίου 2026 στις 2:54 μ.μ. UTCinvestigating

   We are currently investigating an issue with Call Panel on Clearly Cloud Canada.

2. 19 Φεβρουαρίου 2026 στις 4:03 μ.μ. UTCinvestigating

   We are continuing to investigate this issue.

3. 19 Φεβρουαρίου 2026 στις 4:04 μ.μ. UTCmonitoring

   A fix is being implemented. If you still are experiencing issues, please open a support ticket and the team will assist.

4. 19 Φεβρουαρίου 2026 στις 5:03 μ.μ. UTCresolved

   This incident has been resolved.

1. 15 Δεκεμβρίου 2025 στις 6:41 μ.μ. UTCinvestigating

   The team is currently investigating an issue with Clearly Cloud USA

2. 15 Δεκεμβρίου 2025 στις 6:42 μ.μ. UTCidentified

   The team has identified the issue and should be resolved quickly.

3. 15 Δεκεμβρίου 2025 στις 6:43 μ.μ. UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 15 Δεκεμβρίου 2025 στις 7:00 μ.μ. UTCresolved

   This incident has been resolved.

1. 4 Δεκεμβρίου 2025 στις 6:57 μ.μ. UTCinvestigating

   We are currently investigating this issue.

2. 4 Δεκεμβρίου 2025 στις 7:03 μ.μ. UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 4 Δεκεμβρίου 2025 στις 7:24 μ.μ. UTCresolved

   This incident has been resolved.

1. 2 Δεκεμβρίου 2025 στις 4:45 μ.μ. UTCinvestigating

   We are currently investigating inbound and outbound calling issues with Clearly Cloud US platform.

2. 2 Δεκεμβρίου 2025 στις 5:09 μ.μ. UTCidentified

   The issue has been identified and a fix is being implemented.

3. 2 Δεκεμβρίου 2025 στις 5:30 μ.μ. UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 2 Δεκεμβρίου 2025 στις 7:46 μ.μ. UTCresolved

   This incident has been resolved.

1. 11 Νοεμβρίου 2025 στις 7:04 μ.μ. UTCresolved

   SIP2 and Proxy55 are not responding. Calls routing to failover trunks

1. 3 Νοεμβρίου 2025 στις 4:49 μ.μ. UTCinvestigating

   We are currently investigating this issue.

2. 3 Νοεμβρίου 2025 στις 4:57 μ.μ. UTCidentified

   The issue has been identified and a fix is being implemented.

3. 3 Νοεμβρίου 2025 στις 5:29 μ.μ. UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 3 Νοεμβρίου 2025 στις 6:10 μ.μ. UTCresolved

   This incident has been resolved.

5. 4 Νοεμβρίου 2025 στις 5:13 μ.μ. UTCpostmortem

   At approximately 11:27AM ET on November 3, ClearlyIP's NOC team began to receive system alerts indicating excess session activity within its US-East trunking systems. The team's investigation identified unauthenticated INVITE messages being received from unknown IPs as the source of the excess traffic, as well as a customer generating unexpected levels of outbound calls. Steps were taken to mitigate the traffic's impact, including restarting affected services to clear sessions and restore normal status. By approximately 11:55AM ET, the US-East situation was stabilized and session traffic had returned to normal levels. The team has identified a number of improvements and traffic management strategies to help avoid similar incidents which will be implemented in future maintenance events.