Niewielka liczba instancji Wolnego Szczebla doświadcza problemów z aktualizacją
Początek 3 września 2026 16:43 UTC · 22h 53m
Pending
Dotknięte komponenty
AuraDB Free (*.databases.neo4j.io)
investigating
Obecnie badamy tę kwestię.
identified
Zidentyfikowano tę kwestię, nadal dostępne są instancje oraz podjęto kroki w celu rozstrzygnięcia kwestii, które mają wpływ na obecnie dokonywany przegląd.
resolved
Wszystkie instancje są dostępne, ręczne kroki w celu odblokowania pozostałych małych instancji zostały podjęte w celu rozwiązania.
Nasz zespół zidentyfikował problem z zbieraniem danych dla aury. To wpłynie na widoczność metryczną i przekazywanie.
Obecnie badamy tę sprawę.
investigating
Kontynuujemy śledztwo w sprawie pomiaru aury.
resolved
Od ostatniej aktualizacji, śledztwo ruszyło dalej. Problem został zidentyfikowany, a my monitorowaliśmy służbę, gdy wyzdrowiała z degradacji. Potwierdzamy, że sprawa została rozwiązana.
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Free (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCP
investigating
We have identified an issue currently that could result in unexpected query failures when using the trim() Cypher function. Investigations into the cause are in progress.
identified
We have found the issue and are working on a fix. A small percentatge of queries using trim may still err.
VDC customers with databases set to highest are not impacted at all unless they pause and start their instances.
identified
We are testing the fix for the trim() Cypher function issue. We will update before we begin our deployment into the Aura environment.
identified
We are actively validating the fix for the trim() Cypher function. Further updates will be provided before we begin deploying to Aura instances
identified
We continue to validate the fix for the trim() Cypher function.
Further updates will be provided before we begin deploying it to Aura instances.
identified
The fix for the trim() Cypher function is undergoing testing and validation before deployment.
Further updates will be provided before we begin deploying it to Aura instances.
identified
Development has completed on the hot-fix for this issue, and we are finalizing the rollout plan for Aura.
identified
We are actively working on addressing the issue. The fix for the trim() Cypher function is undergoing testing and validation currently before deployment. Further updates will be provided before we begin deploying it to Aura instances.
identified
The fix to the trim() Cypher function has passed testing and validation and is now being deployed.
monitoring
The fix to resolve the issue has now completed deployment to the Aura service and we are monitoring the situation.
resolved
We have monitored the fix and found the service to be stable. This incident is now considered resolved.
Wydanie wpływu na operacje na przykładzie aury
Początek 23 lipca 2026 10:52 UTC · 1d 5h
OutagePoważny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Free (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCPAura API (api.neo4j.io)
investigating
Obecnie prowadzimy dochodzenie w tej sprawie.
investigating
Współpracujemy z zespołami inżynieryjnymi i czynimy postępy w śledztwach.
investigating
Współpracujemy z zespołami inżynieryjnymi i kontynuujemy postępy w śledztwach.
identified
Zidentyfikowaliśmy przyczynę obecnego problemu i aktywnie pracujemy nad jego naprawą.
identified
Wprowadzamy pierwszą część fix i nadal aktywnie pracujemy nad opracowaniem pełnego rozwiązania. Oczekujemy ETA za 1 godzinę.
identified
Zidentyfikowaliśmy podzbiór przypadków, które miały wpływ i w tym momencie nadal wdrażamy rozwiązanie.
identified
Uruchomiliśmy konfigurację i pracujemy teraz nad rozwiązaniem podzbioru przypadków, które miały wpływ.
identified
Po uruchomieniu konfiguracji, kontynuujemy rozwiązywanie podzbioru instancji, które nadal mają wpływ.
identified
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ.
identified
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ.
monitoring
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ.
monitoring
AuraDB Wirtualna dedykowana chmura i AuraDB Biznes Critical powinny być teraz naprawione. Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ na AuraDB Professional and Free.
monitoring
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ na AuraDB Professional and Free.
monitoring
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ na AuraDB Professional and Free.
monitoring
Nadal rozwiązujemy podzbiór spraw, które nadal mają wpływ na AuraDB Professional and Free
monitoring
Nadal naprawiamy podzbiór przypadków, które nadal mają wpływ na AuraDB Professional and Free
monitoring
Nadal naprawiamy mały podzbiór przypadków, które nadal mają wpływ na poziomy zawodowe i wolne.
monitoring
Zajęliśmy się tą kwestią we wszystkich instancjach AuraDB Professional. Aura Free może mieć wpływ. Będziemy nadal monitorować i naprawiać pozostałe bazy danych.
monitoring
Nadal naprawiamy mały podzbiór wolnych instancji, które nadal mają wpływ.
monitoring
Nadal uważnie monitorujemy sytuację w odniesieniu do dalszych kwestii.
monitoring
Nadal monitorujemy wszelkie dalsze problemy.
monitoring
Wszystkie zidentyfikowane przypadki zostały naprawione. Skontaktuj się z obsługą klienta w razie dalszych problemów.
resolved
Wszystkie poprawki zostały wprowadzone i problem jest teraz oznaczony jako rozwiązany.
postmortem
- Co się stało?
W czwartek, 23 lipca 2026 10: 33 UTC wprowadzono zmianę konfiguracji do Aury, która nieumyślnie zmieniła sposób obliczania przydziałów pamięci dla instancji baz danych. W rezultacie podzbiór instancji otrzymał niewystarczającą pamięć, co spowodowało, że niektóre instancje bazy danych stały się niedostępne lub nie mogły zakończyć aktualizacji.
Dostosowana alokacja pamięci doprowadziła do braku pamięci, powodując wielokrotne ponowne uruchomienie instancji baz danych z powodu niewystarczających zasobów pamięci lub utknięcie w aktualizacji. Kwestia ta dotyczyła instancji wielu dostawców chmur i wielu poziomów produktu.
Po zidentyfikowaniu problemu natychmiast cofnęliśmy zmianę konfiguracji, uniemożliwiając dodatkowe przypadki otrzymywania nieprawidłowej konfiguracji. Skorygowana konfiguracja została wprowadzona do produkcji w czwartek, 23 lipca 2026 11: 56 UTC. Jednakże przypadki w bazie danych, które otrzymały już nieprawidłową konfigurację, wymagały indywidualnych działań naprawczych, zanim mogły powrócić do normalnej eksploatacji.
Do czwartku 23 lipca 2026 17: 59 UTC, wszystkie znane instancje bazy danych wpływające na klienta zostały odzyskane. Monitoring trwał przez kolejny dzień, a incydent został w pełni rozwiązany w piątek, 24 lipca 2026 16: 30 UTC.
* * * How the service was affected * *
Głównym skutkiem dla klientów było to, że kilka przypadków w bazie danych AuraDB stało się niedostępne lub weszło w stan degradacji. Dotknięte przypadki nie były w stanie zakończyć rutynowych aktualizacji oprogramowania, a w niektórych przypadkach, wielokrotnie wznowione, ponieważ niewystarczająca pamięć została przydzielona.
* * * Dostępność usługi: * * Wpływ klienta zróżnicowany według poziomu usług. AuraDB Profesjonalne instancje, które nie zapewniają wysokiej dostępności, doświadczyły największego poziomu zakłóceń usług, z podzbiór staje się niedostępny i nie może przetwarzać czytanie lub pisanie. W przypadku dotkniętych przez AuraDB przypadków krytycznych dla działalności gospodarczej i wirtualnej, dedykowanej chmurze\ (VDC\), wpływ był na ogół ograniczony do tymczasowej utraty tolerancji błędów podczas utrzymywania dostępności usług. W mniejszej liczbie przypadków, instancje Business Critical i VDC stały się również niedostępne.
* * * Stuck updates * *: Dodatkowe przypadki pozostały dostępne, ale utknęły w stanie "updating", który zablokował operacje inicjowane przez klienta, takie jak rezyzecje lub zmiany konfiguracji.
* * * Zakres Cross- platform * *: Wpływ obejmował wszystkich trzech wspieranych dostawców chmur i wiele regionów, dotykając klientów na całym świecie.
Podniesiono sprawy wsparcia klienta, a nasz zespół testował i ręcznie odzyskiwał poszkodowane przypadki w kolejności priorytetowej. Większość instancji AuraDB nadal funkcjonowała normalnie. Wpływ na klienta został w pełni złagodzony dzięki przywróceniu konfiguracji i ukierunkowanemu ręcznemu odzyskaniu każdej dotkniętej instancji.
* * * What we are doing now * *
Przeprowadziliśmy dokładną analizę tego incydentu i zidentyfikowaliśmy następujące działania:
* * * Zapobieganie * *
* * * Poprawa walidacji rozmieszczenia: * * Wzmacniamy proces zatwierdzania wydania, aby lepiej zidentyfikować zmiany konfiguracji.
* * * Odłączenie od produkcji części * *: Omawiamy ulepszenia w sekwencjonowaniu rozmieszczenia komponentów w celu zmniejszenia ryzyka niezamierzonych zmian w wydaniach.
* * * Progressive rollout strategy * *: Przeglądamy proces wprowadzania na rynek dla składników, które zostały dotknięte, aby dostosować je do kontroli wprowadzania na rynek stosowanych do innych składników krytycznych.
* * * Detection * *
* * * Better alerting * * Wzmacniamy nasze monitorowanie, aby wykryć nieprawidłowy wzrost liczby awarii\ (takich jak utrata tolerancji błędów lub dostępność\) szybciej i niezawodniej.
* * * Litigation * *
* * * Bezpieczniejsze wdrażanie konfiguracji: * * Poprawiamy sposób wprowadzania zmian w konfiguracji produkcji, aby można je było wyłączyć lub szybciej zwinąć bez konieczności szerszego udostępniania oprogramowania.
* * * Szybsze ręczne oprzyrządowanie do odzyskiwania * *: Poprawiamy nasze oprzyrządowanie do odzyskiwania, aby skrócić czas potrzebny do identyfikacji i ręcznego odzyskiwania poszkodowanych przypadków.
Zdajemy sobie sprawę z zakłóceń wywołanych przez ten incydent i przepraszamy za wpływ na klientów. Zakończyliśmy natychmiastowe działania naprawcze, a opisane powyżej długoterminowe ulepszenia są już w toku, aby zmniejszyć prawdopodobieństwo i wpływ podobnych incydentów w przyszłości.
Obecnie badamy problem dotykający konsoli Aura, gdzie niektórzy klienci mogą nie być w stanie zobaczyć swoich instancji.
Ta kwestia jest spowodowana porażką w usłudze trzeciej partii, od której zależy Aura. Dotknięte przypadki nadal działają normalnie, a łączność z bazą danych nie ma wpływu.
Nasz zespół aktywnie bada sprawę.
investigating
Nadal badamy tę kwestię.
monitoring
Usługa trzeciej partii, od której zależy Aura, przywróciła normalne operacje i systemy Neo4j Aura odzyskały moc.
Nasz zespół aktywnie monitoruje sprawę, aby potwierdzić, że Aura Console działa zgodnie z oczekiwaniami.
resolved
Potwierdzono, że usługi są operacyjne i nie oczekuje się dalszych przerw.
postmortem
# Co się stało
Aura Console i inne komponenty Aura doświadczyły zakłóceń na 2026- 07- 10 o 16: 14 UTC, powodując awarie i pętle. W związku z tym segment klientów miał problemy z widocznością w swoich przypadkach. Został on spowodowany brakiem dostępu do zewnętrznej usługi trzeciej partii zintegrowanej z Aurą. Zasadnicze znaczenie ma to, że łączność z bazą danych pozostaje niezakłócona, a dotknięte nią przypadki kontynuowały swoje normalne działania. Usługa LaunchDarkly została przywrócona, aby rozwiązać problem
# # How the service was affected
Wiele komponentów Aura, w tym konsola Aura, doświadczyło zakłóceń. Użytkownicy napotkali błędy HTTP 500 na stronach i operacjach związanych z bazą danych, chociaż nadal można było uzyskać dostęp do organizacji i projektów. Bezpośrednie połączenia z konkretnymi instancjami baz danych nie zostały całkowicie naruszone
Płaszczyzna kontrolna stała się niedostępna, co oznaczało, że użytkownicy nie mogli tworzyć, usuwać, zmieniać rozmiaru ani regulować ustawień dla instancji za pośrednictwem API lub konsoli Aura. Istniejące przypadki nadal jednak funkcjonowały. Problem ten został spowodowany brakiem dostępu do LaunchDarkly, a nasze służby nie poradziły sobie z tą wadą zależności z gracją podczas startu. Wszystkie uszkodzone systemy wróciły do normalnego działania do 2026- 07- 10 o 17: 07 UTC
Co teraz robimy?
Zespół Neo4j Engineering szybko rozpoznał przyczynę i przywrócony usługi. Oceniając ten incydent, zidentyfikowaliśmy kluczowe obszary, aby przyspieszyć przyszłe rezolucje i zmniejszyć ryzyko ponownego wystąpienia:
* Analizowane kluczowe wskaźniki incydentów, koncentrujące się na czasie trwania alarmowania o reakcji w celu określenia możliwości przyspieszenia skuteczności reakcji
* Przeprowadził kompleksową retrospektywną prezentację udanych wyników, w tym szybkiej analizy przyczyn root- poprzez przezroczyste wycinki, bezproblemowe dopasowanie za pomocą narzędzia zarządzania incydentami, a także odporną, pełną gracji degradację wielu komponentów, które utrzymały łączność z płaszczyzną danych nienaruszone
* Aktywnie rozwijając bardziej gratiful fallback domyślnie dla flag funkcji w celu zabezpieczenia podstawowych operacji w czasie przestojów sprzedawcy
* Wzmocnienie odporności architektonicznej poprzez zintegrowanie zaawansowanego planowania, praktyk inżynieryjnych w zakresie chaosu oraz testowania błędów na poziomie produkcyjnym, aby prewencyjnie odkryć i złagodzić potencjalne ścieżki awarii
* Dostosowane ograniczenia logiczne w buforowaniu flag operatora, podkreślając konieczność przechowywania przez operatorów ocenionych flag lokalnie w celu zachowania ciągłości działania w przypadku awarii zewnętrznych zależności.
Emisja AuraDB: Błędy podczas uruchamiania CREATE VECTOR INDEX
Początek 30 czerwca 2026 14:45 UTC · 2h 59m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCP
identified
Uruchomienie CREATE VECTOR INDEX nie powiodło się z błędem 51N31
błąd: konfiguracja systemu lub wyjątek operacyjny - nie jest obsługiwany. Tworzenie indeksu wektorowego z podanymi ustawieniami nie jest obsługiwane w V2026 _ 02. Wymaganą wersją do pracy jest V2026 _ 06. Proszę uaktualnić DBMS..
Dotyczy to jedynie nowego indeksu, istniejący VECTOR INDEX pozostaje bez zmian.
Każdy indeks wektorowy utworzony przed 2026- 06- 30 o 09: 00 nadal działa normalnie.
identified
Rozpoczynamy prace nad ustaleniem rozwiązania tej kwestii i wkrótce przedstawimy aktualizację postępów.
monitoring
Naprawa idzie w dobrym kierunku. Będziemy aktualizować z postępem.
resolved
Naprawa została w pełni wdrożona we wszystkich przypadkach. Ten incydent został rozwiązany.
postmortem
# Co się stało
Problem został zidentyfikowany po wdrożeniu wersji 2026.06 w 2026- 06- 30 o godzinie 08: 00 UTC, gdzie uruchomienie "CREATE VECTOR INDEX" w zmodernizowanych instancjach aury wywołało wyjątek systemowy. Ta awaria w generowaniu indeksu nastąpiła, ponieważ podstawowy magazyn i jądro wymagały dodatkowych aktualizacji, aby wesprzeć operację
Problem ten tylko wpłynął na tworzenie nowych indeksów; istniejące indeksy wektorowe nie są naruszone. Każdy indeks wektorowy utworzony przed 09: 00 na 2026- 06- 30 nie uległ zmianie i nadal działał normalnie.
# # How the service was affected
Po uruchomieniu wersji 2026.06, wykonanie instrukcji CREATE VECTOR INDEX nie powiodło się, wpływając na aplikacje, które zależały od dodania nowych indeksów wektorowych. Dotknięci klienci otrzymali błąd: _ Tworzenie indeksu wektorowego z podanymi ustawieniami nie jest obsługiwane w V2026\ _ 02. Wymaganą wersją obsługi jest V2026\ _ 06. Proszę uaktualnić DBMS _. Istniejące indeksy\ (utworzone przed tym incydentem\) i inne zapytania pozostały niezmienione i w pełni funkcjonalne.
Co teraz robimy?
Zespoły Neo4j zidentyfikowały przyczynę początkową jako błąd w planowaniu szyfru i rozwiązały problem za pomocą poprawki kodu. Ten fix został zastosowany do wszystkich przypadków Aura dotkniętych, w pełni rozwiązać błąd
Aby zapobiec przyszłym zdarzeniom, udoskonalamy nasze systemy monitorowania i ostrzegania w celu wykrycia podobnych problemów wcześniej, szczególnie w środowiskach inscenizacji, zanim pojawią się wyjazdy. Równocześnie udoskonalamy nasze procesy wdrożeniowe, aby zminimalizować wpływ klientów i czas odzyskiwania
Dodatkowo, badamy opcje wdrożenia zautomatyzowanych testów walidacji po aktualizacji specjalnie dla operacji krytycznych, takich jak tworzenie indeksu wektorowego
Konsola Aura doświadczająca pewnych błędów przerywanych
Początek 23 czerwca 2026 11:25 UTC · 21h 49m
IssuesDrobny incydent
Dotknięte komponenty
Aura Console (console.neo4j.io)Aura API (api.neo4j.io)
identified
Konsola Aura doświadcza chwilowych błędów: "Nasz system doświadcza teraz problemów. spróbuj ponownie później lub skontaktuj się ze wsparciem, jeśli problem utrzymuje się".
Może to wymagać przeładowania lub dłużej czekać na nawigację w konsoli
Operacje i API Aury pozostają nienaruszone
Aktywnie pracujemy nad naprawą
identified
Kontynuujemy śledztwo w tej sprawie
identified
Kontynuujemy prace nad rozwiązaniem tego problemu.
monitoring
Wprowadzamy zmiany. Będziemy monitorować i aktualizować.
Sprawdziliśmy i potwierdziliśmy, że problem jest teraz w pełni rozwiązany.
resolved
Ten incydent został rozwiązany.
postmortem
# Co się stało
Około godziny 12: 00 UTC 22 stycznia 2026 roku, użytkownicy napotkali przerywane banery błędów w konsoli Aura wyświetlanie, "Mamy problem. Spróbuj jeszcze raz"., który wystąpił obok 500 błędów z konsoli API punktów końcowych. Zakłócenia te były przemijające i spowodowane przez wewnętrzny czas API w trakcie procesu uścisku dłoni TLS, zazwyczaj ustępujące w ciągu około 10 sekund lub po odświeżeniu strony
# # How the service was affected
Aura Console i Aura API doświadczyły zdegradowanego działania, które przejawiało się jako przerywane banery błędów w konsoli Aura UI. Śledztwo zidentyfikowało przyczynę jako wysokie wykorzystanie procesora i przepustowość w konsoli API. Kwestia ta była przede wszystkim spowodowana powtarzającymi się listami dużych podmiotów i kosztownymi wnioskami o pogodzenie
Aby rozwiązać ten problem, ukierunkowane poprawki zostały pomyślnie wdrożone zarówno do konsoli Aura i API Aura. Następnie dokonano dostosowań w konfiguracji zasobów w celu zwiększenia operacyjnej zagłówka i zapewnienia stabilności
Co teraz robimy?
W celu zmniejszenia prawdopodobieństwa wystąpienia podobnych incydentów wprowadzono następujące środki reaktywne i proaktywne:
* Opracował monitoring deski rozdzielczej do obserwacji spadku prośby na podstawie wewnętrznych danych dziennika API do wdrożenia zautomatyzowanego monitorowania i ostrzegania do problemów połowów, zanim wystąpią
* Wdrożenie rozłożone opóźnienie między postronnym pojednawcy wnioski o ograniczenie wysokiego zużycia zasobów i poprawę stabilności API
* Ulepszone obliczenia zasobów wiedzy infrastrukturalnej w celu poprawy wydajności
* Wprowadzono nowy filtr dla zapytań opartych na poziomach usług w celu optymalizacji napowietrznych procesora dla każdego połączenia wykonanego przez konwelatora
* Dezaktywowany zbędny wniosek przetwarzania middleware w celu optymalizacji połączeń API
Aura Console is currently not accessible. Our team is investigating the issue.
Aura instances are running normally and are not impacted. They remain accessible via https://browser.neo4j.io/ and https://bloom.neo4j.io/
Console-related administration and configuration procedures may be unavailable.
We will provide updates as soon as more information is available.
monitoring
The Aura Console issue has now been resolved.
The root cause was a failure while fetching public certificates from Auth0. We are reaching out to the Auth0 team to gather more detailed information about the incident.
resolved
This incident has been resolved.
postmortem
**What Happened**
During the incident window, users attempting to log in to the Aura Console were unable to do so. Auth0, the authentication provider for Aura Console, experienced an issue that prevented new authentication requests from completing. Existing sessions with valid cached tokens were largely unaffected. Aura database instances were running normally throughout and were not impacted, and access via the Aura API to database instances was also unaffected.
**How the service was affected**
Authentication requests from the Aura Console to Auth0 began failing, preventing new logins and session refreshes. Affected users received 503 errors when accessing the Aura Console. Once Auth0 recovered, access was restored.
**What are we doing now**
We've made two changes as a result of this incident:
* Client identification: Authentication requests now include a clearer client identifier, reducing the chance of requests being incorrectly blocked in the future.
* Observability: We've improved logging and alerting for authentication failures, including better visibility into errors from external services,so we can detect and escalate issues like this faster.
Console is not available
Początek 6 marca 2026 10:18 UTC · 6m
OutageKrytyczny incydent
Dotknięte komponenty
Aura Console (console.neo4j.io)
identified
We identified an issue with the availability of console.neo4j.io - we are investigating
monitoring
We have made a code change and we believe the console is available again.
resolved
We have checked and confirm that the issue is now fully addressed.
postmortem
## What Happened
On March 6, at 10:04 AM UTC, the Aura Console became inaccessible following a recent deployment. The deployment included changes related to user organizations and switching to an org memberships entity. This change caused the console to become inaccessible for a short period.
## How the service was affected
A deployment to the Aura Console introduced an issue that caused an unexpected increase in backend requests related to access validation. This led to elevated CPU usage, which impacted the availability of the console and dependent services. We rolled back to a previous version to restore access. The rollback ensured the full restoration of access to the Aura Console, resolving the core issue within the incident window
## What are we doing now
We are currently implementing a comprehensive strategy to bolster system resilience and prevent future recurrence. Our immediate actions include integrating stricter and more robust safeguards into the deployment pipeline. Crucially, we are significantly enhancing our validation processes to proactively detect and flag any potential performance impacts _before_ code is promoted to the production environment
Subset of MERGE queries lead to setting unexpected property values
Początek 3 marca 2026 21:35 UTC · 17h 44m
Pending
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Free (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCP
identified
A recent update resulted in MERGE queries which referenced the same merged property on both the left and right hand side of an ON MATCH SET or ON CREATE SET clause deleting that property from the node, or setting it to an invalid value during query runtime. The node being matched against must have had at least one property uniqueness constraint present.
A fix has been identified and will be applied as soon as possible. Instances marked as "Production" are not impacted.
identified
The fix is being deployed and the status page will be updated upon completion of the full deployment of the fix.
identified
The fix is being deployed and the status page will be updated upon completion of the full deployment
monitoring
The fix has now been deployed to those instances impacted and we are monitoring the situation.
resolved
The fix has been fully deployed to all impacted instances. This incident is now resolved.
postmortem
## What Happened
An issue was introduced in the Neo4j 2026.02 release where MERGE queries that referenced the same property on both the left and right sides of an `ON MATCH SET` or `ON CREATE SET` clause could potentially delete that property from the node or set it to an invalid value during query execution.
This behaviour was observed specifically when the node being matched had at least one property uniqueness constraint.
## How the service was affected
A change in the Neo4j 2026.02 release introduced a potential risk of writes failing or invalid data being returned for queries using MERGE together with `ON MATCH`.
This issue affected instances across Aura tiers and required immediate investigation by Neo4j Engineering. The team identified the root cause and deployed a fix in version 2026.02.1.
## What are we doing now
The following proactive measures have been implemented to reduce the likelihood of similar incidents:
* We have strengthened test coverage for `ON CREATE` and `ON MATCH` clauses, particularly those involving more complex expressions.
* We are investigating additional safeguards to improve our ability to control MergeInto/MergeUnique behaviour more flexibly, as well as potential rollback capabilities to support recovery in future incidents
We are aware of issues in the Middle East regions via our cloud partner AWS, affecting AWS me-central-1 (United Arab Emirates) and AWS me-south-1 (Bahrain).
The most up-to-date information from AWS is available at: https://health.aws.amazon.com/health/status
We are actively working to limit the impact on the Aura service. However, customers should expect that new deployments in the affected regions may be impaired. Additionally, existing services deployed in these regions may experience reduced availability.
Customers with services in these or nearby regions who are concerned about potential operational impact are encouraged to contact Neo4j Customer Support through the usual channels. Our team is available to advise and assist as needed.
identified
We continue to monitor the situation in the affected AWS Middle East regions.
The most up-to-date information from AWS is available at: https://health.aws.amazon.com/health/status
We will provide additional updates as soon as more information becomes available.
identified
We continue to monitor the situation in the affected AWS Middle East regions.
The latest information from AWS is available at: https://health.aws.amazon.com/health/status
We will provide additional updates as more information becomes available. Please review the AWS recommendation on the website above.
resolved
While AWS continues working on this situation, we are closing this incident and invite our customers to monitor the AWS Status on our main Neo4j Status Page under AWS (Amazon Web Services). The latest information from AWS can be found at: https://health.aws.amazon.com/health/status
postmortem
## What Happened
On March 1, at 12:51 PM UTC, AWS services in the ME-CENTRAL-1 & ME-SOUTH-1 Region were impacted. Connectivity and power issues affected APIs and AWS core services essential to run Neo4j Aura prompting AWS to initiate an investigation
## How the service was affected
Operations \(clone, backup, resuming/pausing, resizing\) that require additional resources like EC2 Instances, EBS Volumes, and other resources were impaired in the ME-CENTRAL-1 and ME-SOUTH-1 Region. Other AWS Services also experienced error rates and latencies for some workflows. Due to the ongoing conflict in the Middle East, both affected regions have experienced physical impacts to infrastructure. A detailed summary of the AWS regional incident can be found here:[ https://health.aws.amazon.com/health/status](https://health.aws.amazon.com/health/status)
## What are we doing now
We are actively working to limit the impact on the Neo4j Aura service. However, customers should expect that new deployments in the affected regions may be impaired. Additionally, existing services deployed in these regions may experience reduced availability. Customers with services in these or nearby regions who are concerned about potential operational impact are encouraged to contact Neo4j Customer Support through the usual channels
Please visit AWS Status page for more info:[https://health.aws.amazon.com/health/status](https://health.aws.amazon.com/health/status)
Ograniczony zestaw zapytań wpływających na wydanie Cypher 25
Początek 26 stycznia 2026 19:26 UTC · 20h 32m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS on AWS (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Free (*.databases.neo4j.io)
identified
Zidentyfikowaliśmy problem, który może mieć wpływ na ograniczony zestaw zapytań dotyczących AuraDB Free, Professional i AuraDS.
Może to dotyczyć:
- Zapytania przy użyciu pytania warunkowego When w połączeniu z agregacją niegrupującą nad wartościami null skutkują błędną liczbą zwróconych wierszy.
- Zapytania za pomocą NEXT mogą wywołać nieoczekiwaną zmienną niezdefiniowaną błąd w niektórych przypadkach.
Aktywnie pracujemy nad naprawą i będzie aktualizować tę stronę, jak więcej informacji staje się dostępne.
identified
Zidentyfikowaliśmy rozwiązanie tej kwestii i będziemy ją realizować w Aurze. Po wdrożeniu aktualizacji uaktualnimy tę stronę.
identified
Routing fix i będzie aktualizować po zakończeniu.
monitoring
Naprawiono już komponenty, monitorujemy teraz sytuację.
monitoring
W tej chwili nadal monitorujemy sytuację.
resolved
Naprawa została w pełni wdrożona we wszystkich przypadkach. Ten incydent został rozwiązany.
postmortem
* * * What happed * *
W dniu 26 stycznia 2026 r. Po wykryciu niepowodzeń podczas badań wewnętrznych, rozpoczęcie badania zostało wstrzymane zanim dotarło do wyższych poziomów aury.
Niepowodzenia wystąpiły na warunkowych zapytaniach\ (np. When... Then...\) po fazie planowania, aby zachować się inaczej w przypadku agregacji nad wartościami zerowymi.
Zidentyfikowaliśmy przyczynę i opracowaliśmy rezolucję, która została włączona do wersji 2026.01.2. 27 stycznia 2026 roku, rozpoczęliśmy rozmieszczanie 2026.01.2 we wszystkich przypadkach aury, z powodzeniem unowocześniając wszystkie środowiska dotknięte chorobą do poprawionej wersji
# # How the service was affected
Zapytania za pomocą When w 2026.01.1 w połączeniu z agregacją nad wartościami zerowymi otrzymują nieprawidłową liczbę wierszy zwróconych. Zapytania przy użyciu NEXT mogą w niektórych przypadkach spowodować nieoczekiwany błąd nie zdefiniowanej zmiennej. Powodowało to, że przepisane zapytanie zachowywało się inaczej w przypadku agregacji nad wartościami zerowymi.
Zapytanie warunkowe wymagałoby otrzymania przychodzących wierszy zawierających wartości zerowe i agregacji nad wartościami bez użycia grupowania. Klienci otrzymali błędny wynik, jeżeli korzystali z projektu zapytania warunkowego w Cypher 25\ (zob. [https: / / neo4j.com / docs / aura / management-instances / cypher- version /] (https: / / neo4j.com / docs / aura / management-instances / cypher- version /)\), wpływ ograniczony do ograniczonej liczby instancji Aura.
Co teraz robimy?
Wzmocniliśmy nasze procedury testowe w celu zapewnienia kompleksowego zasięgu we wszystkich obszarach produktów. Obejmuje to opracowanie nowych przypadków testowych mających na celu rozwiązanie zarówno zidentyfikowanych kwestii, jak i potencjalnych przyszłych scenariuszy.
Ponadto mamy zintegrowany test zapytania Cypher w Aurze jako standardowy element naszego zestawu testów regresji. Kontrole te są obecnie obowiązkowymi etapami w obrębie naszego gazociągu i środowiska ustawiania przed rozpoczęciem produkcji.
Data science feature on AuraDS , AuraDSE and Aura Professional tiers - Native projection affected.
Początek 16 stycznia 2026 14:25 UTC · 5h 11m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)
identified
Impact is that currently it is not possible to load data into GDS via native projection.
Customers using Aura Graph Analytics are not impacted.
We have identified a packaging issue with the latest release of Aura.
Our engineering team is working on a fix.
identified
Our teams have a fix and initiated the work to get it ready to roll-out.
No current ETA available.
We will keep you updated soon.
monitoring
The fix is currently rolling out to production. We will update you upon completion
resolved
All instances should have the fix applied and if not it should be in the next 60 minutes
postmortem
### **What happened**
On January 15, 2026 at 22:12 UTC we began rolling out an update that included an incompatible version of a key component, affecting customers using the GDS plugin. This issue was reported on January 16 at 12:59 UTC, and a fix was deployed within hours, restoring functionality for the majority of affected users by 20:03 UTC.
The issue occurred because Neo4’s packaging automation process selected the wrong version of the GDS component. GDS 2.25 should have been selected but instead GDS 2.24 was included in the bundle, which caused a compatibility issue. Although a corrected package was created and labeled separately, the release pipeline selected the incorrect package for deployment.
This issue highlighted a gap in the release validation process, where incompatible component versions were not detected before rollout.
### **How customers were affected**
Customers using the GDS plugin were unable to use any of the functionality the plugin provides during the incident window.
The system configuration has been updated to ensure compatibility with the intended component versions, restoring full functionality.
### **What we are doing now**
The following mitigations have been implemented:
* Enhanced testing procedures to automatically verify compatibility between Neo4j and all bundled components before release.
* Improved release processes to ensure that only explicitly validated and correctly labeled packages can be selected for deployment.
Neo4j Aura Service impacted by Resource Shortage in Azure US East
Początek 26 listopada 2025 15:47 UTC · 14d 23h
OutagePoważny incydent
Dotknięte komponenty
AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS on Azure (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)
identified
Neo4j opened a ticket with Azure and is awaiting updates on their resolution of the Azure Infrastructure issues.
Impact on Neo4j Aura Services: Create, Resize (CPU and Storage), Pause, Resume.
identified
Neo4j continues working with Microsoft via an Azure cloud ticket and is awaiting updates on their resolution of the Azure Infrastructure issues. Some resources have been made available, and impacted Neo4j Services have resumed operation. Customers have been notified.
The Neo4j Aura Service is impacted when performing the following operations: Create, Resize (CPU and Storage), Pause, Resume. If Azure resources are unavailable when requesting these types of Neo4j operations, the operation will fail, and the Neo4j instance will become unavailable until Azure is able to provision additional resources.
identified
The Neo4j Aura Service continues to be impacted by Azure Infrastructure issues in the US east region, effecting the following operations: Create, Resize (CPU and Storage), Pause, Resume.
If Azure resources are unavailable when requesting these types of Neo4j Aura operations, they will fail and the Neo4j Aura instance will become unavailable until Azure is able to provision additional resources.
identified
The Neo4j Aura Service continues to be impacted by Azure Infrastructure issues in the US east region, effecting the following operations: Create, Resize (CPU and Storage), Pause, Clone, Resume.
As Azure resources become available when performing some Aura operations, the impacted instances may progressively recover and operations successfully complete.
We continue to monitor progress, work with Microsoft Azure Infrastructure issues and will update.
identified
We continue to work with our cloud infrastructure provider . Aura operations affected: Create, Resize (CPU and Storage), Pause, Clone, Resume.
identified
We continue to work with our cloud infrastructure provider.
Aura operations affected: Create, Resize (CPU and Storage), Pause, Clone, Resume.
identified
We continue to work with Microsoft Azure. No expected improvements in addressing the issues around cloud resources in the affected regions before next week.
Aura operations affected: Create, Resize (CPU and Storage), Pause, Clone, Resume.
We will resume updates after this weekend or earlier if we have more information.
identified
The Neo4j Aura Service continues to be impacted by Azure Infrastructure issues in the US east region, effecting the following operations: Create, Resize (CPU and Storage), Pause, Resume.
If Azure resources are unavailable when requesting these types of Neo4j Aura operations, they will fail and the Neo4j Aura instance may become unavailable or degraded until Azure is able to provision additional resources.
identified
The Neo4j Aura Service continues to be impacted by Azure Infrastructure issues in the US east region, affecting the following operations: Create, Resize (CPU and Storage), Pause, Resume.
If Azure resources are unavailable when requesting these types of Neo4j Aura operations, they will fail and the Neo4j Aura instance may become unavailable or degraded until Azure is able to provision additional resources.
identified
The Neo4j Aura Service continues to be impacted by Azure Infrastructure issues in the US east region.
We are working with our cloud partner and will resume updates once we have an ETA to share.
monitoring
Cloud resources have become available in USEAST2 and we will monitor for a few hours to ensure there is no further customer impact.
resolved
Cloud resources have become available in USEAST2 and no further customer impact has been detected.
This incident is resolved.
postmortem
### **What Happened**
Starting at 13:26 UTC on November 24th Microsoft Azure region eastus experienced a stock out situation, which impacted operations for all tiers of Neo4j Aura in that specific region. Additional capacity was requested straight away, but not until 17:06 UTC on December 10th did enough additional resources become available to resume all normal operations.
**How the service was affected**
All tiers within the Neo4j Aura Service were impacted when performing the following operations during this incident: Create, Resize \(CPU and Storage\), Clone, Pause and Resume. If Microsoft Azure resources were unavailable when requesting these types of Neo4j operations, the operation would fail, and the Neo4j instance would become unavailable until Azure was able to provision additional resources.
### **What are we doing now**
To mitigate the scope of impact of future regional stock out issues, Neo4j is implementing the following measures:
* Closely monitoring resource capacity to improve stockout predictions.
* Regular calls with with our Cloud Service Provider to:
* Learn about where regional resource capacity restrictions are forecast.
* Plan for more resources in restricted regions.
* Investigating other deployment models to allow us to keep Aura running in situations where 3 Availability Zones are not available.
Pause / Resume / Destroy operations failing
Początek 18 listopada 2025 15:56 UTC · 43m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)AuraDB Professional on Azure (*.databases.neo4j.io)AuraDB Free (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCPAura API (api.neo4j.io)
identified
We have identified an issue resulting in Pause, Resume and Delete operations to fail in both Console and Aura API across all tiers of Aura. We are actively working to resolve the issue and will report progress.
monitoring
We have released a fix to this issue and are monitoring to ensure all operations are back to normal.
resolved
After monitoring the fix for some time, we can confirm that the issue is resolved and normal operations have resumed.
postmortem
### What happened
On November 18, 2025, some customers experienced issues with the delete, pause, and resume operations in the Console. These actions failed due to a temporary system issue introduced during a sequence of updates. While the updates were intended to improve functionality, they unintentionally reintroduced a previously resolved defect.
The issue was identified quickly, and our teams acted immediately to restore normal operation.
The root cause was a misconfiguration in the data processing module. An outdated schema caused the data parsing logic to misinterpret certain input parameters, leading to incorrect behavior and data display within the Console. We have since corrected the schema and added stricter validation to ensure compatibility moving forward.
### How customers were affected
During the incident, some users experienced service disruptions when accessing the Console. Impacts included:
* Intermittent connectivity issues
* Inability to log in
* Temporary unavailability of specific Console features
No customer data was lost.
To prevent a recurrence, we have improved our release process to ensure updates are deployed in the correct order, eliminating overlapping or out-of-sequence changes.
### What we are doing now
Neo4j takes service reliability seriously and is strengthening safeguards to prevent similar incidents.
New mitigations being deployed include:
* Enhanced monitoring to detect related issues earlier
* Additional automated checks to block faulty configurations before deployment
* Improvements to overall service resilience to better tolerate similar failures
We apologize for the disruption and appreciate our customers’ patience as we continue to harden our systems.
Several operations degraded for AWS instances in region us-east-1
Początek 20 października 2025 16:43 UTC · 4h 45m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAura Graph Analytics on AWS
identified
Many core operations for instances in AWS region us-east-1 are degraded as a result of AWS incident in that region: https://health.aws.amazon.com/health/status
Core operations include create, pause, resume, clone, backup, among others.
We continue to monitor the AWS incident and will provide updates accordingly.
identified
We are continuing to monitor the AWS incident, and can report some slow improvement of impacted Aura instances in the AWS us-east1 region, though the service remains degraded in this region at this time.
We are continuing to monitor progress in the AWS incident: https://health.aws.amazon.com/health/status
resolved
Instance operations in AWS us-east-1 region are back to normal following the resolution of the AWS incident. We will continue to monitor but all data indicates that the issue is fully resolved at this time.
postmortem
### **What Happened**
Between 08:41 UTC on October 20th and 09:00 UTC on October 21st, Neo4j Aura experienced service disruptions affecting the us-east-1 \(N. Virginia\) region in AWS. The incident was triggered by a broad AWS regional outage impacting Identity and Access Management \(IAM\) and the EC2 control plane. This resulted in delayed backups, temporary loss of database fault tolerance for a subset of users, and internal delays in administrative actions due to toolchain failures.
A detailed summary of the AWS regional incident can be found here: [https://aws.amazon.com/message/101925/](https://aws.amazon.com/message/101925/)
### **How the service was affected**
The primary cause was several AWS regional service disruptions in us-east-1. We will cover how each of these affected Neo4j Aura and its users. Neo4j Aura is designed to isolate regional failures. This is achieved through deploying customer instances in Orchestras that have instances in three availability zones and no cross region dependencies.
AWS IAM and Identity Center became unresponsive, preventing Neo4j Aura’s automated systems from authenticating with AWS resources in us-east-1. This affected Neo4j Aura backups to be written to AWS S3 buckets. Customers were also not able to resume paused instances during this period as the resume process was not able to authenticate with AWS S3 buckets to retrieve the paused data set. Neo4j Aura’s inability to authenticate with Route53 to create new DNS entries affected Neo4j Aura DB creation, as new databases were created.
AWS Network Load Balancer health check system failures and AWS EC2 “request limit exceeded” or “insufficient capacity” errors in us-east-1 were false negatives with the NLB heath checks which resulted in some Neo4j Aura DB clusters in us-east-1 losing fault tolerance \(1 out of 3 cluster members unavailable\). When this happened instances were removed by kubernetes and we were not able to provision new ones due to the EC2 failures noted earlier, leaving the clusters without fault tolerance for a prolonged period of time. All of these clusters still had full availability of the other two cluster members.
### **What are we doing now**
Largely Neo4j Aura responded as designed to these events, isolating failures to us-east-1, with no to minimal cross system failure propagation. The cross cloud impact of creating DNS records for new instances was the main outlier.
To mitigate the scope of impact of future regional outages, Neo4j is implementing the following measures:
* Full Neo4j Aura reviews to ensure Neo4j Aura design is implemented as intended across all sub-systems to surface any cross region dependencies.
* Remove identified cross-region dependencies.
Aura operations on AWS affected by an incident in US-EAST-1 region
Początek 20 października 2025 09:15 UTC · 1h 58m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAura Graph Analytics on AWS
identified
An active issue on AWS us-east-1 is affecting Neo4j Aura operations in the regions where we have some dependency on an impacted AWS service.
See more details https://health.aws.amazon.com/health/status
Other regions not currently impacted.
identified
Operations such as Create, Pause, Resume, Clone are affected globally due to a dependency. Backups in the affected region of AWS us-est-1 will be impacted
The affected AWS service is now starting to recover and we are monitoring the situation
monitoring
We see clear signs of recovery and our impacted service are progressively getting back to normal.
We will monitor and update when we can confirm full recovery and normal operations.
monitoring
We are continuing to see good recovery across the service. We will update when this is completed.
resolved
The underlying AWS incident has bene resolved and our services have now resumed and fully recovered
postmortem
### **What Happened**
Between 08:41 UTC on October 20th and 09:00 UTC on October 21st, Neo4j Aura experienced service disruptions affecting the us-east-1 \(N. Virginia\) region in AWS. The incident was triggered by a broad AWS regional outage impacting Identity and Access Management \(IAM\) and the EC2 control plane. This resulted in delayed backups, temporary loss of database fault tolerance for a subset of users, and internal delays in administrative actions due to toolchain failures.
A detailed summary of the AWS regional incident can be found here: [https://aws.amazon.com/message/101925/](https://aws.amazon.com/message/101925/)
### **How the service was affected**
The primary cause was several AWS regional service disruptions in us-east-1. We will cover how each of these affected Neo4j Aura and its users. Neo4j Aura is designed to isolate regional failures. This is achieved through deploying customer instances in Orchestras that have instances in three availability zones and no cross region dependencies.
AWS IAM and Identity Center became unresponsive, preventing Neo4j Aura’s automated systems from authenticating with AWS resources in us-east-1. This affected Neo4j Aura backups to be written to AWS S3 buckets. Customers were also not able to resume paused instances during this period as the resume process was not able to authenticate with AWS S3 buckets to retrieve the paused data set. Neo4j Aura’s inability to authenticate with Route53 to create new DNS entries affected Neo4j Aura DB creation, as new databases were created.
AWS Network Load Balancer health check system failures and AWS EC2 “request limit exceeded” or “insufficient capacity” errors in us-east-1 were false negatives with the NLB heath checks which resulted in some Neo4j Aura DB clusters in us-east-1 losing fault tolerance \(1 out of 3 cluster members unavailable\). When this happened instances were removed by kubernetes and we were not able to provision new ones due to the EC2 failures noted earlier, leaving the clusters without fault tolerance for a prolonged period of time. All of these clusters still had full availability of the other two cluster members.
### **What are we doing now**
Largely Neo4j Aura responded as designed to these events, isolating failures to us-east-1, with no to minimal cross system failure propagation. The cross cloud impact of creating DNS records for new instances was the main outlier.
To mitigate the scope of impact of future regional outages, Neo4j is implementing the following measures:
* Full Neo4j Aura reviews to ensure Neo4j Aura design is implemented as intended across all sub-systems to surface any cross region dependencies.
* Remove identified cross-region dependencies.
Database instance write performance impacted
Początek 25 sierpnia 2025 13:34 UTC · 2d 3h
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)Aura Graph Analytics on GCPAuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)Aura Graph Analytics on AWSAuraDB Professional on Azure (*.databases.neo4j.io)Aura Graph Analytics on AzureAuraDB Free (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on GCP
investigating
We are currently investigating this issue.
investigating
We are aware of an issue that could result in a degradation in write performance for all Aura instance. We have identified the cause and are preparing a fix.
investigating
We are continuing to investigate this issue.
monitoring
The issue impact has been refined and currently could impact AuraDB Virtual Dedicated Cloud and Business Critical instances only. We have identified the cause and the faulty component has been reverted for the majority of instances.
We will continue to monitor the situation, while the full fix is prepared.
monitoring
We continue to work towards the issue resolution.
monitoring
We are continuing to investigate this issue.
monitoring
We are continuing to monitor the situation whilst a full fix for the solution is prepared.
monitoring
We are continuing to monitor the situation. The full fix for the solution is currently undergoing final testing and will start deployment once testing is completed.
monitoring
The full fix for the solution is starting to be deployed across the estate and are continuing to monitor the situation.
monitoring
We are continuing to monitor for any further issues.
monitoring
The full fix for the solution is continuing to be deployed across the estate and are continuing to monitor the situation.
resolved
The full fix for the solution has now been deployed across the estate and this issue is now resolved.
postmortem
### **What happened**
Between August 22 and August 28, 2025, a performance issue affected some of our database services following a recent update. Our team quickly responded and discovered that the problem was due to a bug in the latest update, which caused certain memory settings to be incorrectly configured. We promptly applied the previous version of those settings to stabilize the affected databases. By August 28, all databases were successfully transferred to a new, stable version, and the incident was fully resolved.
The issue was caused by a misconfiguration in the system's data processing module. Specifically, an incorrect parameter setting in the data pipeline led to a bottleneck, which slowed down the processing speed. This misconfiguration affected the way data was being queued and processed, resulting in delays. Our technical team has identified the root cause and implemented a fix to ensure that the data pipeline operates efficiently, preventing future occurrences of this issue.
### **How the service was affected**
Some customers reported a performance change on their instance.
### **What we are doing now**
Neo4j remains committed to providing reliable service and is implementing additional safeguards to prevent similar incidents in the future.
New mitigations being deployed:
* Enhancing our monitoring systems to detect similar issues faster
* Implementing additional automated checks to prevent service disruptions
* Improving our service resilience to handle similar scenarios
* Introducing dynamic configuration management to ensure seamless updates
* Enabling multiple configuration defaults to better manage database priorities
* Improving notification systems for faster response to potential issues
* Enhancing our tools to streamline database management and transfers
CMI & Instance Operations Unavailable
Początek 22 sierpnia 2025 11:02 UTC · 2h 30m
OutagePoważny incydent
Dotknięte komponenty
Data Importer (data-importer.neo4j.io)Aura Console (console.neo4j.io)Aura Customer Metrics (customer-metrics-api.neo4j.io)
investigating
Engineers are investigating an issue whereby instance actions are not working. You may be unable to import data, pause, resume, create, delete or run manual backups for your instances. Regular Neo4j scheduled backups are continuing to run as normal.
You may be unable to see your instances in the Aura Console.
CMI is also experiencing an outage, you may be unable to ingest metrics from your Aura instances.
monitoring
A fix has been identified and implemented. Instances should be showing on the console and instance operations should now be available.
You should now also be able to ingest metrics using CMI.
We are continuing to monitor the status of these services.
resolved
This incident has been resolved.
postmortem
### What happened
On August 22, 2025, from 10:10 to 11:27 UTC, users experienced an issue with the Aura Console where instance operations were unavailable. This was due to a timing issue with refreshing security keys that affected the visibility and operations of instances in the Aura Console and also caused an outage in the Customer Metrics Integration \(CMI\) and Aura API. The issue was identified within 5 minutes and efforts to resolve it began promptly. The problem was traced back to a recent update and issues with authentication were resolved by refreshing the system cache, with the service fully restored by 11:27 UTC.
The issue arose because of a timing mismatch between the creation of new security keys and their recognition by our system. When new keys were generated, they were quickly used by the Console API. However, another part of our system, the database manager, was still using an older set of keys to verify requests. This mismatch caused requests to fail because the database manager could not recognize the new keys. No unauthorized operations were allowed and this did not affect the security of the service in any way. After approximately an hour, the system automatically updated its keys, and everything started working correctly again.
### How customers were affected
Aura Console features were impacted, including the visibility of instances and therefore ability to connect to instances through the console. Driver connections to instances were not impacted.
The issue also impacted the use of parts of the service including Customer Metrics Integration \(CMI\) and the Aura API.
### What we are doing now
Neo4j remains committed to providing reliable service and is implementing additional safeguards to prevent similar incidents in the future.
We are taking steps to prevent similar issues in the future by improving our processes and monitoring systems.
Changes we are making:
* Enhancing our caching mechanisms to ensure seamless updates and prevent similar issues in the future.
* Designing a robust process for updating service accounts and keys to guarantee uninterrupted service reliability.
Some issues with backups
Początek 19 sierpnia 2025 09:19 UTC · 2h 45m
IssuesDrobny incydent
Dotknięte komponenty
AuraDS Enterprise on AWS (*.databases.neo4j.io)AuraDS on AWS (*.databases.neo4j.io)Aura Graph Analytics on GCPAuraDB Virtual Dedicated Cloud on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AzureAuraDS Enterprise on Azure (*.databases.neo4j.io)AuraDB Professional on AWS (*.databases.neo4j.io)AuraDS on Azure (*.databases.neo4j.io)AuraDS on GCP (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on AWS (*.databases.neo4j.io)AuraDB Virtual Dedicated Cloud on Azure (*.databases.neo4j.io)AuraDB Professional on GCP (*.databases.neo4j.io)AuraDB Business Critical (*.databases.neo4j.io) on AWSAuraDS Enterprise on GCP (*.databases.neo4j.io)Aura Graph Analytics on AWSAuraDB Professional on Azure (*.databases.neo4j.io)Aura Graph Analytics on AzureAuraDB Business Critical (*.databases.neo4j.io) on GCP
investigating
We are currently investigating an issue with backups. We will update shortly as we get more details
investigating
We are continuing to investigate the issue with backups. New backups after 0:00 last night are failing to complete.
Existing backups are unaffected and remain available.
investigating
We are continuing to investigate this issue.
investigating
We continue to investigate and have identified the issue more clearly.
Beyond backups, other operations are also affected: pause and clone.
Operations may fail or take a long time to complete.
monitoring
The fix has been deployed and we will continue to monitor this incident.
resolved
This incident has been resolved.
postmortem
### What happened
On August 18, 2025, at 19:18 UTC, the release of a faulty component in Neo4j Aura impacted the ability to perform backups of customer instances. The problem was identified when a critical component was updated without aligning with another dependent component, leading to failed backup attempts. This resulted in Neo4j not being able to take backups of customer instances for a period of approximately 17 hours. Our team quickly identified the root cause and began mitigation efforts early on August 19, 2025. By 11:54 UTC, the issue was fully resolved, and normal backup operations resumed. We apologize for any inconvenience this may have caused and are taking steps to prevent similar issues in the future.
The issue arose because the deployment of the neo4j-backup system was not properly synchronized with the deployment of the neo4j-operator. This misalignment led to critical changes being introduced that impacted the ability to create new backups effectively. Essentially, the two components were not updated in harmony, which caused disruptions in the backup process.
### How customers were affected
Customers were unable to get successful backups of their instances for 17 hours. We promptly addressed the issue by reverting the recent backup changes that caused disruptions and ensured the stability of our service by cleaning up old, failing backups.
### What we are doing now
Neo4j remains committed to providing reliable service and is implementing additional safeguards to prevent similar incidents in the future.
New mitigations being deployed:
* Enhancing our monitoring systems to detect similar issues faster
* Implementing additional automated checks to prevent service disruptions
* Improving our service resilience to handle similar scenarios