Affected Components: Youtube

Sep 4, 05:50:47 GMT+0
Identifizierung - **Current estimated impact:** 5% of YouTube channels affected While we await updates from Google, we are continuing to identify and setup mitigations to reduce any impact to notifications. Any affected **existing** YouTube channel trackers are being moved to a temporary system. Once this is complete, we will be able to support new YouTube channel registrations..

Sep 5, 11:56:09 GMT+0
Identifizierung - We have identified an issue relating to trackers for YouTube channels. The issue is caused by an internal Google service. Google Engineering are aware of the issue and are actively looking into it. Existing channels tracked by Pingcord have now been moved to a backup system until the issue is resolved. Newly-added channels are also now being tracked by the backup system. Pings may be delayed by up to 10 minutes as a result of this. We will provide further updates when we receive them from Google..

Sep 3, 22:01:05 GMT+0
Identifizierung - We have identified an issue relating to trackers for YouTube channels. The issue is caused by an internal Google service and has been reported to Google Engineering. We are awaiting their response. Trackers for new YouTube channels will fail to create and will be stuck as "Creating tracker..." Existing channels will be unaffected until their trackers expire. We are exploring any mitigations we can implement to minimise the impact..

Duration: 3 hours and 9 minutes

Affected Components: Webseite, IRIS-Aufnahme, Postdienst

Aug 16, 18:30:00 GMT+0
Analyse - We are currently investigating this incident..

Aug 16, 20:30:00 GMT+0
Überwachung - A critical internal service handling communication to Discord restarted due to a fault. The restart was successful but it did not report to our other services that it was back online. An internal incident was raised automatically by our monitoring stack but was misclassified as a minor severity issue. We have restored service currently. Pingcord is now recovering pings and data from prior to the incident..

Aug 16, 21:38:30 GMT+0
Gelöst - We are closing this incident but will continue to monitor ongoing. Our incident monitoring stack will also be reconfigured to generate an urgent alert to the team for the specific issue that occurred this evening..

Duration: 3 hours and 45 minutes

Affected Components: IRIS-Aufnahme, Postdienst, , Main Services →

Apr 4, 03:30:00 GMT+0
Analyse - We are currently investigating this incident..

Apr 4, 06:45:00 GMT+0
Überwachung - We have identified the cause of the issue and are in the process of recovering pings. Pings will start to come through over the next hour or so. Any pings where the event occurred more than 2 hours ago will have their notifications silenced but will still be posted. Thank you for your patience while this was resolved..

Apr 4, 07:15:00 GMT+0
Gelöst - This incident has been resolved. Our investigation revealed an issue with a CloudFlare API led to internal service discovery problems which caused services to stop talking to each other. This has now been resolved by eliminating sole reliance on this API. Thank you for your patience..

Duration: 15 minutes

Affected Components: Webseite, IRIS-Aufnahme

Mar 20, 04:19:42 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Mar 20, 04:34:48 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 9 minutes

Affected Components: Webseite, IRIS-Aufnahme

Mar 15, 04:05:50 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Mar 15, 04:15:19 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 14 minutes

Affected Components: Webseite, IRIS-Aufnahme

Feb 13, 03:50:45 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Feb 13, 04:04:53 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 14 minutes

Affected Components: Webseite, IRIS-Aufnahme

Dec 27, 03:35:20 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Dec 27, 03:49:28 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 10 minutes

Affected Components: IRIS-Aufnahme, Postdienst

Dec 9, 17:25:29 GMT+0
Analyse - We are currently investigating this incident..

Dec 9, 17:35:31 GMT+0
Gelöst - This incident has been resolved..

Duration: 2 hours and 29 minutes

Affected Components: Webseite, IRIS-Aufnahme

Oct 4, 22:21:23 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Oct 5, 00:50:18 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 44 minutes

Affected Components: Webseite, IRIS-Aufnahme

Oct 4, 22:05:26 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Oct 4, 21:21:53 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Duration: 14 minutes

Affected Components: Webseite, IRIS-Aufnahme

Jun 23, 03:20:11 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Jun 23, 03:34:06 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.

Duration: 3 hours and 2 minutes

Affected Components: Youtube

Jun 12, 18:41:22 GMT+0
Identifizierung - We are seeing multiple reports from other apps & services that Google Cloud APIs (incl. YouTube API) are experiencing an outage at this time. We will save YouTube events and will hold them in our event queue until Google resolve their outage..

Jun 12, 18:34:48 GMT+0
Analyse - The YouTube API is returning a server error which is preventing Pingcord from processing YouTube events. Please note this is not an issue with Pingcord and we are attempting to identify a workaround until YouTube API services are working again..

Jun 12, 20:31:34 GMT+0
Überwachung - The YouTube API is currently working as expected however Google services are still experiencing widespread downtime issues. Pingcord is continuing to process YouTube events at this time but we will monitor the situation closely in case of any further downtime from YouTube..

Jun 12, 21:37:05 GMT+0
Gelöst - This incident has been resolved..

Duration: 19 minutes

Affected Components: IRIS-Aufnahme

Jun 5, 20:38:31 GMT+0
Analyse - We are currently reduced performance in the event processing pipeline. Pingcord is still online however pings may be delayed by up to 30 minutes..

Jun 5, 20:58:00 GMT+0
Gelöst - Event processing has returned to normal service without intervention. We will monitor the situation closely..

Duration: 4 hours and 9 minutes

Affected Components: Webseite, Tick Tack, IRIS-Aufnahme

Jun 3, 13:50:13 GMT+0
Identifizierung - We have resolved the root cause of the problem and are bringing Pingcord services back online..

Jun 3, 14:12:22 GMT+0
Überwachung - Pingcord is back online, and we are currently monitoring the situation. TikTok pings will remain offline for the time being to ensure full system stability..

Jun 3, 15:50:57 GMT+0
Gelöst - This incident has been resolved. We are monitoring the service closely and will be investigating the root cause leading to the downtime. Thank you for your patience!.

Jun 3, 11:41:33 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Jun 3, 15:14:46 GMT+0
Überwachung - TikTok services are now being brought back online. Thank you for your patience..

Duration: 7 hours and 16 minutes

Affected Components: Postdienst, IRIS-Aufnahme

Apr 12, 10:12:58 GMT+0
Identifizierung - Das Problem wurde erkannt und die Ereignisse werden nun normal verarbeitet. Die Ereignisse werden innerhalb der nächsten 20 Minuten aus unserem Warteschlangensystem gelöscht. Vielen Dank für Ihre Geduld..

Apr 12, 03:26:00 GMT+0
Analyse - Wir untersuchen dieses Problem..

Apr 12, 10:42:05 GMT+0
Gelöst - Das Ereignisverarbeitungssystem funktioniert wieder normal. Wir beobachten die Situation weiterhin aufmerksam. Wir werden die Ursache des Problems in Kürze untersuchen..

Duration: 2 days, 7 hours and 36 minutes

Affected Components: Facebook-Seiten

Apr 8, 22:36:29 GMT+0
Überwachung - Das Problem wurde behoben und wir empfangen nun wie gewohnt Ereignisse von Facebook-Seiten. Pingcord versucht, während der Ausfallzeit verpasste Pings wiederherzustellen, obwohl einige leider verloren gehen können. Wir beobachten die Situation aufmerksam, um weitere Änderungen zu ermöglichen. Dieses Problem tritt erneut auf, nachdem es bereits im März aufgetreten war. Wir befinden uns weiterhin im Dialog mit Meta, um dieses Problem in Zukunft zu vermeiden. Vielen Dank für Ihre Geduld!.

Apr 9, 00:38:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

Apr 6, 17:01:51 GMT+0
Identifizierung - Wir haben im letzten Monat ein erneutes Problem mit Facebook-Seitenverbindungen festgestellt. Instagram ist davon nicht betroffen. Wir arbeiten mit Meta zusammen, um diese Probleme schnellstmöglich zu beheben..

Duration: 11 hours and 31 minutes

Affected Components: Facebook-Seiten

Mar 14, 18:28:49 GMT+0
Analyse - Wir untersuchen diesen Vorfall derzeit..

Mar 15, 06:00:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

Mar 15, 00:29:21 GMT+0
Identifizierung - Wir haben das Problem identifiziert und arbeiten mit Meta an der Lösung des Verbindungsproblems mit unserer Anwendung. Vielen Dank für Ihre Geduld, während wir an der Lösung dieses Problems arbeiten..

Mar 15, 05:02:48 GMT+0
Überwachung - Das Problem wurde behoben und wir erhalten nun wie gewohnt Ereignisse von Facebook. Wir werden die Situation genau beobachten. Vielen Dank für Ihre Geduld!.

Duration: 10 hours and 1 minute

Affected Components: Reddit

Jan 22, 20:00:00 GMT+0
Identifizierung - Die Ursache des Problems wurde gefunden und es wird an der Lösung gearbeitet..

Jan 23, 00:18:50 GMT+0
Überwachung - Das Problem wurde behoben und wir beobachten es aufmerksam, ob es erneut auftritt..

Jan 22, 15:00:00 GMT+0
Analyse - Wir untersuchen derzeit ein Problem mit Reddit-Pings von heute Morgen..

Jan 23, 01:01:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

Duration: 6 hours and 27 minutes

Affected Components: Postdienst, IRIS-Aufnahme

Jan 1, 04:15:00 GMT+0
Überwachung - Wir haben einen Fix implementiert und überwachen derzeit das Ergebnis..

Jan 1, 03:57:52 GMT+0
Überwachung - Der Dienst wurde wiederhergestellt und unser System verarbeitet nun den Rückstand an Ereignissen. Pings sollten nicht verpasst werden. Pingcord wird sie veröffentlichen, sofern sie nicht mit Livestreams zusammenhängen, die bereits beendet sind. Wir beobachten die Situation genau, vielen Dank für Ihre Geduld und ein frohes neues Jahr!.

Jan 1, 02:03:00 GMT+0
Analyse - Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren..

Jan 1, 08:30:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

Duration: 1 day, 11 hours and 14 minutes

Affected Components: Facebook-Seiten, Instagram

May 14, 01:01:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

May 12, 13:46:43 GMT+0
Analyse - Wir untersuchen diesen Vorfall derzeit..

May 13, 21:01:59 GMT+0
Überwachung - Wir haben das Problem mit unserem Zugriff auf die APIs von Meta behoben. Die Facebook- und Instagram-Integrationen sollten wieder wie gewohnt funktionieren. Wir werden die Situation genau beobachten, um sicherzustellen, dass sie behoben wurde..

Duration: 10 hours and 12 minutes

Affected Components: Youtube

Apr 16, 03:40:15 GMT+0
Identifizierung - Wir haben ein Problem mit Tracker-Erneuerungen für YouTube festgestellt, das auf die Datenbankprobleme zurückzuführen ist, mit denen wir kürzlich konfrontiert waren. Wir haben einen Fix bereitgestellt und erneuern derzeit vorsorglich alle Tracker. Dieser Vorgang wird einige Stunden dauern, um alle Tracker durchzugehen. Sobald der Tracker Ihres Kanals repariert ist, sendet YouTube uns möglicherweise alle in die Warteschlange gestellten Ereignisse, aber Pingcord ignoriert alle alten Videos oder Streams, die bereits beendet sind..

Apr 16, 13:52:00 GMT+0
Gelöst - Wir freuen uns, bestätigen zu können, dass alle Tracker erneuert wurden. Bitte melden Sie etwaige Probleme wie üblich an unseren Support-Server. Vielen Dank für Ihre anhaltende Geduld!.

Duration: 11 hours and 12 minutes

Affected Components: Tick Tack, Timer-Benachrichtigungen, Reddit, Facebook-Seiten, Mastodon, Kick.com, RSS-Feeds, Instagram, Zucken, Spotify, Youtube, Postdienst, IRIS-Aufnahme, Webseite, Twitter

Apr 12, 17:18:04 GMT+0
Analyse - Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren..

Apr 13, 04:30:00 GMT+0
Gelöst - Ab sofort ist der Dienst wiederhergestellt. Wir werden den Dienst das ganze Wochenende über weiterhin überwachen..

Apr 13, 03:00:19 GMT+0
Überwachung - Die Notfallwartung der Datenbank wurde erfolgreich abgeschlossen. Aufgrund der Art des Datenbankabsturzes werden leider alle an bereits vorhandenen Integrationen vorgenommenen Änderungen auf heute Morgen **zurückgesetzt**. Die Integrationen neuer Server, die nach dem Absturz beigetreten sind, _sollten_ erhalten bleiben. Vielen Dank für Ihre anhaltende Geduld..

Apr 12, 19:00:00 GMT+0
Analyse - Wir haben jetzt mit dem Datenbanksicherungsprozess begonnen. Während dieser Zeit gleichen wir alle Änderungen ab, die seit dem Ausfall von heute Morgen vorgenommen wurden. Es kann einige Zeit dauern, bis alle Datensätze verarbeitet sind. Wir werden versuchen, alle von Twitch, YouTube usw. empfangenen Daten zu speichern, um die Pings nach der Ausfallzeit wiederherzustellen. Bitte behalten Sie es hier im Auge oder treten Sie für weitere Informationen unserem Discord-Server unter <https://pingcord.xyz/help> bei..

Duration: 3 hours and 26 minutes

Affected Components: IRIS-Aufnahme, Webseite

Apr 12, 06:45:46 GMT+0
Analyse - Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren..

Apr 12, 10:11:29 GMT+0
Gelöst - Die betroffenen Probleme wurden behoben. Wir werden die Dienste weiterhin genau überwachen. Wir entschuldigen uns für etwaige Unannehmlichkeiten..

Apr 12, 07:10:04 GMT+0
Überwachung - Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!.

Duration: 3 hours and 47 minutes

Affected Components: Postdienst, IRIS-Aufnahme

Jan 3, 19:00:00 GMT+0
Gelöst - Dieser Vorfall wurde behoben..

Jan 3, 15:13:19 GMT+0
Analyse - Wir untersuchen derzeit eine erhöhte Ereignisverzögerungsrate..

Jan 3, 18:28:01 GMT+0
Überwachung - Das Grundproblem wurde identifiziert und die Ereignisse werden nun normal verarbeitet. Wir gehen davon aus, dass alle Ereignisse innerhalb der nächsten Minuten aus unserem Warteschlangensystem gelöscht werden. Vielen Dank für Ihre Geduld..

Duration: 1 day, 21 hours and 1 minute

Affected Components: IRIS-Aufnahme, Webseite

Dec 29, 21:19:00 GMT+0
Analyse - <p>Die Pingcord-Website ist derzeit nicht verfügbar. Wir untersuchen die Grundursache des Problems und werden diese Seite mit weiteren Updates aktualisieren.</p>.

Dec 29, 22:04:01 GMT+0
Gelöst - <p>Pingcord funktioniert wieder normal und Pings sollten wie gewohnt eingehen. Vielen Dank für Ihre Geduld!</p>.