Kinescope - Meldingsgeschiedenis

✅ Het incident is opgelost en de dienstverlening is volledig hersteld. Onze excuses voor het eventuele ongemak.

Wat was het probleem:
Netwerkingenieurs constateerden een overbelasting op de datacenter-datacenterlijn, wat leidde tot een vertraging van de verzoeken binnen zowel de onderlinge verbinding van diensten en de database, als de oorsprong van verkeer in het CDN.

Wat we deden:
Nadat de overbelasting was geëlimineerd, werd de snelheid van de verzoeken binnen het netwerk weer normaal en werden de services volledig hersteld. Wanneer u met het configuratiescherm werkt, wordt u aangeraden opnieuw in te loggen op uw persoonlijke account en de cache opnieuw in te stellen.

Wat wij gaan doen om te voorkomen dat dit nogmaals gebeurt:
Om herhaling van de situatie te voorkomen, zullen we de aard van het verkeer en de route onderzoeken die hebben geleid tot de overbelasting van een speciaal communicatiekanaal met hoge capaciteit, interne waarschuwingen aan dit kanaal toevoegen en preventief de automatisering activeren.

We hebben het probleem met het laden van de videospeler opgelost. We hebben een probleem ontdekt met een afzonderlijke groep omleidingsverzoeken met fouten naar niet-bestaande assets. Wij hebben tijdelijk een aparte dienst geïmplementeerd die ze apart verwerkt. We blijven het incident bestuderen.

Het was mogelijk om erachter te komen dat de tijd die wordt besteed aan het werken met de database sterk is toegenomen, terwijl de database zelf er niet onder lijdt en er geen lange vragen in zitten. Daarnaast onderzoeken we het interne netwerk op vertragingen. Onze excuses voor het veroorzaakte ongemak; specialisten van alle profielen zijn betrokken bij het oplossen van problemen.

🚨 De exacte oorzaak van de servicestoring wordt nog opgehelderd, dus we kunnen de timing van de oplossing niet noemen. De infrastructuur en video zijn veilig, het probleem is software, wat leidt tot een trage reactie op verzoeken van de dienst die verantwoordelijk is voor het laden van de speler en het configuratiescherm.

De reden voor de gedeeltelijke onbeschikbaarheid is te wijten aan een softwareprobleem in een van de interne services. Alle video's zijn volledig intact, er zijn geen infrastructuurstoringen. Er is een vertraging bij het laden van inhoud in het configuratiescherm en de ingebouwde spelers, evenals in de API

Incident volledig opgelost, uploads weer beschikbaar via UI en API. Onze excuses voor het ongemak.

API is now operational! This update was created by an automated monitoring service.

API is now operational! This update was created by an automated monitoring service.