Kinescope - 🚨 Er zijn problemen met het laden van de interface van het configuratiescherm en de videospeler. – Incidentdetails

🚨 Er zijn problemen met het laden van de interface van het configuratiescherm en de videospeler.

Opgelost
Grote storing
Begon op 30 dagen geledenDuurde ongeveer 5 uur

Getroffen

kinescope.io

Operationeel van 6:40 AM naar 11:30 AM

Dashboard

Grote storing van 6:40 AM naar 8:30 AM, Gedeeltelijke storing van 8:30 AM naar 11:30 AM

Uploading

Grote storing van 6:40 AM naar 8:30 AM, Gedeeltelijke storing van 8:30 AM naar 11:30 AM

Player embeds

Grote storing van 6:40 AM naar 8:30 AM, Gedeeltelijke storing van 8:30 AM naar 9:45 AM, Operationeel van 9:45 AM naar 11:30 AM

API

Grote storing van 6:40 AM naar 8:30 AM, Gedeeltelijke storing van 8:30 AM naar 11:30 AM

DNS

Operationeel van 6:40 AM naar 11:30 AM

Updates
  • Opgelost
    Opgelost

    ✅ Het incident is opgelost en de dienstverlening is volledig hersteld. Onze excuses voor het eventuele ongemak.

    Wat was het probleem:
    Netwerkingenieurs constateerden een overbelasting op de datacenter-datacenterlijn, wat leidde tot een vertraging van de verzoeken binnen zowel de onderlinge verbinding van diensten en de database, als de oorsprong van verkeer in het CDN.

    Wat we deden:
    Nadat de overbelasting was geëlimineerd, werd de snelheid van de verzoeken binnen het netwerk weer normaal en werden de services volledig hersteld. Wanneer u met het configuratiescherm werkt, wordt u aangeraden opnieuw in te loggen op uw persoonlijke account en de cache opnieuw in te stellen.

    Wat wij gaan doen om te voorkomen dat dit nogmaals gebeurt:
    Om herhaling van de situatie te voorkomen, zullen we de aard van het verkeer en de route onderzoeken die hebben geleid tot de overbelasting van een speciaal communicatiekanaal met hoge capaciteit, interne waarschuwingen aan dit kanaal toevoegen en preventief de automatisering activeren.

  • Monitoring
    Monitoring

    We hebben het probleem met het laden van de videospeler opgelost. We hebben een probleem ontdekt met een afzonderlijke groep omleidingsverzoeken met fouten naar niet-bestaande assets. Wij hebben tijdelijk een aparte dienst geïmplementeerd die ze apart verwerkt. We blijven het incident bestuderen.

  • Geïdentificeerd
    Geïdentificeerd

    Het was mogelijk om erachter te komen dat de tijd die wordt besteed aan het werken met de database sterk is toegenomen, terwijl de database zelf er niet onder lijdt en er geen lange vragen in zitten. Daarnaast onderzoeken we het interne netwerk op vertragingen. Onze excuses voor het veroorzaakte ongemak; specialisten van alle profielen zijn betrokken bij het oplossen van problemen.

  • Onderzoeken
    Update

    🚨 De exacte oorzaak van de servicestoring wordt nog opgehelderd, dus we kunnen de timing van de oplossing niet noemen. De infrastructuur en video zijn veilig, het probleem is software, wat leidt tot een trage reactie op verzoeken van de dienst die verantwoordelijk is voor het laden van de speler en het configuratiescherm.

  • Onderzoeken
    Update

    De reden voor de gedeeltelijke onbeschikbaarheid is te wijten aan een softwareprobleem in een van de interne services. Alle video's zijn volledig intact, er zijn geen infrastructuurstoringen. Er is een vertraging bij het laden van inhoud in het configuratiescherm en de ingebouwde spelers, evenals in de API

  • Onderzoeken
    Onderzoeken

    🚨 Er zijn problemen met het laden van de interface van het configuratiescherm en de videospeler.